Роботи при индексиране

eddy

Registered
http://www.javascriptkit.com/howto/robots.shtml

Може ли малко разесняване.Ето в този линк става въпрост за robots.txt.
При него забраняваш роботите(търсачки, спам и т.н.).Да ти обхождат сайта.
Прочетох на друго място, че без проблем ботовете си заобикалят файла.

Вие как мислите ?

Добре ли ще е да се сложи, и да се разреши път само на гоогле и някоя друга търсачка, това ако в случай, че наистина си функционира както трябва.И изобщо имали полза чак от такива мерки за сигурност.Няма ли и други варианти?
 
Други роботи - да.
Специално за гуугъл си работи - и да, има смисъл ако искаш да избегнеш индексирането на специална част от сайта ти.
 

Back
Горе