Забрана за индексиране на страница

SoMeAny

Registered
http://saita.com/ne6to/get/ne6to2.html

Как да забраня на гугъл бота да индексира линкове от този тип
 
Код:
User-agent: Googlebot
Disallow: /report-*.html
Не трябва да се пише адреса на сайта (домейна), защото robots.txt отговаря само за този домейн!
* - Играе ролята на Wildcard. С две думи, на негово място може да има всичко! Разбра ли каква е логиката тук, или пак има нещо неясно ? :)
 
F1r3Fl3x
мерси аз го бях направил
Disallow: /report-*

но не бях сигурен дали е правилно

само да питам къде мога да проверявам кой страници е индексирал гугъл

давам ти +1
 

Back
Горе