robots.txt ?????

[kkk]

Google ми даде следната грешка при обхождане на мрежата:

Googlebot обхожда сайтовете, като следва връзките от страница към страница. Срещнахме проблеми при обхождането на изброените тук страници, затова те няма да бъдат добавени към индекса ни и няма да се показват в резултатите от търсенето.

В подробност пише:

robots.txt не е достъпен

До колкото знам robots.txt се слага само при забрана за индексиране а аз не искам да забранявам индексирането на страниците.Как да оправя тази грешка?

 

[Amigo0o]

User-Agent: *
Allow: /

напиши тва в robots.txt и го качи

 

[StormBreaker]

Google ми даде следната грешка при обхождане на мрежата:

Googlebot обхожда сайтовете, като следва връзките от страница към страница. Срещнахме проблеми при обхождането на изброените тук страници, затова те няма да бъдат добавени към индекса ни и няма да се показват в резултатите от търсенето.

В подробност пише:

robots.txt не е достъпен

До колкото знам robots.txt се слага само при забрана за индексиране а аз не искам да забранявам индексирането на страниците.Как да оправя тази грешка?

Това не е грешка и няма да ти повлияе на индексирането.

 

[alex95_bg_2]

всъщност ако няма да забраняваш някой директории на бота файла е излишен и "няма да помогне на индексирането" какъвто мит има

 

[Admin]

Google ми даде следната грешка при обхождане на мрежата:

Googlebot обхожда сайтовете, като следва връзките от страница към страница. Срещнахме проблеми при обхождането на изброените тук страници, затова те няма да бъдат добавени към индекса ни и няма да се показват в резултатите от търсенето.

В подробност пише:

robots.txt не е достъпен

До колкото знам robots.txt се слага само при забрана за индексиране а аз не искам да забранявам индексирането на страниците.Как да оправя тази грешка?

Те са дали линкове към страниците където имат проблеми.
Провери ги.
Може сайта за известно време да не е бил достъпен и точно тогава бота да е търсил тези страници.


Може в кода да има тагове забраняващи индексирането.

Провери тези страници които ти ги изписва.