директивы Allow и Disallow

 
Посетитель
small user social cms
МедальАвторитет форумаКубок зрительских симпатийПочетный донор проекта
Сообщений: 2928
Уведомление от яши)
9.03.2012
Новые правила обработки директив Allow и Disallow в файлах robots.txt

"Уведомляем вас об изменениях в обработке директивы 'Allow' файла robots.txt, с помощью которого вы можете разрешить или запретить индексирование сайта поисковым роботом Яндекса.
По новым правилам, если страница сайта попадает под действие нескольких директив 'Allow' и/или 'Disallow', то будет применяться директива с наибольшей длиной префикса URL. При определении длины префикса спецсимвол '*' не учитывается.
Если на вашем сайте в robots.txt совместно используются директивы 'Allow' и 'Disallow', пожалуйста, проверьте их на соответствие новым стандартам.
"
Посетитель
small user social cms
МедальКубок зрительских симпатийАвторитет форума
Сообщений: 1035
Как сейчас должен выглядеть robots.txt?
Посетитель
small user social cms
Медаль
Сообщений: 501
Rossoman:
Как сейчас должен выглядеть robots.txt?
Как и раньше, без Allow, так как данная директива используется в крайнем случае и если у вас раньше использовалась, то тут общие виды роботса не помогут, нужно конкретно под вас его составлять, а если не использовалась, то просто пропустите данную новость
Я готов ставить ваши интересы на второе место после собственных, и не верьте НИКОМУ... кто пообещает вам больше
В начало страницы
Предыдущая темаСледующая тема Перейти на форум:
Быстрый ответ
Чтобы писать на форуме, зарегистрируйтесь или авторизуйтесь.