Столкнулся с таким вопросом — есть ссылки на сайте, которые без описания и это страницы списков типа — мойсайт/price?page=3 к примеру.
Скажите, кто нибудь закрывал в роботсе таким методом?
Disallow: /price?page=3$
Disallow: /price?page=4$
Disallow: /price?page=5$
Disallow: /price?page=6$
В данный момент закрыл, жду обновления, но у меня есть сомнения по этому поводу, поэтому спрашиваю)))
Disallow: /price?page=*
Пройдите туда и укажите ссылку, которую не хотите видеть. И яндекс выдаст, индексируется ли она, или закрыта роботсом.
Система уже умеет вставлять номер страницы к заголовку и описание
Почему каноникал лучше?
Если указать запрет индексации страниц пагинации, то страницы товаров будут получать меньше веса, так как робот при сканировании не будет видеть части ссылок, а также возможны (маловероятно, но все же) проблемы с индексацией товаров
Раньше, когда боты были не такие умные, рекомендовали закрывать страницы пагинации от индексации.
Сейчас же рекомендуют использовать каноникал.
Если указан каноникал, то Гугл не будет брать такие страницы в индекс, а Яндекс же может показывать каноникал на свое усмотрение.
А в целом, принимать решение о том закрывать или нет, нужно ориентируясь только на ваш сайт и на то как он индексируется и ранжируется.
Zau4man,
Evanescence, в яшке показывает, что нет описания у страницы, да и может вы говорите о странице товара, а не о списке? Но сейчас все в порядке вроде, посмотрю еще)))
Timmy, спасибо большое за развернутый ответ))) Я не силен в кодинге от слова совсем… Поэтому если я куда-то начинаю лезть и ломать костыли, то потом у меня падает сайт или еще что случается, ну сами понимаете… Поэтому я просто напросто не знаю как и куда это вписывать и боюсь что наломаю дров))) Почитаю о том, что вы написали))) Всем спасибо большое за ответы! + всем)))
Дая так понял, что "*" звездочка закрывает все после — /price?page=
Посмотрел исходный код демо сайта view-source:https://demo.instantcms.ru/news действительно meta тег description отсутствует, пока в настройках типа контента не заполнишь SEO поляв яшке показывает, что нет описания у страницы