Страницы товаров, как правильно закрыть в роботс?

 
Посетитель
small user social cms
МедальПочетный донор проекта
Сообщений: 656
Всем привет, коллеги!
Столкнулся с таким вопросом - есть ссылки на сайте, которые без описания и это страницы списков типа - https://мойсайт/price?page=3 к примеру.
Скажите, кто нибудь закрывал в роботсе таким методом?

Disallow: /price?page=3$
Disallow: /price?page=4$
Disallow: /price?page=5$
Disallow: /price?page=6$

В данный момент закрыл, жду обновления, но у меня есть сомнения по этому поводу, поэтому спрашиваю)))
Редактировалось: 1 раз (Последний: 18 мая 2020 в 02:00)
Посетитель
small user social cms
Медаль
Сообщений: 160
skewes,
Disallow: /price?page=*
Реклама
cms
Посетитель
small user social cms
МедальПочетный донор проектаАвторитет форумаКубок зрительских симпатийПочетный донор проекта
Сообщений: 2667
skewes, так я в яндекс.вебмастере есть тест роботса.
Пройдите туда и укажите ссылку, которую не хотите видеть. И яндекс выдаст, индексируется ли она, или закрыта роботсом.
Виджеты, поля и компоненты для instantcms 2 http://www.zau4man.ru/
Посетитель
small user social cms
МедальКубок зрительских симпатийАвторитет форума
Сообщений: 1269
А зачем закрывать?
Система уже умеет вставлять номер страницы к заголовку и описание
Дополнения для InstantCMS 2 | Готовый сайт Доска объявлений
Посетитель
small user social cms
Медаль
Сообщений: 216
Правильнее не закрывать, а указать каноникал, чтобы на странице /price?page=3 в блоке head было указано
Код PHP:
  1. <link rel="canonical" href="https://site/price" >
А также уникализировать мета теги, чтобы в тайтле было "Название категории - Станица %номер%"
Почему каноникал лучше?
Если указать запрет индексации страниц пагинации, то страницы товаров будут получать меньше веса, так как робот при сканировании не будет видеть части ссылок, а также возможны (маловероятно, но все же) проблемы с индексацией товаров
Раньше, когда боты были не такие умные, рекомендовали закрывать страницы пагинации от индексации.
Сейчас же рекомендуют использовать каноникал.
Если указан каноникал, то Гугл не будет брать такие страницы в индекс, а Яндекс же может показывать каноникал на свое усмотрение.
А в целом, принимать решение о том закрывать или нет, нужно ориентируясь только на ваш сайт и на то как он индексируется и ранжируется.
Редактировалось: 6 раз (Последний: 18 мая 2020 в 13:49)
Быстрые VPS в Германии
Посетитель
small user social cms
МедальПочетный донор проекта
Сообщений: 656
@geminisf, я так понял, что "*" звездочка закрывает все после - /price?page=

Zau4man, спасибо большое, посмотрю завтра с утра, сегодня уже сил нет после работы))) голова не хочет соображать вообще, видимо старею ребята))) hoho Посмотрел, там внизу "Разрешены ли URL?". Спасибо, не знал))) Да, в моем случае все гуд, и сейчас после апдейта пишет что все гуд)))

Evanescence, в яшке показывает, что нет описания у страницы, да и может вы говорите о странице товара, а не о списке? Но сейчас все в порядке вроде, посмотрю еще)))

Timmy, спасибо большое за развернутый ответ))) Я не силен в кодинге от слова совсем... Поэтому если я куда-то начинаю лезть и ломать костыли, то потом у меня падает сайт или еще что случается, ну сами понимаете... Поэтому я просто напросто не знаю как и куда это вписывать и боюсь что наломаю дров))) Почитаю о том, что вы написали))) Всем спасибо большое за ответы! + всем)))
Посетитель
small user social cms
Медаль
Сообщений: 160
skewes:
я так понял, что "*" звездочка закрывает все после - /price?page=
Да
Посетитель
small user social cms
МедальКубок зрительских симпатийАвторитет форума
Сообщений: 1269
skewes:
в яшке показывает, что нет описания у страницы
Посмотрел исходный код демо сайта view-source:https://demo.instantcms.ru/news действительно meta тег description отсутствует, пока в настройках типа контента не заполнишь SEO поля
Дополнения для InstantCMS 2 | Готовый сайт Доска объявлений
В начало страницы
Предыдущая темаСледующая тема Перейти на форум:
Быстрый ответ
Чтобы писать на форуме, зарегистрируйтесь или авторизуйтесь.