Как запретить ПС индексировать неканоничные страницы

InstantCMS 2.X
#1 22 октября 2019 в 10:57
Доброго дня. Вебмастер яндекса добавляет и выплевывает постоянно разные ненужные страницы на сайте.
1) Например по видеокомпоненту: /rss/feed/comments?tc=content&ts=video&ti=125 (и таких строчек куча то попадает то выпадает).
— далее по видео /video/complain/121
2) /rss/feed/comments?tc=content&ts=category&ti=222 (И другие подобные. Я так понимаю это RSS И как ее запретить ПС добавлять? Потому как весь вебмастер засирается на все типы контента создается такая ерунда. Плюс дальше страницы категорий добавляет.

Буду очень признателен если кто то поможет и подскажет как правильно запретить ПС ненужное добавлять.
Использую 2ку последнюю. Из допов Видео. На сайте используются типы контента. Блоги. Группы. Форум (беспл). В принципе все. Подскажите или киньте если не сложно ссылочку на правильную настройку.
Строго не ругайте. Я нубчик. Но знаю что это не есть хорошо, поэтому ищу решение. Благодарю.
#2 22 октября 2019 в 11:34
rss вообще можно все закрыть от индексации, добавив в роботс

  1.  
  2. Disallow: /rss/*
  3.  
#3 22 октября 2019 в 13:38


rss вообще можно все закрыть от индексации, добавив в роботс

  1.  
  2. Disallow: /rss/*
  3.  

Rainbow

а остальное что в примере как закрыть не подскажете?
#4 22 октября 2019 в 14:21

а остальное что в примере как закрыть не подскажете?

Murrkin

Это и есть для Ваших страниц.
Закроет все ненужные дубли из ленты RSS.
#5 22 октября 2019 в 14:58
chpage=4
а вот такое как закрыть номера категорий и тд.
#6 22 октября 2019 в 15:18


chpage=4
а вот такое как закрыть номера категорий и тд.

Murrkin
  1. Disallow: /*?page=*
Вы не можете отвечать в этой теме.
Войдите или зарегистрируйтесь, чтобы писать на форуме.
Используя этот сайт, вы соглашаетесь с тем, что мы используем файлы cookie.