Нужно составить файл роботс для сайта

Имеется мой файл, прошу проверить

#1 18 марта 2016 в 12:09
В общем, как скрыть ненужные страницы от поисковых систем, используя роботс. Покопался в интернете, нашел роботс для данной системы (не наш форум) Прошу его проверить. Нужно чтобы индексировались статьи, форум, доска объявлений остальное я думаю не важно


User-agent: Yandex
Disallow: /backup*
Disallow: /board/
Disallow: /components/
Disallow: /templates*
Disallow: /wysiwyg/
Disallow: /includes/
Disallow: /modules/
Disallow: /filters/
Disallow: /catalog*
Disallow: /languages/
Disallow: /users/
Disallow: /core/
Disallow: /install/
Disallow: /video/
Disallow: /login/
Disallow: /admin/
Disallow: /registration/
Disallow: /tag/
Disallow: /search/
Disallow: /forum/memberlist.php*
Disallow: /rss/
Disallow: /*search
Disallow: /*comments
Disallow: /*login
Disallow: /*admin
Disallow: /*registration
Disallow: /index.php$


User-agent: *
Disallow: /backup*
Disallow: /board/
Disallow: /components/
Disallow: /wysiwyg/
Disallow: /includes/
Disallow: /templates*
Disallow: /modules/
Disallow: /filters/
Disallow: /languages/
Disallow: /forum/memberlist.php*
Disallow: /users/
Disallow: /catalog*
Disallow: /core/
Disallow: /install/
Disallow: /video/
Disallow: /login/
Disallow: /admin/
Disallow: /registration/
Disallow: /tag/
Disallow: /search/
Disallow: /rss/
Disallow: /*search
Disallow: /*comments
Disallow: /*login
Disallow: /*admin
Disallow: /*registration
Disallow: /index.php$
Вы не можете отвечать в этой теме.
Войдите или зарегистрируйтесь, чтобы писать на форуме.
Используя этот сайт, вы соглашаетесь с тем, что мы используем файлы cookie.