Robots.txt

ЕСТЬ РЕШЕНИЕ ЗАКРЫТО InstantCMS 2.X

Проблема Яндекс-Вебмастер

#1 30 ноября 2017 в 19:24
Уважаемые посоны!
Я добавил свой свежесозданный сайт https://priestantonio.ru в сервис Яндекс-Вебмастер.
Сейчас вот зашёл глянуть как там у меня и увидел такое вот сообщение:

Возможная проблема:
В файле robots.txt задана противоречивая директива Host
В директиве Host указан домен, где аналогичные указания в файле robots.txt отсутствуют. Чтобы указания директивы Host были учтены, идентичные директивы должны присутствовать в файлах robots.txt всех зеркал сайта.
Проверьте файл robots.txt и устраните противоречия.


Вот мой файл robots.txt:
  1. User-Agent: *
  2. Disallow: /login/
  3. Disallow: /admin/
  4. Disallow: /registration/
  5. Disallow: /search/tag/
  6. Sitemap: https://priestantonio.ru/sitemap.xml
  7. Host: priestantonio.ru
Где тут что не так как надо, подскажите пожалуйста!!
Заранее спасибо.
#2 30 ноября 2017 в 19:47
Поскольку ваш сайт открывается по протоколу HTTPS, то и в роботсе хост должен быть прописан с этим протоколом
Host: priestantonio.ru
#3 30 ноября 2017 в 20:00


Поскольку ваш сайт открывается по протоколу HTTPS, то и в роботсе хост должен быть прописан с этим протоколом
Host: priestantonio.ru

al955

Добавил https.
А больше ничего там менять не надо?
Остальное всё нормально?
#4 30 ноября 2017 в 20:04

А больше ничего там менять не надо?
Остальное всё нормально?

@Boomblik
Остальное все индивидуально и в процессе индексации и возникновения каких-то прецендентов разберетесь. Тут в блогах были дискуссии широкие на тему robots.txt — ищите поиском.
#5 30 ноября 2017 в 20:27
Спасибо всем за помощь.
Считаю вопрос решённым.

Похожие темы

Вопрос по robots.txt

SEO & PR Создана 4 года назад 7 сообщений

robots.txt

SEO & PR Создана 4 года назад 7 сообщений

[ЗАКРЫТО] Не создаётся sitemap.xml

Компоненты Создана 2 года назад 1 сообщение

Используя этот сайт, вы соглашаетесь с тем, что мы используем файлы cookie.