Правильный файл robots.txt

 
Посетитель
no avatar
Сообщений: 8
Здравствуйте сообщество. Нужен правильно настроенный файл robots.txt для коробочной версии ИнстантМапс. Поделитесь, у кого есть пожалуйста
Посетитель
small user social cms
Медаль
Сообщений: 667
Почитайте тут и сделайте как Вам нужно. Просто у каждого свои задачи бывают.
Ещё- директива Crawl-delay для Google не работает.
Редактировалось: 1 раз (Последний: 7 марта 2014 в 18:20)
Надёжный хостинг от 90 руб.
В начало страницы
Предыдущая темаСледующая тема Перейти на форум:
Быстрый ответ
Чтобы писать на форуме, зарегистрируйтесь или авторизуйтесь.