по сайту
сегодня обнаружил файла robots.txt нету
Заметил в поиске много главных с таким содержанием:
site.ru/?C=M;O=D
site.ru/index.php?view=search&query=сериалы+онлайн+смотреть&look=allwords
просела именно главная с вч
что прописать в robots.txt?
может и не в роботсе дело а сайт надо подкрутить чтобы "левые" урл в поиск не попадали
ну или, если понимаете, о чем говорите, то да, в роботс запреты добавьте
Disallow: /?C=M;O=D
Disallow: /*.php
или вопрос в целом о роботс и том как его составить?