Вчера был ап яндекса.
Зашел в вебмастер посмотреть как дела, внешние ссылки, о-ооо поприбавилось . А это что за не понятные домены ссылаются? Перехожу. Буржуйский сайт про кулинарию , под статьей комментарии, в одном из них ссылка на мой сайт. Перехожу по ссылке, попадаю на свой сайт на страницу компонента Редирект и скачивание, таймер отработал, и я попадаю на другой буржуйский сайт.
Смотрю исходный страницы на которой размещена ссылка, ссылка вида: мой сайт/redirect?url=http://сайт на который происходит редирект
Вопросы к сообществу:
Как так получилось и как с этим бороться?
Как поисковики могут отреагировать на подобные ссылки — редиректы?
#1
25 августа 2015 в 23:50
#3
26 августа 2015 в 00:08
У меня закрыто так: Disallow: /go/Во первых
Не прокатит? Именно
?Disallow: /redirect?url=
В вебмастере в отчете "Исключенные страницы" ссылки вида /redirect?url= находятся в "Документ запрещен в файле robots.txt"
Но со сторонних сайтов "яша" их видит и ещё и индексирует
Сегодня в 15:00
#4
26 августа 2015 в 20:03
Яша что-то последнее время совсем плохо стал работать. Майл в разы быстрее в поиск забирает новый контент, а Яша берет в поиск не новое, а ковыряется в старом (да и то потом про старое забывает и из поиска выбрасывает). Ведёт себя как старик маразматик.
#5
26 августа 2015 в 20:10
Яше не долго осталось, если гугл под санкции не попадет как враг всего человечества, а вообще странна тенденция — на инстанте яндекс идет, на других движках гугл, даже региональных
#6
29 августа 2015 в 13:31
Больше никто ничего не подскажет?
ПопробуюБольше никто ничего не подскажет?
Многие забывают о том, что прописанные правила в robots.txt это не запрет, а рекомендации для поисковых систем. Безусловно они им следуют внутри сайта и тут проблем практически не бывает, ну возможны у очень молодых сайтов.
Но вот если идет обход как бы внутреннего правила внешними средствами, тут уже подхватить может ссылочку и дубли и тд, цветное seo в общем.
По этому нужно или можно поставить запрет уже реальный, который будет работать, дать такой запрет может .htaccess
Только как пример и вариант (надо проверять, точнее это просто направление)!!!:
SetEnvIfNoCase User-Agent "^Googlebot" search_bot SetEnvIfNoCase User-Agent "^Yandex" search_bot SetEnvIfNoCase User-Agent "^Yahoo" search_bot <FilesMatch "^.*/go/"> Order Allow,Deny Allow from all Deny from env=search_bot </FilesMatch>
Такое можно найти на серче лет так еще 10 назад )))Яше не долго осталось,
#8
29 августа 2015 в 18:20
garry, Спасибо, попробую.
Одно печалит, что домен наверное попал в дженах базы
, а чего проверять, правило есть правило, запрещаем доступ к /go/ выше обозначенным ботам.надо проверять
Одно печалит, что домен наверное попал в дженах базы
#9
28 сентября 2015 в 12:07
Сегодня заблокировали аккаунт хостинга за за спамвертайзинг. Кто то использует ридерект сайт.ru/redirect?url=-aHR0cDovL2NvZmUuZGlldGEyNHgucnUvP2wwOWZzczd1aWs2YQ== и эту ссылку спамит по сайтам.
#10
28 сентября 2015 в 12:20
А как вообще сделать что бы ссылки в блогах и на форумах были прямые, без go/url а "как есть"?
Наверно это будет самый оптимальный вариант.
Если просто отключить компонент редирект то ссылки остаются в прежнем виде и не работают.
Наверно это будет самый оптимальный вариант.
Если просто отключить компонент редирект то ссылки остаются в прежнем виде и не работают.
Я объяснял хостеру что редирект используют тысячи сайтов, но он говорит поступила жалоба, а так как мой сайт стоит как основной значит я и виноват, сейчас вроде сайт заработал, но таких случаев больше не хотелось бы. Сайт на InstantCMS v1.10.4
#12
28 сентября 2015 в 13:12
Вообще проще наверно отключить его и оставить прямыми ссылки. Если форум, блог модерируется, то ссылки на плохие сайты\спам чистится в любом случае есть редирект или нет его. Если это нормальные ссылки по теме поста, обсуждения, нет ничего страшного что они будут прямыми и индексируемыми явно, если это спам то удалять нужно в любом случае. есть редирект или его нет.
По поводу Яндекса не уверен, но Гугл точно отлично индексирует эти ссылки через редирект, еще и как то странно выводит, указано урл вашего сайта а при клике на ссылку идет переход на сайт по ссылке. Риски связанные со спам атакой по моему больше чем полезные свойства редиректа в нынешнем виде.
По поводу Яндекса не уверен, но Гугл точно отлично индексирует эти ссылки через редирект, еще и как то странно выводит, указано урл вашего сайта а при клике на ссылку идет переход на сайт по ссылке. Риски связанные со спам атакой по моему больше чем полезные свойства редиректа в нынешнем виде.
#13
28 сентября 2015 в 13:26
Пробовал это instantcms.ru/forum/thread19694.html но после изменений и редактирования поста ссылка все равно имеет вид /redirect?url=-aHR0cDovL3d3dy5pbnN0YW50Y21zLnJ1L2ZvcnVtL3RocmVhZDIyNDA1LTEuaHRtbA==
#14
30 сентября 2015 в 09:26
Отключил редирект, сейчас все ссылки в 404 перешли, хостер предупредил, что опять заблокируют если не исправлю. Оставлять без редиректа, когда на сайте много ссылок, тоже не вариант, от поисковиков можно получить.