Закрыть не вредные внешние дубли сайта

#1 21 августа 2016 в 20:37
В название топика вкралась "не".
Закрыть вредные внешние дубли сайта


Последнее время появляются умники типо zozor_._ru Переходить не обязательно там только строка ввода и все.
Суть такая, введя любой сайт или они парсят, появляются дубли вашего сайта, но уже на их поддомене.
Пример моря проиндексированных как бы на их поддомене.
Иллюстрация

Обезопасить свой сайт просто.
В общем добавьте IP этого сайта в бан, в файле .htaccess
88.202.230.151
Получим:
## USER IP BANNING
<Limit GET POST>
order allow,deny
deny from 88.202.230.151
allow from all
</Limit>

Проверив у них на сайте, ваш сайт выдаст "Access forbidden!"

Стоит сделать.
#2 22 августа 2016 в 01:23
А объясните для чего эти умники это делают?
#3 22 августа 2016 в 06:41

А объясните для чего эти умники это делают?

zeozao
От варианта для тех у кого хост не прописан в роботсе, подставить все что угодно и иметь профит себе, слив трафа и до просто загадить конкурентов, под заказ и тд.
Хотя вариантов думаю масса всяких.

Надо наверно продумать вариант по рефереру банить, не проверял, но что то типо того

  1. RewriteEngine on
  2. # Options +FollowSymlinks
  3.  
  4. RewriteCond %{HTTP_REFERER} zozor\.ru [NC]
  5. RewriteRule .* - [F]
И вот еще вариант подкинули:
используя правило апача.


  1. # nginx configuration
  2. location / {
  3. if ($http_referer ~* "zozor\.ru"){
  4. return 403;
  5. }
  6. }
#4 22 августа 2016 в 07:36
Такой сайт не один. Схема работает давно, таких сайтов только я знаю более 2 десятков. Прописывать от всех не получится, ибо просто сменят домен, поисковик сам откинет это.
#5 22 августа 2016 в 07:44

поисковик сам откинет это.

letsgo
Не забывать прописывать главное зеркало, но опять же траф даже с не главной выдачи летит.
А ждать пока откинет тот же гугл можно очень долго, мы же знаем сколько у него может хранится кеш, годами laugh
Терять что то, так же не вариант, так что думается есть смысл прописать от того, что нашел.

Схема работает давно, таких сайтов только я знаю более 2 десятков.

letsgo
Укажите урлы этих сайтов тут и возможно или точнее у кого есть доступ к фаеру, можно прописать правила.
У кого нет, можно что то другое разработать.
Будет полезно всем.

ибо просто сменят домен

letsgo
По моим наблюдениям, не меняют часто, так как сайтов очень много и закрывают от них далеко не все, им хватает тех кто просто и не знает о таком.

В любом случаи полезно озаботится.
Вы не можете отвечать в этой теме.
Войдите или зарегистрируйтесь, чтобы писать на форуме.
Используя этот сайт, вы соглашаетесь с тем, что мы используем файлы cookie.