Клоны сайтов

[Fontanchik]

Привет, нашел кучу разных клонов своего сайта уже болтающиеся в индексе, есть даже клоны с редериктом на партнерки. Подскажите как с этим бороться?

 

[Ivan]

вычислить айпи клонов и заблокировать

 

[Fontanchik]

Таким образом пойдет ?
Order Allow,Deny
Allow from All
Deny from 111.222.333.444

 

[Core System]

@Fontanchik, Из готовых и бесплатных решений, можете воспользоватся AntiBot v4 для блокировки клонировщиков.
На практике клонировщики меняют IP, сегодня вы можете заблокировать 1 IP, а завтра появятся еще клонировщики на других доменах с другими IP, а вы узнаете о них только после того как они попадут в индекс, поэтому блокировать их нужно еще до их создания.

 

[Core System]

Можно реализовать самостоятельно в CMS по такому правилу.

Первый запрос IP:
*) Выдаете контент
*) Посредством cms/сервера выдаете проверочные cookie #1
*) В контенте выдаете код на JavaScript который ставит пользователю cookie #2, но не сразу а спустя 3 секунды пребывания на сайте.

Второй запрос от IP:
*) cookie #1 нету ?, отправляйте в бан, это бот.
*) Есть cookie #1 и cookie #2 ?, это реальный пользователь.
*) cookie #1 есть но нету cookie #2 ?, добавьте счетчик для IP и считайте количество запросов.

4й запрос от IP:
*) Все еще нету cookie #2 ?, блокируйте, это бот.

1) Поисковые боты проверяйте через PTR запись и блокируйте всех кто не прошел проверку.
2) Для заблокированных IP выводите простую заглушку, например такую Защита от ботов , которая ставит валидные cookie и позволяет белому пользователю попасть на сайт.

В данном примере вы избавитесь от плохих ботов, спамеров, парсеров, клонировщиков, разгрузите канал и CPU, при этом оставите доступ для белых пользователей.

 

[VAULT]

а как их найти вообще?

 

[Fontanchik]

Я беру описание своего сайта и просто вбиваю в поисковую строку яндекса с гуглом и пошел по выдаче искать, обычно на первых 5 страницах весит клон если он есть