Клоны сайтов

Fontanchik

Новичок
Регистрация
24 Фев 2017
Сообщения
31
Реакции
0
Баллы
6
Привет, нашел кучу разных клонов своего сайта уже болтающиеся в индексе, есть даже клоны с редериктом на партнерки. Подскажите как с этим бороться?
 

Ivan

Новичок
Регистрация
5 Мар 2017
Сообщения
88
Реакции
15
Баллы
8
вычислить айпи клонов и заблокировать
 

Fontanchik

Новичок
Регистрация
24 Фев 2017
Сообщения
31
Реакции
0
Баллы
6
Таким образом пойдет ?
Order Allow,Deny
Allow from All
Deny from 111.222.333.444
 

Core System

Новичок
Регистрация
26 Фев 2018
Сообщения
14
Реакции
1
Баллы
3
@Fontanchik, Из готовых и бесплатных решений, можете воспользоватся AntiBot v4 для блокировки клонировщиков.
На практике клонировщики меняют IP, сегодня вы можете заблокировать 1 IP, а завтра появятся еще клонировщики на других доменах с другими IP, а вы узнаете о них только после того как они попадут в индекс, поэтому блокировать их нужно еще до их создания.
 
Последнее редактирование:

Core System

Новичок
Регистрация
26 Фев 2018
Сообщения
14
Реакции
1
Баллы
3
Можно реализовать самостоятельно в CMS по такому правилу.

Первый запрос IP:
*) Выдаете контент
*) Посредством cms/сервера выдаете проверочные cookie #1
*) В контенте выдаете код на JavaScript который ставит пользователю cookie #2, но не сразу а спустя 3 секунды пребывания на сайте.

Второй запрос от IP:
*) cookie #1 нету ?, отправляйте в бан, это бот.
*) Есть cookie #1 и cookie #2 ?, это реальный пользователь.
*) cookie #1 есть но нету cookie #2 ?, добавьте счетчик для IP и считайте количество запросов.

4й запрос от IP:
*) Все еще нету cookie #2 ?, блокируйте, это бот.

1) Поисковые боты проверяйте через PTR запись и блокируйте всех кто не прошел проверку.
2) Для заблокированных IP выводите простую заглушку, например такую Защита от ботов , которая ставит валидные cookie и позволяет белому пользователю попасть на сайт.

В данном примере вы избавитесь от плохих ботов, спамеров, парсеров, клонировщиков, разгрузите канал и CPU, при этом оставите доступ для белых пользователей.
 

VAULT

Новичок
Регистрация
5 Май 2017
Сообщения
94
Реакции
8
Баллы
18
а как их найти вообще?
 

Fontanchik

Новичок
Регистрация
24 Фев 2017
Сообщения
31
Реакции
0
Баллы
6
Я беру описание своего сайта и просто вбиваю в поисковую строку яндекса с гуглом и пошел по выдаче искать, обычно на первых 5 страницах весит клон если он есть
 
Сверху Снизу