Leikibot стоит отдельного правила в антиботе: это не «ещё один hit», а повторяемый паттерн автоматизации в категории «Прочие краулеры и сервисы». У этого токена есть история: изначально бот принадлежал финской компании Leiki Ltd — платформе семантического AI и поведенческой рекламы (leiki.com). При этом несколько независимых современных каталогов ботов сходятся в другой атрибуции: сегодня Leikibot связывают с DoubleVerify — крупной и известной компанией по верификации цифровой рекламы, brand safety и обнаружению рекламного мошенничества. Возможно, это смена владельца технологии со временем, а не ошибка одного источника — сразу два независимых каталога дают такую атрибуцию, но точную хронологию перехода по открытым данным восстановить нельзя.
1. Что такое Leikibot
По историческим данным 2018 года, реальный трафик Leikibot шёл с хостов grape6.leiki.com и grape8.leiki.com, дочерних от liquidweb.com, с диапазонов 209.59.128.0/18 и 50.28.96.0/19 — но это старые данные, актуальность стоит проверять отдельно. По современному описанию независимых каталогов ботов, Leikibot — это «intelligence gatherer»: анализирует контент страниц для верификации цифровой рекламы, brand safety и обнаружения рекламного мошенничества, действуя в интересах конкретных клиентов, которые платят за такой мониторинг.
| Название | Leikibot |
| User-Agent / паттерн | leikibot — полная строка Mozilla/5.0 (Windows NT 6.3;compatible; Leikibot/1.0; +http://www.leiki.com) |
| Оператор | Исторически — Leiki Ltd (Финляндия, семантический AI и поведенческая реклама); по атрибуции нескольких независимых современных каталогов ботов — сегодня связан с DoubleVerify (верификация цифровой рекламы, brand safety, ad fraud) |
| Роль | Анализ контента страниц для верификации рекламы, brand safety и обнаружения мошенничества в интересах конкретных клиентов-подписчиков сервиса |
| Документация / ориентир | leiki.com — исторический first-party ориентир; актуальной документации специально для вебмастеров от текущего оператора не найдено |
| Список IP | ❌ Официального актуального списка не найдено — исторические диапазоны 2018 года (209.59.128.0/18, 50.28.96.0/19) могли устареть |
| robots.txt | По историческому наблюдению — не соблюдает; официального метода верификации бот не публикует, поэтому совпадение UA — лишь подсказка, а не доказательство |
| Пометка TrafficVeil | Нежелательный / Прочие краулеры и сервисы |
2. Зачем Leikibot приходит на сайт
По описанию независимых каталогов, бот посещает сайт не хаотично, а сфокусированно: типичны повторяющиеся запросы к страницам, которые отслеживают конкретные клиенты сервиса — цены, карточки товаров, анонсы и новости, с расписанием от почасового до еженедельного. Сайты, не входящие ни в один клиентский watchlist, могут вообще не увидеть этого бота — присутствие в логах уже само по себе значит, что кто-то платно отслеживает именно ваш контент.
- Какие зоны чаще трогает: публичные URL с ценами, карточками товаров и анонсами — не сайт целиком без разбора;
- Что ищет: изменения цен, товарных листингов и объявлений для клиентов, отслеживающих конкретный сайт или бренд;
- Чем отличается от браузерного пользователя: нет нормальной сессии, повторяемые визиты к одному и тому же узкому набору страниц по расписанию клиента.
Типичный кейс: CDN-трафик дорожает, origin CPU пилит HTML. Фильтр по leikibot показывает регулярные обращения именно к страницам с ценами или карточками товаров — это подтверждает, что кто-то отслеживает конкретно эти данные, а не случайно сканирует сайт.
3. Нагрузка и риски именно для Leikibot
Отдельной строки в публичной сводке top-bot TrafficVeil у leikibot может не быть, но в категории «Прочие краулеры и сервисы» такие агенты дают характерный фон: фоновый шум в аналитике, расход CPU/bandwidth и искажение статистики «живого» трафика. Поскольку обход сфокусирован на конкретных страницах, а не на всём сайте, серьёзной нагрузки один клиент обычно не создаёт — но если сайт отслеживают сразу несколько подписчиков сервиса одновременно, суммарный трафик на ценовые и товарные страницы может быть заметнее, чем ожидается от одного бота.
4. Как найти Leikibot в логах
Не ищите «просто ботов» — ищите конкретный токен leikibot и обращайте внимание на концентрацию визитов именно на ценах и товарных карточках.
# Базовый поиск
grep -i "leikibot" /var/log/nginx/access.log
# Топ URL, которые вычитывает бот — ожидаемо цены, товары, анонсы
grep -i "leikibot" /var/log/nginx/access.log | awk '{print $7}' | sort | uniq -c | sort -rn | head
# Топ IP за этим UA
grep -i "leikibot" /var/log/nginx/access.log | awk '{print $1}' | sort | uniq -c | sort -rn | head
# Суточная активность — от почасовой до еженедельной, зависит от клиента
grep -i "leikibot" /var/log/nginx/access.log | awk '{print $4}' | cut -d: -f1 | sort | uniq -c
# Отделить от похожих строк
grep -iE "leikibot|dvbot|bot" /var/log/nginx/access.log | wc -lВерификация. Подделать User-Agent может любой скрипт, и оператор Leikibot официально не публикует метод верификации — совпадение строки UA само по себе не доказательство. Для решения allow/deny смотрите связку: UA + частоту + характерную концентрацию именно на ценах и товарных страницах.
IP="1.2.3.4"
whois -h whois.cymru.com " -v $IP"
dig +short -x "$IP"5. robots.txt для Leikibot
# Жёсткий запрет
User-agent: Leikibot
Disallow: /
# Разрешить всё
User-agent: Leikibot
Allow: /
# Компромисс: закрыть деньги/кабинет, оставить публичку
User-agent: leikibot
Disallow: /admin/
Disallow: /cart/
Disallow: /checkout/
Disallow: /account/
Disallow: /api/
Allow: /Важно: ставьте Disallow или 403 для leikibot, если пользы нет. По историческим наблюдениям бот не соблюдает robots.txt — для гарантированной блокировки переходите сразу к правилам на уровне nginx/Apache, Cloudflare (если используется) или TrafficVeil.
6. Блокировка вручную и через TrafficVeil
Nginx
if ($http_user_agent ~* "leikibot") {
return 403;
}
limit_req_zone $binary_remote_addr zone=leikibot:10m rate=10r/m;
location / {
if ($http_user_agent ~* "leikibot") {
limit_req zone=leikibot burst=20 nodelay;
}
}Apache (.htaccess)
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} leikibot [NC]
RewriteRule ^ - [F,L]TrafficVeil
- Найдите leikibot в ботах домена или в /system/bots;
- Для нежелательного сценария — категорию «запретить»; для мягкого — rate-limit;
- Allow только при явной пользе — например, если вы сами клиент сервиса и используете его для отслеживания собственных цен или конкурентов;
- После изменения сверьте логи: хиты Leikibot должны уйти в блок или лимит, а нужные поисковики остаться. Блокировка не влияет на позиции сайта в поисковой выдаче — это не поисковый краулер.
7. Рекомендации: что делать с Leikibot
- Если пользы нет — Disallow/403 для leikibot, если пользы нет;
- Если польза есть (вы сами клиент подобного сервиса мониторинга рекламы) — Allow только при явной пользе от Leikibot;
- Если нагрузка мешает — сначала rate-limit, затем полный запрет; на Cloudflare можно останавливать бота ещё на границе сети, до попадания на origin;
- Не режьте слишком широко User-agent: *, чтобы случайно не закрыть Googlebot/YandexBot;
- Что будет при блокировке: обычно ничего критичного для SEO не теряете, если это не поисковик и не ваш сервисный агент — блокировка безопасна и не влияет на индексацию.
8. С кем не путать Leikibot
| Бот / сосед | Кластер | UA | Комментарий |
| DVbot | Прочие краулеры и сервисы | dvbot | тот же предполагаемый оператор (DoubleVerify), мониторинг качества рекламных транзакций |
| 360Spider | Прочие краулеры и сервисы | 360spider | нежелательный, другой оператор |
| A360-Search | Прочие краулеры и сервисы | a360-search | нежелательный, другой оператор — сбор данных о недвижимости |
| AASA-Bot | Прочие краулеры и сервисы | aasa-bot | нежелательный |
| ActiveComply | Прочие краулеры и сервисы | activecomply | нежелательный, мониторинг комплаенса |
9. Стратегия allow/deny для Leikibot
| Ситуация | Действие |
| Вы сами клиент сервиса мониторинга рекламы | Allow + закрыть /admin /cart /api |
| Только мешает и жрёт ресурсы | Disallow + запрет в TrafficVeil на уровне сервера (robots.txt не гарантирует результат) |
| Нужен доступ, но частота обхода мешает | Rate-limit на nginx/TrafficVeil или на границе CDN |
| Нежелательный по базе TrafficVeil | Deny по умолчанию, исключения — точечно |
| Подозрение на spoofing UA | Официальной верификации нет — смотреть на паттерн (концентрация на ценах/товарах), не только на UA |