EzoicBot-Nicheiq: почему этот бот может работать на рост вашего же сайта

Если фильтровать access.log по ezoicbot-nicheiq, часто всплывает целый пласт машинных хитов — это и есть EzoicBot-Nicheiq, один из специализированных краулеров семейства EzoicBot. EzoicBot-Nicheiq — часть инструмента NicheIQ в панели Ezoic, технологической платформы для цифровых издателей. NicheIQ даёт публикаторам подсказки по ключевым словам и темам, тестирует варианты заголовков страниц (title tag testing) и находит битые ссылки для исправления — то есть напрямую работает на рост трафика того же сайта, который этот бот обходит. Оператор: Ezoic Inc. — платформа монетизации и оптимизации для цифровых издателей. Ключевой момент: если сайт подключён к Ezoic, этот бот, скорее всего, обслуживает инструмент, которым сама команда сайта уже пользуется — прежде чем блокировать, стоит проверить, используется ли Ezoic.

Что такое EzoicBot-Nicheiq

Зачем EzoicBot-Nicheiq приходит на сайт

Ezoic описывает свой основной краулер (EzoicBot) как инструмент для анализа того, как сайт, поисковые системы и интернет в целом работают вместе — чтобы помочь публикаторам лучше понимать собственный сайт. Nicheiq — специализированный вариант именно под функцию роста трафика.

• Какие зоны чаще трогает: контентные страницы — для анализа тем, ключевых слов и заголовков
• Что ищет: темы и ключевые слова для рекомендаций, варианты заголовков для A/B-тестирования, неработающие ссылки, требующие исправления
• Чем отличается от браузерного пользователя: нет обычной сессии, регулярные повторные обходы контентных страниц по расписанию сервиса Ezoic

Типичный кейс: маркетинг видит всплеск хитов в Метрике/GA, но сессии пустые. Причина — EzoicBot-Nicheiq. Прежде чем что-либо отключать, стоит выяснить, не подключён ли сайт к Ezoic — если да, этот трафик обслуживает инструмент, который сама команда, возможно, использует для роста контента.

Семейство EzoicBot: не только Nicheiq

EzoicBot — зонтичное название для нескольких специализированных краулеров Ezoic, каждый со своим product-токеном в UA:

• EzoicBot-Nicheiq — подсказки по темам/ключевым словам, тестирование заголовков, поиск битых ссылок
• EzoicBot-IntegrationCheck — проверка технической интеграции Ezoic на сайте
• Общий EzoicBot — краулер с desktop- и mobile-вариантами для общего анализа того, как сайт работает с поисковыми системами

Важный нюанс: desktop- и mobile-варианты одного и того же краулера в robots.txt обычно управляются одним product-токеном и не разделяются отдельно, но разные функциональные краулеры (как Nicheiq и IntegrationCheck) используют разные токены — их можно и стоит настраивать по отдельности.

Нагрузка и риски

Отдельной строки в публичной сводке top-bot TrafficVeil у ezoicbot-nicheiq может не быть, но в категории «Прочие краулеры и сервисы» такие агенты дают характерный фон: фоновый шум в аналитике, расход CPU/bandwidth и искажение статистики «живого» трафика. Смотрите не только абсолютный RPS, но и качество хитов: глубина обхода, повторы одних и тех же URL, отсутствие cookie/сессий и концентрация на контентных страницах, а не на служебных разделах.

Как найти EzoicBot-Nicheiq в логах

# Базовый поиск
grep -i "ezoicbot-nicheiq" /var/log/nginx/access.log

# Топ URL, которые вычитывает бот
grep -i "ezoicbot-nicheiq" /var/log/nginx/access.log | awk '{print $7}' | sort | uniq -c | sort -rn | head

# Топ IP за этим UA
grep -i "ezoicbot-nicheiq" /var/log/nginx/access.log | awk '{print $1}' | sort | uniq -c | sort -rn | head

# Суточная активность
grep -i "ezoicbot-nicheiq" /var/log/nginx/access.log | awk '{print $4}' | cut -d: -f1 | sort | uniq -c

Верификация

Официального публичного списка IP Ezoic не публикует, поэтому строке UA напрямую доверять нельзя. Первый и самый быстрый шаг верификации — проверить в панели Ezoic (если сайт подключён к сервису), активен ли NicheIQ, прежде чем переходить к IP/ASN-проверке:

IP="1.2.3.4"
whois -h whois.cymru.com " -v $IP"
dig +short -x "$IP"

robots.txt для EzoicBot-Nicheiq

# Жёсткий запрет именно этого краулера семейства
User-agent: EzoicBot-Nicheiq
Disallow: /

# Разрешить всё
User-agent: EzoicBot-Nicheiq
Allow: /

# Компромисс: закрыть служебные разделы, оставить публичный контент
User-agent: EzoicBot-Nicheiq
Disallow: /admin/
Disallow: /cart/
Disallow: /checkout/
Disallow: /account/
Disallow: /api/
Allow: /

Важно: если сайт использует Ezoic, полная блокировка отключит функции NicheIQ — подсказки по ключевым словам, тестирование заголовков и обнаружение битых ссылок в вашей же панели.

Блокировка вручную и через TrafficVeil

Nginx

if ($http_user_agent ~* "ezoicbot-nicheiq") {
    return 403;
}

limit_req_zone $binary_remote_addr zone=ezoicbotnicheiq:10m rate=10r/m;
location / {
    if ($http_user_agent ~* "ezoicbot-nicheiq") {
        limit_req zone=ezoicbotnicheiq burst=20 nodelay;
    }
}

Apache (.htaccess)

RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} ezoicbot-nicheiq [NC]
RewriteRule ^ - [F,L]

TrafficVeil

• Найдите ezoicbot-nicheiq / EzoicBot-Nicheiq в ботах домена или в /system/bots
• Сайт подключён к Ezoic и использует NicheIQ — оставляйте allow
• Ezoic на сайте не используется — можно ставить запрет без риска для функциональности
• После изменения сверьте логи: хиты ezoicbot-nicheiq должны уйти в блок/лимит, а поисковики Google/Yandex остаться без изменений

Рекомендации: что делать с EzoicBot-Nicheiq

• Сайт использует Ezoic и NicheIQ — Allow, блокировка отключит подсказки по ключевым словам, тестирование заголовков и поиск битых ссылок
• Ezoic на сайте не используется — Disallow/403 через явный product-токен, критичной пользы визиты не несут
• Нагрузка мешает, но сервис нужен — rate-limit как промежуточный шаг вместо полного запрета
• Не режьте слишком широко User-agent: *, чтобы случайно не закрыть Googlebot/YandexBot вместе с ezoicbot-nicheiq

С кем не путать EzoicBot-Nicheiq