Adidxbot: что за бот, зачем приходит на сайт и как им управлять

Если фильтровать access.log по adidxbot, часто всплывает целый пласт запросов от одного и того же юзер-агента — это и есть adidxbot, рекламный краулер Microsoft из семейства Bing-ботов. adidxbot загружает посадочные страницы объявлений для проверки их качества и соответствия рекламной политике Bing Ads. В отличие от обычных поисковых ботов, он приходит не за индексацией сайта в поиске, а по конкретному триггеру — активной рекламной кампании, которая ведёт на страницу вашего домена. **Оператор:** Microsoft Corporation, официальная часть Bing-краулеров. **Классификация:** в базе TrafficVeil — нейтральный/условный, решение о блокировке зависит от того, размещаете ли вы (или партнёр) рекламу в Bing Ads.

Что такое adidxbot

Зачем adidxbot приходит на сайт

adidxbot почти никогда не обходит сайт целиком — он приходит точечно, на конкретные URL, указанные в объявлениях Bing Ads. Что чаще всего вызывает визит:

• Вы или ваш маркетолог запустили кампанию в Bing Ads, указав посадочную страницу на этом домене — бот проверяет её перед и во время показа объявления.
• Партнёр или агрегатор рекламирует ваш URL в своей кампании — бот приходит независимо от того, знаете вы об этом или нет.
• Периодические повторные проверки уже одобренных объявлений на предмет изменения контента (redirect, снятая страница, изменившийся оффер).

Типичный кейс: в логах видно adidxbot на конкретной посадочной странице с определённой периодичностью, без реального трафика с Bing Search. Это нормально — бот не индексирует сайт для органики, он обслуживает рекламный контур.

Как проверить, что это действительно adidxbot

User-Agent подделать может любой скрипт, поэтому строка adidxbot в логах — это лишь гипотеза, а не доказательство. Верификация в два шага (та же схема, что у всего семейства Bing):

# 1. Reverse DNS — имя должно оканчиваться на search.msn.com
dig +short -x "1.2.3.4"

# 2. Forward DNS — подтверждаем, что имя резолвится обратно в тот же IP
dig +short имя_из_шага_1

Дополнительно можно свериться с официальным инструментом Verify Bingbot (bing.com/toolbox/verify-bingbot) или с публикуемым списком диапазонов bingbot.json — но Microsoft прямо предупреждает не хардкодить IP-диапазоны как единственный критерий, так как они меняются.

Нагрузка и риски

Нагрузка от adidxbot обычно невысокая и точечная — это не масштабный обход, а проверка конкретных страниц по расписанию рекламных кампаний. Настоящий риск — не в объёме запросов, а в двух сценариях:

• Если сайт использует Bing Ads, а adidxbot заблокирован — объявления могут не пройти проверку качества или получить пониженный Quality Score, что напрямую бьёт по стоимости клика.
• Если сайт Bing Ads не использует, а посадочную страницу рекламирует кто-то другой (партнёр, реселлер трафика) — визиты adidxbot не приносят пользы владельцу сайта, и их можно спокойно ограничивать без последствий для своей рекламы.

Как найти adidxbot в логах

# Базовый поиск
grep -i "adidxbot" /var/log/nginx/access.log

# Топ URL, которые проверяет бот
grep -i "adidxbot" /var/log/nginx/access.log | awk '{print $7}' | sort | uniq -c | sort -rn | head

# Топ IP за этим UA
grep -i "adidxbot" /var/log/nginx/access.log | awk '{print $1}' | sort | uniq -c | sort -rn | head

# Суточная активность
grep -i "adidxbot" /var/log/nginx/access.log | awk '{print $4}' | cut -d: -f1 | sort | uniq -c

Обратите внимание, какие именно URL проверяет бот — если это конкретные посадочные страницы, а не сайт целиком, это подтверждает рекламную, а не поисковую природу визитов.

robots.txt для adidxbot

# Жёсткий запрет
User-agent: adidxbot
Disallow: /

# Разрешить всё (нужно, если сайт крутит рекламу в Bing Ads)
User-agent: adidxbot
Allow: /

# Компромисс: закрыть служебные разделы, оставить публичные страницы
User-agent: adidxbot
Disallow: /admin/
Disallow: /cart/
Disallow: /checkout/
Disallow: /account/
Disallow: /api/
Allow: /

Важно: adidxbot, как и остальные боты Bing, в большинстве случаев соблюдает robots.txt. Если после запрета визиты продолжаются — это сигнал либо о спуфинге UA, либо о необходимости жёсткой блокировки на уровне сервера.

Блокировка вручную и через TrafficVeil

Nginx

if ($http_user_agent ~* "adidxbot") {
    return 403;
}

limit_req_zone $binary_remote_addr zone=adidxbot:10m rate=10r/m;
location / {
    if ($http_user_agent ~* "adidxbot") {
        limit_req zone=adidxbot burst=20 nodelay;
    }
}

Apache (.htaccess)

RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} adidxbot [NC]
RewriteRule ^ - [F,L]

TrafficVeil

• Найдите adidxbot в разделе ботов домена или в /system/bots
• Если сайт не использует Bing Ads — можно смело выставлять «запретить» или rate-limit
• Если сайт (или связанный с ним рекламодатель) использует Bing Ads — выставляйте «разрешить», иначе объявления могут потерять в качестве показа
• После изменения сверьте логи: адресные хиты adidxbot должны исчезнуть или сократиться, а органический трафик с Bing/поисковики затронуты не будут

Рекомендации: разрешать или блокировать

• Используете Bing Ads для продвижения этого домена — Allow, закрыв только служебные разделы (/admin, /cart, /api)
• Bing Ads не используете, а трафик от adidxbot просто расходует ресурсы origin без пользы — Disallow + запрет в TrafficVeil
• Не уверены, кто рекламирует ваш URL — начните с rate-limit, посмотрите на объём и паттерн запросов, затем принимайте решение
• Не блокируйте широким правилом User-agent: * — так можно случайно закрыть Googlebot или YandexBot вместе с adidxbot

С кем не путать adidxbot