
ActiveComply — ещё один случай из серии «это, скорее всего, чей-то подключённый инструмент», только для узкой ниши: регуляторного compliance-мониторинга в финансовой сфере. Это реальная компания (activecomply.com), продукт которой — платформа WebCompass — специально мониторит сайты банков, кредитных союзов и ипотечных брокеров на соответствие требованиям регуляторов вроде CFPB и HUD.
1. Что такое ActiveComply на самом деле
ActiveComply — облачная compliance-платформа для регулируемых финансовых организаций: банков, кредитных союзов, ипотечных брокеров и RIA (инвестиционных консультантов). Продукт WebCompass централизованно сканирует и мониторит сайты, связанные с ипотечным и финансовым бизнесом — корпоративные страницы, персональные сайты кредитных специалистов, партнёрские лендинги — на предмет соответствия регуляторным требованиям: корректность лицензионной информации, обязательные раскрытия (disclosures), формулировки о справедливом кредитовании, доступность по стандартам ADA.
По независимой классификации Known Agents, ActiveComply относится к категории «intelligence gatherer» — краулеров, которые собирают бизнес-данные и конкурентную информацию для своих клиентов. Здесь это конкретизируется до узкой, понятной задачи: находить нарушения раньше, чем это сделают регуляторы или конкуренты, — заявленная цель прямо со страницы продукта.
| Параметр | Значение |
| Название | ActiveComply |
| Оператор | ActiveComply (activecomply.com) — compliance-платформа для регулируемых финансовых организаций |
| Продукт, отвечающий за обход | WebCompass — модуль мониторинга сайтов на регуляторное соответствие |
| Роль | Проверка сайтов финансовых организаций (корпоративных, партнёрских, персональных страниц кредитных специалистов) на licensing, disclosures, fair lending, ADA-доступность и SEO-проблемы |
| User-Agent / паттерн | activecomply |
| Кто обычно инициирует | Сама финансовая организация (банк, кредитный союз, ипотечный брокер) или её compliance-отдел — продукт подписной, требует сознательного подключения |
| Типичный охват клиента | По кейсам компании — от единичных сайтов до сотен филиалов и тысяч аффилированных веб-страниц одной организации |
| robots.txt | Данных о соблюдении нет |
| Пометка TrafficVeil | Нежелательный / Прочие краулеры и сервисы — статус стоит уточнить для сайтов из финансовой отрасли (см. раздел 8) |
2. Зачем ActiveComply приходит на сайт
- если сайт принадлежит банку, кредитному союзу, ипотечному брокеру или связанному с ними специалисту — регулярная проверка на регуляторное соответствие в рамках подписки на WebCompass;
- мониторинг персональных сайтов и партнёрских лендингов, которые организация обязана отслеживать по требованию регулятора (например, сайты отдельных кредитных специалистов в составе крупной сети филиалов);
- если сайт не связан с финансовой/ипотечной отраслью — обращение менее объяснимо и может быть частью более широкого сканирования рынка, а не адресного мониторинга.
Типичный кейс: сайт ипотечного брокера или банковского филиала регулярно посещается ActiveComply — прежде чем реагировать как на нежелательный трафик, стоит проверить, не подключена ли организация к сервису сама (или через головную компанию/франчайзера).
3. Нагрузка и риски
Если сайт принадлежит финансовой организации, подключённой к ActiveComply, — прямая польза очевидна: без такого мониторинга компания рискует пропустить нарушение раскрытий или лицензионных требований, за которое регулятор может наложить санкции. Блокировка в этом случае вредит не постороннему боту, а собственному compliance-процессу.
Если сайт точно не относится к финансовой/ипотечной отрасли и не связан ни с одним клиентом ActiveComply — прямой пользы, как правило, нет, и обычная логика «нежелательный, если пользы нет» применима без ограничений.
Подключите домен и посмотрите живую ленту: кто пришёл, с какой сети, что запрашивал и по какому правилу был пропущен или заблокирован.
4. Как найти ActiveComply в логах
# Базовый поиск
grep -i "activecomply" /var/log/nginx/access.log
# Топ URL, которые вычитывает бот
grep -i "activecomply" /var/log/nginx/access.log | awk '{print $7}' | sort | uniq -c | sort -rn | head
# Топ IP за этим UA
grep -i "activecomply" /var/log/nginx/access.log | awk '{print $1}' | sort | uniq -c | sort -rn | head
# Суточная активность
grep -i "activecomply" /var/log/nginx/access.log | awk '{print $4}' | cut -d: -f1 | sort | uniq -c
Верификация. Строку UA подделать может любой скрипт. Официального списка IP-диапазонов не найдено — но здесь есть более простой первый шаг, чем ASN-проверка: узнать в compliance-отделе организации (если сайт финансовый), не подключён ли WebCompass сознательно, прежде чем переходить к техническим методам:
IP="1.2.3.4"
whois -h whois.cymru.com " -v $IP"
dig +short -x "$IP"
5. robots.txt для ActiveComply
# Жёсткий запрет — если сайт не связан с клиентами ActiveComply
User-agent: activecomply
Disallow: /
# Разрешить всё — необходимо, если организация использует WebCompass для собственного compliance-мониторинга
User-agent: activecomply
Allow: /
6. Блокировка вручную и через TrafficVeil
Nginx:
Для одного и того же User-Agent выберите полный запрет или ограничение частоты. Вариант А сохраняет исходный шаблон User-Agent и ответ 403/410. Вариант Б применяют вместо этого запрета. Не включайте оба режима для одного совпадения: return завершит запрос до ограничения частоты. Это не запрещает сохранять независимые политики для другого трафика.
# Вариант А: исходные запреты. server {} показан как схема размещения.
server {
# Добавьте эти if в существующий server, сохранив остальную конфигурацию.
if ($http_user_agent ~* "activecomply") {
return 403;
}
# Существующие listen, server_name и обработчики сайта остаются здесь.
}
Ниже показано размещение директив в существующей конфигурации. Не заменяйте рабочие http/server/location этой схемой и не создавайте дублирующий location /: перенесите директивы в нужные блоки и сохраните обработчик приложения. Порог и burst оставлены из исходного примера как иллюстрация; это не подтверждённые лимиты оператора бота. Подбирайте их по допустимой нагрузке своего сервера. Для запросов, отклонённых этим лимитом, явно задан HTTP 429 через limit_req_status.
# Вариант Б: ограничение частоты вместо полного запрета.
# map и limit_req_zone — внутри существующего http {}, вне server/location.
map $http_user_agent $tv_ng_352815efa9d5_key {
default "";
"~*activecomply" $binary_remote_addr;
}
limit_req_zone $tv_ng_352815efa9d5_key zone=tv_ng_352815efa9d5:10m rate=10r/m;
# server/location ниже — схема размещения, не новый виртуальный хост.
server {
# Используйте нужные существующие listen и server_name.
location / {
limit_req zone=tv_ng_352815efa9d5 burst=20 nodelay;
limit_req_status 429;
# Сохраните здесь существующий proxy_pass/fastcgi_pass/root и другие директивы.
}
}
Проверка синтаксиса примера — 19.11.2026. По документации NGINX, map и limit_req_zone размещаются в http; limit_req допускается в http/server/location, но не внутри if. Запросы с пустым ключом default "" этим лимитом не учитываются. Значение $binary_remote_addr ограничивает совпавшие запросы по IP. За CDN или обратным прокси отдельно настройте восстановление исходного IP только от доверенных прокси; не используйте непроверенный X-Forwarded-For как ключ. Совпадение User-Agent не подтверждает оператора бота; строки и регулярные выражения исходного примера сохранены без такой проверки. Сначала выполните nginx -t и проверьте поведение на тестовой площадке. Проверка касается размещения этих директив, а не всех утверждений статьи.
Apache (.htaccess):
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} activecomply [NC]
RewriteRule ^ - [F,L]
TrafficVeil:
- прежде чем блокировать на сайте из финансовой/ипотечной ниши — проверьте, не подключён ли WebCompass самой организацией или головной компанией;
- если подключён — allow, блокировка может сорвать регуляторный мониторинг, за который организация несёт ответственность;
- если сайт не финансовый — Disallow и запрет в TrafficVeil обоснованы стандартной логикой;
- после изменения сверьте логи и, если применимо, уточните у compliance-команды, не пропали ли их отчёты.
7. Что делать: короткий алгоритм
- Сайт из финансовой/ипотечной отрасли — сначала проверьте, не подключён ли WebCompass сознательно, прежде чем блокировать;
- Подключён — allow, это собственная регуляторная инфраструктура;
- Сайт вне финансовой отрасли — Disallow + запрет в TrafficVeil, прямой пользы, как правило, нет;
- Не блокируйте по маске
User-agent: *, чтобы не задеть Googlebot/YandexBot заодно.
8. Открытый вопрос по категоризации
Базовая пометка «нежелательный» подходит для сайтов вне финансовой отрасли, но не учитывает сценарий, при котором это подключённый регуляторный мониторинг банка или ипотечного брокера. Рекомендую добавить в саму запись явную пометку «для сайтов финансовой/ипотечной ниши сначала проверьте, не подключён ли WebCompass» — по аналогии с уже сформулированными статьями про MainWP, BlogVault и Content King.
| Бот / сосед | Кластер | Комментарий |
| Silktide | Прочие краулеры и сервисы | Та же логика «скорее всего, ваш собственный аудит», но для веб-доступности (WCAG), а не финансового compliance |
| MainWP | Прочие краулеры и сервисы | Та же модель «подключено кем-то из вашей организации», для управления WordPress |
| ContentKing | Требует пересмотра (см. отдельную статью) | Тоже платформа мониторинга подключённых клиентских сайтов, но для SEO, а не регуляторного соответствия |
| 360Spider | Прочие краулеры и сервисы | нежелательный, но принципиально другая природа — не завязан на конкретную клиентскую подписку |
9. Стратегия allow/deny для ActiveComply
| Ситуация | Действие |
| Финансовая/ипотечная организация подключила WebCompass | Allow — это собственная регуляторная compliance-инфраструктура |
| Сайт вне финансовой отрасли | Disallow + запрет в TrafficVeil |
| Неясно, подключён ли сервис | Уточнить у compliance-отдела или головной организации/франчайзера |
| Сайт — партнёрский лендинг или персональная страница специалиста в составе крупной сети | Проверить, не входит ли сайт в зону обязательного мониторинга головной компании |
| Подозрение на подделку UA | Не доверять строке UA; смотреть IP/ASN и профиль отрасли сайта |
Проверяйте User-Agent вместе с другими признаками. Перед блокировкой изучите логи и убедитесь, что полезные запросы проходят.
Частые вопросы
ActiveComply — это сторонний бот, который сканирует сайт без разрешения?
Как быстро проверить, легитимен ли этот трафик?
Что если сайт не относится к финансовой отрасли?
Что произойдёт, если заблокировать ActiveComply на подключённом сайте?
Может ли ActiveComply мониторить персональные сайты отдельных сотрудников?
Стоит ли пересмотреть категорию ActiveComply в базе TrafficVeil?
Команда TrafficVeil разрабатывает инструменты защиты сайтов от ботов, DDoS и веб-атак. Разборы ботов пишем по логам подключённых доменов и открытым данным операторов. Дата обновления показывает редакционное изменение, а не полную повторную проверку всех источников. Как мы работаем с источниками и исправлениями.
