Технические статьи, руководства по защите трафика и кейсы клиентов. Отдельный большой раздел — разборы конкретных ботов: кто это, что делает в логах и что с ним делать.
Tumblr — крупный сервис микроблогов в составе Automattic, но официальной документации по исходящему боту с токеном tumblr найти не удалось. Разбираем наиболее вероятную гипотезу о превью для ссылок, как проверить её на практике и настроить allow, rate-limit или блокировку через TrafficVeil.
FeedFlow — реальное открытое приложение-RSS-ридер, чей бот в логах означает подписку живого читателя, а не автоматизацию. Разбираем риск ложной блокировки антибот-системами, как найти бота в логах и настроить allow, rate-limit или запрет через TrafficVeil.
TwinAgent — официально задокументированный AI-агент платформы Twin, который использует настоящий браузер для автономного выполнения многошаговых задач пользователей, включая заполнение форм. Разбираем, почему это сложнее обычного краулера, и как настроить allow, rate-limit или блокировку через TrafficVeil.
Podimo — реальный сервис подписки на подкасты, чей бот узко специализирован на чтении RSS-фидов, а не сайтов в целом. Разбираем, почему визит нетипичен без подкаст-контента, как найти бота в логах и настроить allow, rate-limit или блокировку.
panscient.com — реальная компания бизнес-разведки, которая собирает и перепродаёт корпоративные данные с сайтов, но при этом технически аккуратно соблюдает robots.txt и лимит запросов. Разбираем, почему проблема здесь не в нагрузке, а в согласии на использование данных, и как настроить блокировку через robots.txt и TrafficVeil.
TweetmemeBot начинал в 2009 году как краулер сервиса TweetMeme, но сегодня по данным современных каталогов ботов ассоциируется с Meltwater — платформой медиа-мониторинга для бизнеса. Разбираем историю смены владельцев, отсутствие механизма верификации и настройку allow, rate-limit или блокировки через TrafficVeil.
PodchaserParser — реальный бот каталога подкастов Podchaser, узко специализированный на чтении RSS-фидов подкастов, а не сайтов в целом. Разбираем, почему визит нетипичен без подкаст-контента, как найти бота в логах и настроить allow, rate-limit или блокировку.
pingping.io — реальный сервис аптайм- и SSL-мониторинга (сейчас в составе Newmatter) с проверками каждые 30 секунд — заметно чаще большинства аналогов. Разбираем, почему это создаёт больше фонового шума, как отличить свой мониторинг от чужого и настроить allow, rate-limit или блокировку через TrafficVeil.
Trellis-Services — редкий случай в энциклопедии, где публично подтверждённого оператора найти не удалось. Разбираем, почему решение здесь зависит от собственных логов и известных интеграций сайта больше, чем от общей теории, и как настроить allow, rate-limit или блокировку через TrafficVeil.
618 разборов: кто владеет ботом, какой User-Agent оставляет в логах, какую нагрузку создаёт и стоит ли его пропускать.
Открыть справочникКак выглядит L7-флуд в аналитике, чем он отличается от всплеска живого трафика и какие лимиты включать в первую очередь.
Защита от DDoS L7Бесплатный план подходит для старта с базовым контуром защиты. Расширенные возможности доступны на платных тарифах.
Фиксированная подписка по числу доменов и набору функций. Боты, атаки и заблокированные запросы не увеличивают счёт.