Технические статьи, руководства по защите трафика и кейсы клиентов. Отдельный большой раздел — разборы конкретных ботов: кто это, что делает в логах и что с ним делать.
Разбираем служебный агент NitroPack: зачем Nitro-Optimizer-Agent обращается к HTML, CSS, JavaScript и другим ресурсам, как подтвердить его по IP и User-Agent, оценить нагрузку и не сломать оптимизацию неправильной блокировкой.
Разбираем трафик Uptimia: откуда появляются автоматические проверки сайта, как работают распределённые checkpoints, где проверить IP, как отличить настоящий мониторинг от поддельного User-Agent и когда запросы стоит разрешить или ограничить.
Разбираем запросы WPUmbrella: зачем сервис обращается к WordPress-сайту, какие User-Agent использует, как отличить штатный мониторинг от подделки и почему бездумная блокировка может вызвать ложные уведомления о недоступности сайта.
Разбираем YelpBot — редкий случай прозрачного бота с открыто названным оператором (Yelp Inc.), который тем не менее по умолчанию помечен как нежелательный. Показываем, как найти его в логах, для кого разрешение может быть оправдано, и как настроить блокировку через robots.txt, сервер или TrafficVeil.
Разбираем NewsRoom.BI — краулер конкурентной разведки от Marfeel, который собирает данные о ценах и товарах по заказу стороннего клиента. Показываем, как найти его в логах, почему блокировка не повредит SEO и как настроить доступ через robots.txt, сервер или TrafficVeil.
Разбираем ZanistaBot — агент, за которым стоит конкретная ИИ-компания Zanista AI, но который всё равно относится TrafficVeil к нежелательным. Показываем, как найти его в логах, проверить его активность на предмет спуфинга и настроить блокировку или лимиты через robots.txt, сервер и TrafficVeil.
Разбираем WordCountBot — бота без официальной документации и открытого списка IP, который в базе TrafficVeil помечен как нежелательный. Показываем, как найти его в логах, отличить от подделки под этим же именем и настроить блокировку через robots.txt, сервер или TrafficVeil.
Разбираем, чем на самом деле является W3C_Validator и почему под этим именем скрывается сразу несколько разных сервисов W3C с разными правилами доступа. Показываем, как отличить их в логах, оценить реальную нагрузку от массовых проверок и настроить блокировку или лимиты через robots.txt, сервер и TrafficVeil.
Reelevant — реальный сервис персонализации email-маркетинга, чей бот забирает изображения товаров в момент открытия письма получателем для динамического обновления контента рассылки. Разбираем, почему блокировка может сломать email-персонализацию магазина, и настройку через robots.txt и TrafficVeil.
618 разборов: кто владеет ботом, какой User-Agent оставляет в логах, какую нагрузку создаёт и стоит ли его пропускать.
Открыть справочникКак выглядит L7-флуд в аналитике, чем он отличается от всплеска живого трафика и какие лимиты включать в первую очередь.
Защита от DDoS L7Бесплатный план подходит для старта с базовым контуром защиты. Расширенные возможности доступны на платных тарифах.
Фиксированная подписка по числу доменов и набору функций. Боты, атаки и заблокированные запросы не увеличивают счёт.