Технические статьи, руководства по защите трафика и кейсы клиентов. Отдельный большой раздел — разборы конкретных ботов: кто это, что делает в логах и что с ним делать.
Netcraft маркируют «нежелательный», хотя это краулер известной с 1995 года компании интернет-безопасности, полезный для защиты бренда от фишинговых клонов. Разбираемся, почему сама Netcraft не рекомендует его блокировать.
Statabot маркируют «нежелательный», хотя это официальный краулер StataCorp для индексации пакетов статистического ПО Stata. Разбираемся, когда его визит ожидаем, а когда стоит насторожиться.
SlickBot в базах маркируют «нежелательный», хотя это краулер сервиса встроенного поиска и рекомендаций контента Slickstream. Разбираемся, почему блокировка может испортить пользовательский опыт на самом сайте.
mistralai-user маркируют как нежелательный AI-краулер, хотя это официальный агент Mistral AI, который забирает страницу по запросу реального пользователя Le Chat. Разбираемся, почему блокировка режет только реферальный трафик.
netumo в базах описан как проверка интеграции, хотя это сервис мониторинга аптайма, безопасности и SEO сайта. Разбираемся, почему блокировка требует оглядки на реальных подрядчиков.
netarkivindsamling в логах маскируется под безымянную инфраструктуру, хотя это национальный веб-архив Дании под управлением Королевской библиотеки. Разбираемся, почему это государственный сбор по закону, а не подписка на сервис.
monitis в логах иногда описывают как проверку виджета, хотя это сервис синтетического мониторинга аптайма и производительности сайта. Разбираемся, почему блокировка требует оглядки на реальных подрядчиков.
Единого бота «OpenAI» не существует — то, что находится по токену openai, это один из трёх разных агентов: GPTBot, OAI-SearchBot или ChatGPT-User. Разбираемся, почему их нельзя настраивать одной общей директивой.
DVbot маркируют «нежелательный», хотя это краулер публичной компании DoubleVerify для проверки качества рекламы. Разбираемся, почему блокировка может стоить рекламных доходов сайта.
618 разборов: кто владеет ботом, какой User-Agent оставляет в логах, какую нагрузку создаёт и стоит ли его пропускать.
Открыть справочникКак выглядит L7-флуд в аналитике, чем он отличается от всплеска живого трафика и какие лимиты включать в первую очередь.
Защита от DDoS L7Бесплатный план подходит для старта с базовым контуром защиты. Расширенные возможности доступны на платных тарифах.
Фиксированная подписка по числу доменов и набору функций. Боты, атаки и заблокированные запросы не увеличивают счёт.