Технические статьи, руководства по защите трафика и кейсы клиентов. Отдельный большой раздел — разборы конкретных ботов: кто это, что делает в логах и что с ним делать.
Разбор YandexMobileBot — робота Яндекса для оценки мобильной вёрстки. Почему он игнорирует общие директивы robots.txt, как его верифицировать по rDNS и ASN и как настроить точечный контроль без риска для мобильной выдачи.
YandexUserproxy — один из наименее документированных агентов в экосистеме Яндекса. В отличие от YandexBot, YandexImages или YandexNews, Яндекс не публикует официального описания этого агента в своей документации для вебмастеров. Тем не менее он регулярно появляется в логах серверов и заслуживает внимательного изучения.
YandexMetrika — агент Яндекса, связанный с аналитическим сервисом Яндекс.Метрика. Он появляется в логах серверов у владельцев сайтов, использующих счётчик Метрики, и у тех, кто работает с Яндекс.Вебмастером. Это не поисковый краулер в традиционном смысле: YandexMetrika не индексирует страницы для поисковой выдачи и не влияет на SEO-позиции напрямую.
618 разборов: кто владеет ботом, какой User-Agent оставляет в логах, какую нагрузку создаёт и стоит ли его пропускать.
Открыть справочникКак выглядит L7-флуд в аналитике, чем он отличается от всплеска живого трафика и какие лимиты включать в первую очередь.
Защита от DDoS L7Бесплатный план подходит для старта с базовым контуром защиты. Расширенные возможности доступны на платных тарифах.
Фиксированная подписка по числу доменов и набору функций. Боты, атаки и заблокированные запросы не увеличивают счёт.