Блог TrafficVeil

Статьи и руководства — страница 58

Технические статьи, руководства по защите трафика и кейсы клиентов. Отдельный большой раздел — разборы конкретных ботов: кто это, что делает в логах и что с ним делать.

660 статей8 разделов
Уникальная иллюстрация бота YandexImages: легитимный поисковые роботы
Боты4 мин

Почему специфичное правило для YandexImages «побеждает» общее

Стоит прописать отдельную секцию для YandexImages — и робот перестаёт учитывать общий User-agent: *. Разбираем эту техническую ловушку и параллель с Googlebot-Image.

9 авг. 2026 г.Читать
Уникальная иллюстрация бота SeekportBot: нежелательный прочие краулеры и сервисы
Боты4 мин

SeekportBot: за независимым немецким поиском стоит SISTRIX

SeekportBot обслуживает Seekport — приватность-ориентированную поисковую альтернативу Google от известной SEO-компании SISTRIX. Разбираем, почему это позиционирование может влиять на решение allow/deny, и как настроить Crawl-delay.

9 авг. 2026 г.Читать
Уникальная иллюстрация бота Amazon SearchBot: нежелательный бот
Боты6 мин

Amzn-SearchBot и скрытая программа с бонусом к комиссии

Разрешение ботов Amazon может давать не только видимость в Alexa, но и +1% к партнёрской комиссии через программу Amazon Content Partners. Разбираем три бота Amazon, их разницу по AI-training и точную reverse DNS верификацию.

9 авг. 2026 г.Читать
Уникальная иллюстрация бота KonturBot: нежелательный прочие краулеры и сервисы
Боты4 мин

Konturbot и Контур.Фокус: связь, которую не пишут в официальных доках

У Konturbot нет публичной страницы с политикой, но масштаб экосистемы СКБ Контур и сервис проверки контрагентов Контур.Фокус дают правдоподобную версию его назначения. Разбираем эту гипотезу и настройку доступа.

9 авг. 2026 г.Читать
Уникальная иллюстрация бота TrendictionBot: нежелательный прочие краулеры и сервисы
Боты5 мин

TrendictionBot приходит со списком покупок, а не наугад

Повторные визиты на одни и те же страницы у TrendictionBot обычно означают, что кто-то из клиентов Trendiction/Talkwalker их мониторит. Разбираем эту логику и почему кэш robots.txt держится до 5 дней.

9 авг. 2026 г.Читать
Боты4 мин

SEOkicks: немецкая backlink-база с щедрым бесплатным доступом

SEOkicks Bot собирает данные для одной из самых доступных backlink-баз в немецкоязычном сегменте. Разбираем, кому реально полезна видимость в этой базе, и уточняем паузу между запросами.

9 авг. 2026 г.Читать
Уникальная иллюстрация бота YandexImageResizer: легитимный поисковые роботы
Боты4 мин

Два разных этапа: YandexImages индексирует, YandexImageResizer готовит превью

YandexImageResizer не индексирует картинки, а адаптирует их под конкретные сценарии показа, чаще мобильные. Разбираем, почему блокировка этого робота не выбивает изображения из индекса Яндекс Картинок.

9 авг. 2026 г.Читать
Уникальная иллюстрация бота Heritrix: легитимный веб-архивы
Боты5 мин

«Это, возможно, кто-то ещё» — сам Internet Archive о чужих Heritrix

Internet Archive официально признаёт: строка «heritrix» в логах без archive.org может принадлежать постороннему оператору того же open-source ПО. Разбираем, как их отличить, и промежуточный случай с Archive-It.

9 авг. 2026 г.Читать
Уникальная иллюстрация бота EzoicBot: нежелательный прочие краулеры и сервисы
Боты4 мин

EzoicBot: почему desktop и mobile нельзя развести в robots.txt

EzoicBot работает на тысячах машин одновременно — отсюда отсутствие компактного IP-списка. Разбираем, зачем один токен обслуживает обе версии краулера и почему кратковременные всплески частоты — это норма.

9 авг. 2026 г.Читать
Справочник

Энциклопедия ботов

618 разборов: кто владеет ботом, какой User-Agent оставляет в логах, какую нагрузку создаёт и стоит ли его пропускать.

Открыть справочник
Защита

Атака на прикладном уровне

Как выглядит L7-флуд в аналитике, чем он отличается от всплеска живого трафика и какие лимиты включать в первую очередь.

Защита от DDoS L7

Начните бесплатно — платите потом

Бесплатный план подходит для старта с базовым контуром защиты. Расширенные возможности доступны на платных тарифах.

Фиксированная подписка по числу доменов и набору функций. Боты, атаки и заблокированные запросы не увеличивают счёт.

Не требуется карта · быстрый старт · апгрейд по мере роста
TrafficVeil