Если фильтровать access.log по «hemingway editor», может показаться, что это след известного инструмента для редактирования текста. Но прежде чем делать какие-либо выводы о его назначении, стоит проговорить главное: у самого продукта Hemingway Editor нет функции обхода чужих сайтов.
Почему стоит усомниться в исходной посылке
Hemingway Editor — популярный веб- и десктопный инструмент для проверки читаемости и стиля текста: пользователь сам вставляет свой текст в приложение и получает рекомендации по упрощению предложений, устранению страдательного залога и так далее. Это принципиально другая категория продукта, чем поисковый или AI-краулер, — у него нет заявленной функции «обходить публичный веб» или «наполнять retrieval-индекс» чужим контентом. Прямых подтверждений того, что компания вообще управляет каким-либо ботом с таким назначением, найти не удалось. Если строка с этим названием реально встречается в логах сайта, наиболее вероятные объяснения:
- Это не связано с известным продуктом Hemingway Editor вовсе — совпадение имени, а не факт о происхождении трафика
- Кто-то использует узнаваемое, «безобидно» звучащее название для маскировки собственного скрипта, рассчитывая, что администратор сайта не станет проверять его подробно
Параметры
| Параметр | Значение |
|---|---|
| Токен | hemingway editor |
| Оператор | ❌ Не подтверждён; связь с известным продуктом Hemingway Editor не доказана |
| Заявленное назначение | Не подтверждено официальными источниками — относитесь с осторожностью к любым готовым описаниям «AI-индексации» для этого токена |
| Список IP | ❌ Не публикуется |
| robots.txt | Не гарантировано |
Как действовать при такой неопределённости
- Не полагайтесь на «узнаваемое» название как на признак легитимности — как показывает практика, это в равной степени может быть сигналом маскировки
- Проверьте поведение независимо от имени: глубину обхода, разброс IP, концентрацию на конкретных разделах сайта
- При отсутствии подтверждённой пользы для сайта — относитесь как к обычному неопознанному трафику
Подключите домен и посмотрите живую ленту: кто пришёл, с какой сети, что запрашивал и по какому правилу был пропущен или заблокирован.
Контроль
grep -i "hemingway editor" /var/log/nginx/access.logUser-agent: hemingway editor
Disallow: /if ($http_user_agent ~* "hemingway editor") {
return 403;
}Рекомендации
- Нет подтверждённой пользы и нет доказанной связи с известным продуктом — Disallow/403, стандартный подход по умолчанию
- Если нагрузка мешает — сначала rate-limit, затем полный запрет
- Не режьте слишком широко
User-agent: *, чтобы случайно не закрыть Googlebot/YandexBot - На Google не влияет
Частые вопросы
Управляет ли компания Hemingway Editor каким-либо веб-краулером?
Почему тогда строка «hemingway editor» может встречаться в логах сайта?
Стоит ли доверять описанию этого токена как «AI-индексирующего краулера»?
Как оценивать такой трафик при отсутствии подтверждённого оператора?
Что делать с этим токеном при отсутствии доказанной пользы?
Повлияет ли блокировка на позиции сайта в Google?
Команда TrafficVeil разрабатывает инструменты защиты сайтов от ботов, DDoS и веб-атак. Разборы ботов пишем по логам подключённых доменов и открытым данным операторов.