QuillBot — не «программный агент», а краулер реального и очень известного AI-сервиса для письма: перефразирование текста, проверка грамматики, детекция AI-сгенерированного контента и другие инструменты, которыми пользуются десятки миллионов человек. В открытом community-реестре AI-краулеров (ai.robots.txt) токен встречается в двух вариантах написания — QuillBot и quillbot.com. В каталоге TrafficVeil бот помечен как нежелательный в категории «Прочие краулеры и сервисы».
Что такое QuillBot на самом деле
QuillBot — компания, предлагающая набор AI-инструментов для письма: перефразирование (paraphraser), проверку грамматики, детектор AI-текста, суммаризатор и переводчик. По данным открытого реестра AI-краулеров, бот эксплуатируется компанией QuillBot именно как часть этого набора AI-продуктов — то есть логично предположить, что краулеру нужен свежий веб-контент для контекста, примеров или обучающих данных, подпитывающих эти AI-функции, по аналогии с уже разобранными в этой энциклопедии Wordtune, ProWritingAid и Grammarly.
Важная оговорка: независимые источники честно отмечают, что точная частота обхода и поведение бота официально «неясны на данный момент» — компания не публикует подробную техническую документацию именно для этого краулера, в отличие, например, от Grammarly с их официальной страницей про GrammarlyBot.
| Параметр | Значение |
| Название | QuillBot |
| User-Agent (токен/паттерн) | quillbot (встречаются оба варианта записи в реестрах: QuillBot и quillbot.com) |
| Оператор | QuillBot — компания AI-инструментов для письма (перефразирование, грамматика, детекция AI-текста) |
| Назначение | Официально не задокументировано подробно; по классификации открытого реестра — используется компанией как часть набора её AI-продуктов |
| Список IP-адресов | ❌ Отдельный официальный список есть не у всех операторов; проверяйте ASN/документацию владельца бота и не полагайтесь только на UA |
| Соблюдение robots.txt | Официально не подтверждено ни в одну сторону; для большинства крупных краулеров — да, но гарантии здесь нет |
| Используется для обучения моделей | Не задокументировано явно оператором, хотя логически согласуется с AI-функциями компании |
| Категория TrafficVeil | Нежелательный / Прочие краулеры и сервисы |
Как работает QuillBot
Идентифицируется в access.log по паттерну User-Agent quillbot. Логичное предположение — систематический проход по содержательным, текстовым разделам сайта (блог, статьи, гайды), а не по служебным страницам, что типично для AI-инструментов письма, которым нужен живой языковой материал для контекста или обучающих данных. Официального подтверждения точного механизма от самой компании нет.
Нагрузка на сервер
На отдельных доменах поведение может выглядеть как волна автоматических запросов без пользовательских сессий. Даже при умеренной средней частоте на одном домене возможны локальные всплески, похожие на L7-нагрузку: много 200 OK без роста реальных сессий. Признаки проблемной активности:
- рост RPS без роста конверсий;
- обход пагинации/каталога, особенно текстоёмких разделов;
- повторяющиеся запросы к тяжёлым страницам;
- давление на origin CPU и bandwidth.
Обнаружение в логах
# Все запросы
grep -i "quillbot" /var/log/nginx/access.log
# Количество запросов за сегодня
grep -i "quillbot" /var/log/nginx/access.log | grep "$(date '+%d/%b/%Y')" | wc -l
# Уникальные IP
grep -i "quillbot" /var/log/nginx/access.log | awk '{print $1}' | sort -u
# Частота по дням
grep -i "quillbot" /var/log/nginx/access.log | awk '{print $4}' | cut -d: -f1 | sort | uniq -c
Верификация: User-Agent легко подделать. Для критичных решений дополнительно проверяйте IP/ASN, частоту, path-паттерны — учитывая, что встречаются два варианта записи токена (quillbot и quillbot.com), при настройке фильтрации логов стоит учитывать оба:
IP="1.2.3.4" whois -h whois.cymru.com " -v $IP" dig +short -x "$IP"
robots.txt
# Полная блокировка User-agent: quillbot Disallow: / # Точечное ограничение User-agent: quillbot Disallow: /admin/ Disallow: /cart/ Disallow: /account/ Allow: / # Разрешить полностью User-agent: quillbot Allow: /
Учитывайте: соблюдение robots.txt этим ботом официально не подтверждено ни в одну сторону — при отсутствии данных безопаснее исходить из того, что гарантий нет. Для гарантированного контроля используйте серверные правила или TrafficVeil, и не забудьте продублировать правило для варианта quillbot.com.
Управление на уровне сервера
Nginx
if ($http_user_agent ~* "quillbot") {
return 403;
}
# Мягкий вариант — rate limit
limit_req_zone $binary_remote_addr zone=quillbot:10m rate=15r/m;
location / {
if ($http_user_agent ~* "quillbot") {
limit_req zone=quillbot burst=30 nodelay;
}
}
Apache (.htaccess)
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} quillbot [NC]
RewriteRule ^ - [F,L]
Через TrafficVeil
- откройте список известных ботов в панели домена или
/system/bots; - найдите quillbot / QuillBot, а также проверьте отдельно вариант quillbot.com, если он встречается в логах;
- для нежелательного сценария — категория «запретить»; для мягкого — rate-limit;
- allow оставляйте только при явной пользе — например, если для вас важно попадание контента в базы AI-инструментов для письма;
- проверьте логи: запросы должны уходить в блок/лимит согласно выбранной политике.
Рекомендации по оптимизации
- В базе TrafficVeil помечен как нежелательный — по умолчанию рекомендуется запрет или жёсткий rate-limit;
- не блокируйте поисковые роботы Google/Yandex случайно, если рядом настраиваете широкие правила;
- сначала измерьте долю запросов бота в логах/аналитике TrafficVeil, потом принимайте решение;
- для всплесков чаще достаточно rate-limit вместо полного 403;
- контент лучше отдавать server-side, если хотите контролируемую индексацию легитимными агентами.
Сравнение с похожими ботами
| Бот | Кластер | User-Agent | Метка |
| 360Spider | Прочие краулеры и сервисы | 360spider | нежелательный |
| A360-Search | Прочие краулеры и сервисы | a360-search | нежелательный |
| AASA-Bot | Прочие краулеры и сервисы | aasa-bot | нежелательный |
| ABEvalBot | Прочие краулеры и сервисы | abevalbot | нежелательный |
| ActiveComply | Прочие краулеры и сервисы | activecomply | нежелательный |
По классу QuillBot ближе всего к уже разобранным в этой энциклопедии Wordtune, ProWritingAid и Grammarly — все это AI-инструменты письма с похожей вероятной логикой сбора веб-контента, хотя степень официальной документированности у них разная.
Сводная таблица стратегии
| Цель сайта | Рекомендация |
| Нужна польза от присутствия в базах AI-инструментов письма | Allow + закрыть /admin /cart /api |
| Только мешает и потребляет ресурсы origin | Disallow + запрет в TrafficVeil для обоих вариантов токена |
| Доступ нужен, но пики нагрузки мешают | Rate-limit на nginx/TrafficVeil |
| Нежелательный по базе TrafficVeil | Deny по умолчанию, исключения — точечно |