Строка copyai в логах легко принять за очередного обучающего AI-краулера — но Copy.ai (компания за именем) давно не просто генератор рекламных текстов. Это платформа автоматизации GTM-процессов (go-to-market) для отделов продаж и маркетинга, и логика её визита на посторонний сайт скорее про исследование компании как потенциального лида, чем про сбор сырья для обучения модели.
Что такое CopyAI на самом деле
Copy.ai — компания, основанная в 2020 году, с более чем 10 млн зарегистрированных пользователей; изначально сервис генерировал рекламные тексты, а с 2023 года превратился в «GTM AI Platform» — платформу автоматизации процессов продаж и маркетинга. Среди инструментов — Workflows, многошаговые сценарии, которые могут автоматически исследовать компании и контакты, подтягивая данные из LinkedIn и других источников для обогащения CRM.
| Параметр | Значение |
| Название | CopyAI |
| User-Agent / паттерн | copyai |
| Оператор | Copy.ai — GTM AI Platform для продаж и маркетинга, с 2020 года |
| Категория TrafficVeil | Вероятный пользовательский инструмент исследования компаний/лидов (не подтверждённый обучающий краулер) |
| Наиболее вероятная причина визита | Пользователь Copy.ai запустил Workflow исследования компании — ваш сайт мог быть проанализирован как потенциальный лид или партнёр |
| Список IP | ❌ Публичного списка нет; проверяйте ASN и поведение |
| robots.txt | Отдельной технической документации по краулеру компания не публикует |
| Пометка TrafficVeil | Легитимный, но с оговоркой — официального подтверждения механики визита от Copy.ai нет |
Честная оговорка: у Copy.ai, как и у ряда других AI-инструментов в этой энциклопедии, нет публичной страницы, документирующей поведение краулера. «Наиболее вероятная причина» — обоснованный вывод из функциональности продукта (автоматизированное исследование компаний в рамках Workflows), а не подтверждённый факт.
Почему это не тот же риск, что у обучающих краулеров
Copy.ai не заявляет себя оператором масштабного обучающего краулера вроде GPTBot или CCBot. Логика GTM-платформы противоположная: клиент сервиса настраивает сценарий, который исследует конкретные компании — например, потенциальных клиентов или партнёров — и обращение к вашему сайту в этом случае означает, что кто-то в отделе продаж или маркетинга смотрит на вашу компанию как на лид, а не что содержимое сайта уходит в обучающий корпус чужой модели.
Как найти CopyAI в логах
# Базовый поиск
grep -i "copyai" /var/log/nginx/access.log
# Какие страницы вычитывает бот
grep -i "copyai" /var/log/nginx/access.log | awk '{print $7}' | sort | uniq -c | sort -rn | head
# Топ IP
grep -i "copyai" /var/log/nginx/access.log | awk '{print $1}' | sort | uniq -c | sort -rn | head
Официального списка IP нет, поэтому верификация особенно важна:
IP="1.2.3.4"
whois -h whois.cymru.com " -v $IP"
Точечное обращение к нескольким ключевым страницам (главная, «о компании», контакты) соответствует гипотезе о разовом исследовании компании в рамках Workflow. Системный обход всего сайта — сигнал сверить IP отдельно.
robots.txt и настройка через TrafficVeil
# Разрешить точечные обращения
User-agent: copyai
Allow: /
# Закрыть чувствительные разделы
User-agent: copyai
Disallow: /admin/
Disallow: /cart/
Disallow: /checkout/
Disallow: /account/
Allow: /
TrafficVeil: при разовых и точечных визитах — allow без rate-limit, заметной нагрузки такой трафик не создаёт. Переключать на «запретить» стоит, если поведение не соответствует гипотезе про разовое исследование лида — то есть бот системно обходит сайт, а не обращается к нескольким ключевым страницам.
Что в итоге делать с CopyAI
| Ситуация | Действие |
| Визиты редкие, ограничены несколькими ключевыми страницами | Allow без rate-limit |
| Поведение похоже на системный обход всего сайта | Rate-limit, затем Disallow / запрет в TrafficVeil |
| Принципиально нежелательно попадать в чужие workflow-исследования компаний | Disallow сразу, без промежуточных шагов |
| Подозрение на спуфинг UA | Сверять по ASN и характеру запросов, а не по одной строке |