LoomlyBot в логах: превью для чужого контент-календаря

Если фильтровать access.log по loomlybot, часто всплывает целый пласт машинных хитов — это и есть LoomlyBot. Важное уточнение по итогам проверки: Loomly, Inc. — реальная и известная платформа управления соцсетями (планирование и публикация постов в Facebook, Instagram, Twitter/X, LinkedIn, TikTok, Pinterest, Google Ads и других каналах), а бот числится в специализированном каталоге социальных краулеров именно как «page preview» — то есть fetcher для превью ссылок, а не абстрактный «автоматизированный краулер для сбора данных, индекса или мониторинга», как описано в черновике. По факту поведения это ближе к категории «Превью ссылок в соцсетях», а не к нежелательным «Прочим краулерам и сервисам».

1. Что такое LoomlyBot

Когда пользователь Loomly создаёт пост со ссылкой в своём контент-календаре или использует их функцию Link-in-Bio (страница с несколькими ссылками для соцсетей), платформе нужно получить заголовок, описание и превью-изображение по этой ссылке — точно так же, как соцсети формируют карточку при шеринге, только в интерфейсе самой Loomly, чтобы пользователь видел, как пост будет выглядеть перед публикацией. Именно эту задачу, судя по всему, решает LoomlyBot.

2. Зачем LoomlyBot приходит на сайт

Бот забирает Open Graph и meta-теги — это происходит, когда конкретный пользователь Loomly вставляет вашу ссылку при создании поста для соцсетей или настраивает её в своей странице Link-in-Bio, а не по фоновому расписанию произвольного обхода. Это точечный link preview-fetcher: запрос к конкретному переданному URL, а не индексация сайта.

• Какие зоны чаще трогает: URL из шеринга, og:image, главные лендинги — конкретные страницы, которые кто-то добавил в пост или в свою ссылку Link-in-Bio;
• Что ищет: заголовок, описание и превью-изображение страницы для карточки предпросмотра поста;
• Чем отличается от браузерного пользователя: нет нормальной сессии, обращение разовое и привязано к конкретному действию пользователя Loomly, а не к произвольному расписанию.

Типичный кейс: маркетинг видит всплеск hits в Метрике/GA, но сессии пустые. Причина — LoomlyBot. Правильная реакция — не «выключить сайт», а точечно запретить UA, если превью в чужих Loomly-аккаунтах вам принципиально не нужны — а не автоматически считать это нежелательным сканированием.

3. Нагрузка и риски именно для LoomlyBot

Отдельной строки в публичной сводке top-bot TrafficVeil у loomlybot может не быть, но в категории «Прочие краулеры и сервисы» такие агенты дают характерный фон: на отдельных доменах серии запросов выглядят как мини-волны автоматизации без конверсий. Поскольку бот, вероятно, user-initiated (реагирует на действие конкретного пользователя Loomly), а не сканирует сайт сам, серьёзной фоновой нагрузки он обычно не создаёт. Основной практический риск здесь не технический, а репутационный: если сайт активно упоминается в соцсетях через пользователей Loomly, блокировка бота может привести к сломанным превью в чужих постах, что снижает привлекательность ссылки при публикации.

4. Как найти LoomlyBot в логах

Не ищите «просто ботов» — ищите конкретный токен loomlybot и рядом смотрите соседей по семейству ботов предпросмотра ссылок.

# Базовый поиск
grep -i "loomlybot" /var/log/nginx/access.log

# Топ URL, которые вычитывает бот
grep -i "loomlybot" /var/log/nginx/access.log | awk '{print $7}' | sort | uniq -c | sort -rn | head

# Топ IP за этим UA
grep -i "loomlybot" /var/log/nginx/access.log | awk '{print $1}' | sort | uniq -c | sort -rn | head

# Суточная активность
grep -i "loomlybot" /var/log/nginx/access.log | awk '{print $4}' | cut -d: -f1 | sort | uniq -c

# Отделить от похожих строк семейства ботов предпросмотра
grep -iE "loomlybot|bufferlinkpreviewbot|clickuplinkunfurler|arenaunfurlbot" /var/log/nginx/access.log | wc -l

Верификация. Подделать User-Agent может любой скрипт. Для решения allow/deny смотрите связку: UA + IP + частоту + набор URL. Официального списка IP Loomly не публикует, поэтому опирайтесь на поведение — характерный признак настоящего link preview-бота этой категории: единичные точечные запросы к конкретным страницам, а не сканирование сайта.

IP="1.2.3.4"
whois -h whois.cymru.com " -v $IP"
dig +short -x "$IP"

5. robots.txt для LoomlyBot

# Жёсткий запрет
User-agent: loomlybot
Disallow: /

# Разрешить всё
User-agent: loomlybot
Allow: /

# Компромисс: закрыть деньги/кабинет, оставить публичку
User-agent: loomlybot
Disallow: /admin/
Disallow: /cart/
Disallow: /checkout/
Disallow: /account/
Disallow: /api/
Allow: /

Важно: ставьте Disallow или 403 для loomlybot, только если превью ссылок в чужих аккаунтах Loomly для вас принципиально не нужны — в большинстве случаев блокировка скорее вредит распространению ссылки в соцсетях, чем экономит ресурсы, поскольку речь идёт о точечных, а не массовых запросах.

6. Блокировка вручную и через TrafficVeil

Nginx

if ($http_user_agent ~* "loomlybot") {
    return 403;
}

limit_req_zone $binary_remote_addr zone=loomlybot:10m rate=10r/m;
location / {
    if ($http_user_agent ~* "loomlybot") {
        limit_req zone=loomlybot burst=20 nodelay;
    }
}

Apache (.htaccess)

RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} loomlybot [NC]
RewriteRule ^ - [F,L]

TrafficVeil

• Найдите loomlybot в ботах домена или в /system/bots;
• Учитывая вероятную природу link preview-бота, по умолчанию разумнее Allow — блокировка «на всякий случай» ломает карточки предпросмотра в чужих постах без реальной экономии ресурсов;
• Для явно нежелательного сценария — категорию «запретить»; для мягкого — rate-limit;
• После изменения сверьте логи: хиты LoomlyBot должны уйти в блок или лимит, а нужные поисковики остаться.

7. Рекомендации: что делать с LoomlyBot

• Если превью ссылки в постах пользователей Loomly для вас не критичны — можно блокировать без особых последствий;
• Если сайт активно продвигается через контент, который команды публикуют в соцсетях (в том числе через Loomly) — держите бота разрешённым по умолчанию;
• Не режьте слишком широко правилом User-agent: *, чтобы случайно не закрыть Googlebot или YandexBot;
• Что будет при блокировке: пользователи Loomly, добавившие вашу ссылку в пост или Link-in-Bio, увидят голую ссылку без картинки и описания при предпросмотре.

8. С кем не путать LoomlyBot

9. Стратегия allow/deny для LoomlyBot