OpenRSS: некоммерческий сервис, который генерирует RSS даже там, где его никогда не было

OpenRSS — не рядовой агрегатор существующих лент, а некоммерческая организация (зарегистрированный 501(c)(3) со штаб-квартирой в округе Колумбия, США, работающий исключительно на добровольные пожертвования), чья миссия — генерировать RSS-фиды для сайтов, у которых их вообще нет. Сервис явно противопоставляет себя «навязчивым, алгоритмическим лентам, которые вредят и манипулируют нами» — то есть позиционирует себя как этичную альтернативу закрытым платформам, убравшим у себя поддержку RSS.

Как это работает и почему это не просто чтение существующего фида

Механика продукта необычна для этой категории: пользователь берёт любую ссылку на сайт, дописывает openrss.org/ в начало адресной строки браузера — и, если сайт совместим, OpenRSS либо отдаёт настоящий RSS-фид этого сайта (если он уже существует), либо генерирует собственный, синтетический фид на основе структуры страницы. Сервис прямо перечисляет площадки, которые сами никогда не предлагали RSS или убрали его: например, Craigslist в какой-то момент удалил поддержку RSS и даже стёр обсуждения на эту тему со своего форума обратной связи — OpenRSS восстанавливает эту функциональность неофициально, а также поддерживает генерацию фидов для YouTube, Twitter/X, Mastodon-инстансов и форумов на Discourse.

Параметры бота

Почему это меняет практическую оценку

В отличие от классических RSS-фетчеров вроде BazQux или FeedWind из этой серии, которые периодически перечитывают уже существующий фид для постоянных подписчиков, OpenRSS чаще всего срабатывает разово — по факту того, что кто-то ввёл конкретный URL сайта через сервис, чтобы прямо сейчас получить или сгенерировать фид. Это делает поведение ближе к точечным фетчерам вроде redditbot или bitlybot, чем к постоянно опрашивающему боту: визит бота, как правило, означает единичный интерес конкретного человека к материалам сайта, а не системную синдикацию для широкой аудитории подписчиков.

Как найти бота в логах

grep -i "openrss" /var/log/nginx/access.log

# Точечный ли это визит или продолженный опрос
grep -i "openrss" /var/log/nginx/access.log | awk '{print $4}' | cut -d: -f1-2 | sort | uniq -c

Стоит ли блокировать

• если у сайта уже есть собственный RSS-фид и присутствие в стороннем каталоге не проблема — блокировка не приносит значимой пользы, а лишь мешает читателям, которые предпочитают использовать OpenRSS как обёртку для подписки;
• если у сайта нет собственного RSS, а генерация стороннего синтетического фида на основе структуры страниц нежелательна (например, из соображений контроля над представлением контента) — блокировка обоснована, и сервис официально предоставляет для этого готовую строку в robots.txt;
• на позиции в органической выдаче Google, Bing или Яндекса присутствие или отсутствие этого бота не влияет.

Как настроить доступ

Явное разрешение:

User-agent: openrss
Allow: /

Официально задокументированный запрет:

User-agent: openrss
Disallow: /

if ($http_user_agent ~* "openrss") {
    return 403;
}