InfatiumBot
Сборщик, который читает открытые источники для лент пользователей. Здесь — как его узнать, что он читает и как от него закрыться.
Как называется
В robots.txt сборщик узнаёт себя по имени InfatiumBot. Полная строка User-Agent:
InfatiumBot/1.0 (+https://infatium.ru/bot)Что читает
Только те источники, которые пользователи сами добавили в свои ленты:
- RSS- и Atom-ленты, которые сайт публикует для читателей
- страницы сайтов — список материалов и сами статьи
- публичные Telegram-каналы — через Telegram, не по HTTP, поэтому robots.txt на них не действует
Как закрыться
Запретите сборщику сайт или раздел в robots.txt. Правило для InfatiumBot важнее правила для «*»:
User-agent: InfatiumBot
Disallow: /Отдельную страницу закрывают метатеги. noindex — страница не сохраняется; nosnippet и noai — не сохраняется текст, остаются заголовок и ссылка; noimageai — не сохраняются изображения:
<meta name="robots" content="noindex">
<meta name="infatiumbot" content="noai, noimageai">То же самое можно передать заголовком ответа X-Robots-Tag, в том числе адресно: «X-Robots-Tag: infatiumbot: noindex».
В Telegram включите в настройках канала «Запретить копирование» — такой канал нельзя добавить источником, а уже добавленный перестаёт читаться. Тот же флаг на отдельном сообщении исключает только его.
Сообщение, удалённое в канале, удаляется и у нас.
Куда писать
Если сборщик мешает сайту или вы хотите исключить источник целиком, напишите на support@infatium.ru или оставьте заявку в форме на странице «Авторские права».