безопасность 1 мин

Patreon перестала просить AI-боты не воровать контент — и начала их блокировать

Patreon вместе с Cloudflare перешла от вежливых просьб к жёстким блокировкам AI-скраперов, обучающихся на работах создателей без разрешения. Тестирование показало: тысячи попыток доступа в неделю упали до нуля — значит, боты игнорировали robots.txt и качали данные втихаря.

Это сигнал масштабного сдвига в отрасли: платформы переходят от пассивной обороны к активной. Если подход Patreon сработает, expect эффект домино — другие платформы последуют примеру, что изменит правила игры для обучения AI-моделей.

От просьб к баррикадам

Patreon, платформа подписок для создателей контента, объявила о переходе к жёстким мерам против AI-скрапинга. Вместо традиционного robots.txt — стандартного файла, который просит ботов вести себя прилично — компания теперь технически блокирует доступ AI-моделям через инфраструктуру Cloudflare.

Решение вызрело не на пустом месте. В 2023-м Patreon впервые установила ограничения, но AI-скрейперы стали изощрённее. Плюс платформа недавно запустила новые инструменты обнаружения контента — обновлённую ленту Home Feed и твиттероподобные Quips — что открыло больше материала для потенциального сбора данных.

Цифры не врут

Тестирование нового подхода дало красноречивый результат: еженедельные попытки доступа отдельных AI-краулеров упали с тысяч до нуля. Это прямое доказательство: боты наплевательски относились к вежливым просьбам в robots.txt и качали данные без спроса.

«Согласие не должно зависеть от того, решит ли скрейпер вести себя хорошо», — жёстко сформулировали в Patreon.

Избирательный подход

Важный нюанс: платформа продолжит разрешать доступ ботам, которые индексируют контент для поиска и возвращают пользователей на Patreon. Блокируются только те, кто тренирует модели на чужих работах.

Глава по продукту Дрю Рауни сформулировал философию: «На большей части интернета авторам приходится мириться с обучением AI на их работах, чтобы просто найти аудиторию. У Patreon другая позиция: авторы должны растить аудиторию и контролировать использование своих работ».

Решение Patreon отражает растущий тренд: всё больше платформ переходят от уговоров к техническим барьерам. Cloudflare уже запустила маркетплейс Pay Per Crawl, где сайты могут требовать плату за скрапинг, и по умолчанию блокирует «смешанных» краулеров на страницах с рекламой.

Ключевые выводы

  • AI-скрейперы массово игнорируют robots.txt — «вежливые просьбы» не работают без технического принуждения
  • Переход от opt-out (просьба не скрапить) к активным блокировкам становится новым стандартом защиты авторского контента
  • Cloudflare превращается в ключевого игрока в войне между платформами и AI-компаниями за права на данные
  • Платформы начинают разделять «хороших» ботов (поисковая индексация) и «плохих» (обучение моделей) на техническом уровне
  • Patreon использует момент запуска новых discovery-инструментов, чтобы сразу защитить расширенную поверхность контента
AI-скрапингавторские правазащита контентаCloudflarerobots.txt

Автор: Елена Верещагина · Источник: TechCrunch AI

Мнение редакции

Здесь интересна именно прозрачность результатов: тысячи попыток в неделю → ноль после блокировки. Это публичное доказательство того, что robots.txt — фиговый листок для PR, а не работающий инструмент. AI-компании его игнорируют системно, и теперь это зафиксировано цифрами.

Второй момент — философский сдвиг Patreon. Они не пытаются монетизировать скрапинг (как Cloudflare с Pay Per Crawl), а просто режут нафиг. Это позиция силы: «у нас есть paywall, лояльная аудитория и не нужен трафик из поиска любой ценой». Для платформ-подписок это может стать выигрышной стратегией, но медийным сайтам, зависящим от органики, такое не светит.

Комментарии