Новый стандарт RSL: как защитить контент от ИИ-скрейпинга и получать за него деньги

Группа ведущих интернет-компаний и издательских организаций, включая Reddit, Yahoo, Quora, Medium, The Daily Beast, Fastly и другие, заявила о создании нового стандарта, который может стать решением проблемы несанкционированного скрейпинга контента для обучения ИИ. Стандарт, названный «Really Simple Licensing» (RSL), был запущен 4 сентября 2025 года. Он расширяет возможности файла robots.txt, добавляя автоматизированный уровень лицензирования, который позволяет блокировать ботов, не соблюдающих условия использования и компенсации.

Создание и принципы работы стандарта RSL

Стандарт разработала группа под названием RSL Collective, основанная Дугласом Лидсом, бывшим генеральным директором Ask.com, и Эккартом Вальтером, бывшим вице-президентом Yahoo по продуктам и со-создателем RSS. В основе RSL лежит принцип, по которому издатели могут устанавливать условия лицензирования, использования и оплаты контента, применяемого для обучения ИИ.

Новый стандарт поддерживает различные модели лицензирования и оплаты, включая бесплатное использование, указание авторства, подписку, оплату за каждый скрейп (издатели получают вознаграждение при каждом сканировании контента ИИ) и оплату за каждое применение (издатели получают вознаграждение, когда ИИ использует их контент для генерации ответа).

Как появилась идея RSL

Идея RSL возникла после встречи Лидса с Вальтером, когда они обсуждали изменения в сфере поиска, вызванные развитием искусственного интеллекта. Вальтер, наблюдавший успех RSS, понял, что его стандарт уже содержал элементы лицензирования, и предложил адаптировать его под потребности ИИ.

Поддержка со стороны индустрии

Среди первых сторонников стандарта — Нил Вогель, глава People Inc., который назвал RSL шагом вперёд для всей индустрии. Также поддержку выразил Саймон Вистоу, сооснователь Fastly, отметив, что новый стандарт поможет создать экосистему, где инновации и инвестиции в оригинальный контент будут вознаграждены.

Как работает RSL и как он защищает права издателей

Через RSL издатели могут добавлять машинно-читаемые лицензионные условия в файл robots.txt. Например, они могут указать, что использование контента для обучения ИИ возможно только при соблюдении определённых условий. В случае нарушения таких условий, это может быть признано нарушением авторских прав.

Техническая реализация стандарта включает в себя сотрудничество с Fastly, которая предоставляет средства для блокировки нежелательных ботов. Также возможна интеграция с Cloudflare, которая уже разработала программу оплаты за скрейп.

Потенциальные последствия для отрасли

Создатели RSL подчёркивают, что стандарт не только защищает интересы издателей, но и решает проблему для компаний, разрабатывающих ИИ, которым сложно оплачивать контент из-за отсутствия единого протокола. С помощью RSL такие компании получают масштабный доступ к контенту, при этом оплачивая только тот материал, который действительно используется.

Законодательные перспективы и долгосрочные цели

Лидс отмечает, что RSL может стать основой для регулирования в будущем, как это произошло с Digital Millennium Copyright Act. В настоящее время RSL Collective ведёт переговоры с законодателями, ожидая, что стандарт может быть в будущем признан обязательным.

Влияние на будущее ИИ и веб-индустрии

По мнению Лидса, внедрение RSL важно не только для издателей, но и для развития ИИ. В текущем формате ИИ-системы часто создают недостоверные ответы, так как не могут использовать лучший контент из-за ограничений. С RSL можно будет создавать более точные и качественные ответы, основанные на лицензированном контенте.

Перспективы для малых издателей

Особое внимание уделяется малым создателям контента, которым до сих пор было трудно получать вознаграждение за использование их материалов. С помощью RSL они получают возможность защитить свои права и получать доход от лицензирования контента.

i

Создано специально для ASECTOR

Концептуальное изображение

Юридическая поддержка

Кроме технической реализации, издатели могут применять юридические меры для защиты своих прав. Например, недавнее судебное дело против Anthropic на сумму 1,5 млрд долларов демонстрирует, что использование контента без лицензии может привести к серьёзным финансовым последствиям.

RSL представляет собой попытку создать баланс между интересами издателей и компаний, разрабатывающих ИИ. Если стандарт получит широкое распространение, он может изменить рынок контента, сделать его более справедливым и устойчивым.

Стандарт RSL: когда контент перестаёт быть бесплатным

В эпоху, когда ИИ-модели всё чаще формируют ответы на основе данных, взятых из открытых источников, появился новый инструмент, меняющий правила игры. Стандарт Really Simple Licensing (RSL), запущенный 4 сентября 2025 года, предлагает издателям возможность устанавливать условия использования контента, включая оплату и указание авторства. Это не только техническое улучшение — это попытка создать рыночный механизм, где контент перестаёт быть бесконечным ресурсом для ИИ и превращается в товар с ценой. Впервые издатели получают возможность не только защищать авторские права, но и получать доход от тех, кто использует их материалы.

Кто за этим стоит и какие интересы в игре

Стандарт разработала группа RSL Collective, объединившая бывших топ-менеджеров крупных интернет-компаний. Это не случайность — участники давно столкнулись с проблемой, когда контент, который они создают и поддерживает, становится дешёвой или бесплатной базой для обучения ИИ. В основе RSL — не только защита прав, но и поиск баланса между издателями и ИИ-компаниями. Для последних стандарт позволяет легализовать доступ к контенту и избежать судебных рисков. Для издателей — он открывает путь к монетизации, особенно для малых и средних игроков, которые до сих пор не могли защитить свои права.

Например, Fastly и Cloudflare уже начали внедрять техническую поддержку RSL, что говорит о готовности инфраструктурных компаний стать частью этой экосистемы. Это важно: если крупные хостинги начнут блокировать ботов, не соблюдающих RSL, то стандарт получит мощный рычаг реализации. В свою очередь, компании, разрабатывающие ИИ, получат стабильный и легальный доступ к контенту, что может ускорить развитие их продуктов.

Скрытые эффекты и системные изменения

Новый стандарт может привести к каскадным последствиям. Во-первых, он ставит под вопрос традиционную модель ИИ-обучения, где данные собирались «вне поля зрения» издателей. Теперь этот процесс становится прозрачным и контролируемым. Во-вторых, RSL создаёт предпосылки для формирования нового рынка контента, где издатели могут получать доход не только от рекламы, но и от лицензирования. Это особенно важно для малых создателей, которые раньше не могли конкурировать с крупными медиахолдингами.

Однако здесь возникает парадокс: если ИИ-компании начнут платить за контент, это может привести к его дефолтной монетизации. То есть, контент, который раньше был доступен бесплатно, может стать платным. Это, в свою очередь, может снизить доступность информации для пользователей, особенно в развивающихся странах, где стоимость контента может быть критичной.

Влияние на будущее и уроки для России

Для России RSL может стать важным ориентиром. В стране, где ИИ-разработки активно развиваются, а рынок контента всё ещё формируется, такой стандарт может стать инструментом для защиты национальных издателей. Он демонстрирует, как можно создать экосистему, где интересы создателей контента и ИИ-компаний не противоречат друг другу, а взаимодополняют. Это особенно важно, когда речь идёт о поддержке местных СМИ и цифровых авторов.

Долгосрочная цель RSL — стать основой для регулирования, как это произошло с Digital Millennium Copyright Act. Это означает, что стандарт может быть принят не только технически, но и юридически. Для России такой путь может стать альтернативой глобальным стандартам, разработанным вне её интересов.

Важный вывод: RSL не только новый формат лицензирования — это попытка создать новую модель цифровой экономики, где контент становится частью рынка, а не бесконечным ресурсом. Это важно не только для США, но и для других стран, включая Россию, где цифровизация и ИИ становятся стратегическими направлениями.