Организация Creative Commons, известная своими лицензиями, позволяющими авторам делиться своими произведениями с сохранением авторских прав, выразила осторожную поддержку технологии «pay-to-crawl» — системы, которая позволяет автоматически оплачивать использование контента сайтов машинами, включая ИИ-роботов для сбора данных.
Ранее в этом году Creative Commons представила правовую и техническую основу для обмена наборами данных между компаниями, владеющими данными, и поставщиками ИИ, желающими использовать эти данные для обучения моделей. Теперь организация видит в системе оплаты за обход сайтов возможность помочь авторам контента сохранять доступность своих материалов и компенсировать их использование.
Идея «pay-to-crawl» заключается в том, что ИИ-боты будут платить за каждый случай сбора информации с сайта для тренировки и обновления моделей. Раньше сайты бесплатно разрешали индексировать свой контент для поисковых систем, что приносило им посетителей. Но с появлением ИИ пользователи чаще получают ответы напрямую от чатботов и реже переходят на исходные сайты, что уменьшает трафик и доходы издателей.
Система оплаты за обход может помочь издателям восстановить доходы и особенно полезна для небольших сайтов, которые не могут заключать индивидуальные соглашения с поставщиками ИИ. При этом Creative Commons подчеркивает необходимость ответственного внедрения таких систем, чтобы не ограничивать доступ к информации для исследователей, некоммерческих организаций и образовательных учреждений.
Также организация предлагает принципы, которые должны соблюдаться: не делать оплату за обход обязательной для всех сайтов, избегать общих правил для всей сети, обеспечивать возможность регулировки доступа без полного блокирования и сохранять публичный доступ там, где это важно.
Кроме Cloudflare, в разработку подобных решений вовлечены Microsoft, стартапы ProRata.ai и TollBit, а также группа RSL Collective, создавшая стандарт Really Simple Licensing (RSL) для регулирования доступа роботов к контенту. Этот стандарт поддерживают крупные компании и издатели, а Creative Commons активно участвует в его развитии вместе с другими инициативами для эры ИИ.
