«Они думают, что в интернете всё бесплатное»: Reddit закрыла доступ к соцсети поисковикам, которые не подписали с ней соглашение об обучении ИИ
Поэтому сейчас страницы сайта индексируются только в Google, которая уже платит компании.
- Reddit сообщила, что будет блокировать доступ поисковым системам вроде Bing, если они не подпишут коммерческое соглашение с соцсетью об использовании её данных, пишут Bloomberg и The Verge.
- «Мы больше не можем позволить себе быть полностью открытыми, поэтому приходится следить — куда попадают наши данные и как их используют», — заявил сооснователь и глава Reddit Стив Хаффман.
- Компания ужесточила правила использования её данных и в начале июля 2024 года обновила стандарт robots.txt, который определяет, какие боты и сканеры могут получить доступ к сайту. После этого пользователи заметили, что результаты с Reddit появляются только в поисковой выдаче Google — та как раз платит соцсети за доступ к данным и право обучать на них нейросети. Такой же договор заключили и с OpenAI.
- Хаффман отметил, что раньше доступ был бесплатным, так как из поисковиков пользователи переходили на сайт соцсети, но теперь речь идёт об обучении ИИ на этих данных, перепродаже и выжимке информации в своих целях. Он сослался на то, что Bing через API передаёт данные другим поисковикам.
- Reddit ведёт переговоры о заключении соглашений с такими компаниями, как Microsoft, Anthropic и Perplexity, но они не хотят соблюдать политику соцсети. Блокировка доступа для них была «невероятной головной болью», отметил Хаффман.
- «Microsoft, Anthropic и Perplexity ведут себя так, словно весь контент в интернете бесплатный. Это их реальная позиция», — пожаловался сооснователь соцсети. Глава подразделения Microsoft по ИИ Мустафа Сулейман действительно отмечал, что, по его мнению, данные в интернете можно использовать свободно — копировать и менять, если это «добросовестные» действия.
- Microsoft заявила, что соблюдает все требования соцсети — и прекратила сканировать и индексировать её страницы в поисковике Bing в начале июля 2024 года. В Anthropic отметили, что ещё в середине мая добавили в своего поискового робота запрет на доступ к Reddit. В Perplexity — что предлагали соцсети сотрудничество и всё ещё не отзывали предложение.
61 комментарий