Милиони уебсайтове ще блокират AI ботове с нова „революционна“ технология от Cloudflare

Cloudflare

Милиони уебсайтове – включително водещи медии като Sky News, Associated Press и Buzzfeed – вече ще могат да блокират достъпа на изкуствен интелект (AI) ботове до своето съдържание без разрешение. Това става възможно благодарение на нова технология, въведена от интернет инфраструктурната компания Cloudflare, която обслужва приблизително една пета от уеб пространството.

Системата цели да спре автоматизирани „краулери“, използвани от AI компании за събиране и индексиране на съдържание – процес, който играе ключова роля при обучението на модели с изкуствен интелект. В бъдеще Cloudflare планира да позволи на собствениците на уебсайтове да изискват заплащане от AI компании, когато техните системи използват това съдържание.

Според Рожер Линч, главен изпълнителен директор на издателството Condé Nast, мярката е „преломен момент“ за издателите. Той подчертава, че това е важна стъпка към създаване на справедлива икономика в интернет, в която се защитава интелектуалната собственост и се подкрепя качествената журналистика.

Новата цифрова реалност и борбата за авторски права

Използването на съдържание без разрешение от страна на AI компании предизвика силна критика от творци, писатели, музиканти и актьори. Във Великобритания това доведе до остри спорове между правителството и културната общност, включително личности като сър Елтън Джон, които настояват за по-силна правна защита на авторските права.

BBC наскоро заплаши със съдебни действия американската AI компания Perplexity, настоявайки тя да спре да използва съдържание от британската обществена медия и да плати компенсации за вече използвания материал.

AI срещу традиционните търсачки

За разлика от търсачки като Google, които насочват потребителите към оригиналните сайтове, AI ботовете събират съдържание, за да генерират отговори без да осигурят трафик към източника. Това ощетява издателите, които разчитат на посещения за приходи. Cloudflare описва това като нарушаване на негласното споразумение между уебсайтовете и краулерите.

„Pay Per Crawl“ – нов икономически модел

Компанията работи по създаването на система „Плати за обхождане“ (Pay Per Crawl), при която уебсайтовете ще могат да таксуват AI фирми за достъп до тяхното съдържание. Това е опит да се установи нов икономически модел, който балансира интересите на дигиталните създатели и AI индустрията.

По данни на Cloudflare, AI краулерите генерират над 50 милиарда заявки към мрежата на компанията всеки ден. Някои от тях пренебрегват стандартните механизми за забрана на обхождане (като robots.txt), което изостря необходимостта от техническа защита.

Необходимост от законодателни решения

Макар новата технология да се приветства от мнозина, експерти предупреждават, че тя е само временно решение. Ед Нютън-Рекс, основател на организацията Fairly Trained, която сертифицира AI компании за етично използване на данни, подчертава, че без законови механизми защитата е ограничена. „Все едно имаш бронежилетка, която действа само когато си у дома“, коментира той.

Кинорежисьорката баронеса Бийбан Кидрън, активен защитник на правата на творците, приветства действията на Cloudflare и призова AI компаниите да започнат да допринасят справедливо за общностите, от които черпят стойност.

Споделете с приятелите си