Google „изнудва“ сайтовете за данни за обучение на AI, твърди шефът на Cloudflare

Главният изпълнителен директор на Cloudflare Матю Принс твърди, че Google използва господстващото си положение в областта на търсенето, за да получи нечестно предимство при обучението на големи езикови модели. Технологичният гигант вижда многократно повече данни от своите конкуренти и фактически оказва натиск върху собствениците на уебсайтове да споделят съдържание под заплахата да загубят трафика си при търсене.

Cloudflare, компания, специализирана в облачната сигурност за уебсайтове публикува публикация в блога си, в която посочва сериозния дисбаланс на пазара на изкуствен интелект, причинен от монопола на Google в областта на търсенето. Според изчисленията на Cloudflare Google има достъп до 3,2 пъти повече уеб данни от OpenAI, 4,8 пъти повече от Microsoft и повече от 6 пъти повече от останалата част от пазара на търсене. Cloudflare поиска от британския Орган за защита на конкуренцията и пазарите (CMA) да разгледа ситуацията в рамките на текущите си разследвания.

Проблемът е свързан с начина, по който са устроени уеб кроулерите – автоматични ботове, които индексират съдържанието на уебсайтове, пише Windows Central.

Microsoft, OpenAI и други компании разделят своите кроулери по предназначение, което позволява на собствениците на сайтове да блокират ботове, които събират данни само за целите на обучението на изкуствен интелект, отделно от търсачките. От своя страна, Google използва единен краулер (Googlebot) едновременно за индексиране в своята търсачка и за събиране на данни за обучение на AI.

Сайтовете, които решат да блокират Googlebot в името на това да защитят съдържанието си от AI едновременно ще изчезнат от търсачката на Google и на практика ще загубят бизнеса си. Принс заяви, че справедлив пазар на изкуствен интелект е невъзможен, докато Google използва монопола си в областта на търсенето, за да получи неравностойно предимство в данните. При това Google вече е въвела елемента AI Overview в горната част на резултатите от търсенето, който обобщава съдържанието на уебсайтовете, лишавайки ги от трафик, тъй като потребителите нямат особена нужда да навигират до тези сайтове.

Междувременно Microsoft започна да разработва алтернативен подход, като стартира програма за лицензиране, при която създателите на съдържание ще получават директни плащания за използването на техните материали.