OpenAI, Google, Microsoft ir Anthropic susivienija dėl naujo standarto, leidžiančio atsisakyti AI duomenų rinkimo

Vaizdas: The biggest names in AI are backing a new way to opt out of scraping · Šaltinis

Pagrindinės AI kompanijos priima bendrą standartą, leidžiantį leidėjams vieningai atsisakyti AI duomenų rinkimo naudojant bendrą „politikos žymą“ robots.txt failuose, siekiant supaprastinti ir gerbti svetainių savininkų pageidavimus AI mokymui.

Pirmaujančios dirbtinio intelekto įmonės OpenAI, Google, Microsoft ir Anthropic paskelbė, kad palaiko naują standartą, sukurtą tam, kad leidėjai turėtų vieningą būdą atsisakyti turinio rinkimo AI mokymo tikslais. The Verge paskelbti pranešimai atskleidžia, kad šis standartas įveda „politikos žymą“, įterptą į svetainės jau esantį robots.txt failą – jau gerai žinomą mechanizmą, naudojamą svetainėms nurodyti, kaip turi būti naršoma robotams.

Tradiciškai svetainių savininkams reikėdavo atskirai kiekvienai įmonei, vykdančiai AI robotus, nurodyti savo pageidavimus dėl turinio naudojimo, kas apsunkindavo taisyklių laikymąsi. Naujas sprendimas, pasiūlytas Kevin Kelley, Anthropic standartų techninio skyriaus vadovo, ir išvystytas Interneto inžinerijos darbo grupėje (IETF), siekia supaprastinti procesą suteikiant bendrą signalą. Kai AI robotai iš dalyvaujančių įmonių aptinka šią žymą, jie yra programuojami gerbti leidėjo pasirinkimą ir nerenka turinio.

Ši iniciatyva kyla dėl augančių leidėjų susirūpinimų dėl neautorizuotos turinio rinkimo daugelio AI modelių, kurie apdoroja didžiulius interneto duomenų kiekius. Kai kurios esamos priemonės apėmė Really Simple Licensing (RSL) standartą, leidusį imti mokestį už prieigą robotams, bei apsaugos priemones, tokias kaip Cloudflare numatytas AI robotų blokavimas.

Microsoft įsipareigojo suteikti detalias valdymo galimybes leidėjams, leidžiančias atsisakyti savo turinio naudojimo AI mokymui arba kaip patvirtintų informacijos šaltinių, siekiant užkirsti kelią AI haliucinacijoms („grounding“). Įmonė pabrėžė, kad net ir svetainės, pasirinkusios atsisakyti, bus randamos Bing paieškos rezultatuose. Google įdiegė panašias funkcijas, atskiriančias svetainės turinio naudojimą AI mokymui ir AI palaikomoms paieškos funkcijoms, neprarandant bendro matomumo paieškoje.

Anthropic jau įtraukė politikos žymos sistemą, o Google ir Microsoft planuoja ją diegti 2027 metais. OpenAI tikisi ją įgyvendinti artimiausiais mėnesiais. Meta komunikacijos vadovas Andy Stone palaikė bendro signalo idėją, tačiau dar neišdėstė, ar Meta ją skubės taikyti.

Ši bendradarbiavimo iniciatyva žymi svarbų žingsnį siekiant standartizuoti būdą, kuriuo svetainės gali perduoti savo pageidavimus dėl AI mokymo duomenų naudojimo, atspindinčią pramonės judėjimą link skaidresnių ir leidėjams labiau gerbiančių AI kūrimo praktikų.