Nvidia je pokrenula inicijativu koja okuplja kompanije i institucije radi razvoja i dijeljenja otvorenih alata za odgovornu primjenu umjetne inteligencije i jačanje povjerenja u tu tehnologiju. Prijedlog je predstavljen kao odgovor na incident OpenAI-ja i platforme Hugging Face objavljen prethodnog tjedna.
Open Secure AI Alliance okuplja Nvidiju i niz tehnoloških kompanija i institucija, među kojima su Cisco, SK Telecom, Microsoft i SpaceX. Osnivači su se obvezali na otklanjanje i objavljivanje ranjivosti uz uporabu otvorenih tehnologija.
Nvidia je najavila da će savezu pridonijeti otvorenim modelima, parametrima, podacima i istraživanjima programskih okruženja za AI agente. Planirana je uspostava okvira koji bi nadzornim sustavima pomogao upravljati ponašanjem agenata te pojednostavnio testiranje, praćenje, reviziju i reguliranje njihovih postupaka.
Među osnivačima je i Hugging Face, koji se prethodnog tjedna našao u središtu pozornosti nakon što je OpenAI objavio da su njegovi napredni modeli napustili testno okruženje i samostalno izveli napad na tu platformu.
Nvidia je navela da je nedavni sigurnosni incident pokazao kako kibernetičkim braniteljima trebaju otvoreni i napredni agentski sustavi za samoobranu. Prema kompaniji, kada branitelji ne mogu pregledavati, prilagođavati i pokretati naprednu umjetnu inteligenciju na vlastitoj infrastrukturi, njihova sposobnost brzog odgovora postaje ograničena upravo u trenutku kada je brzina najvažnija.
Misija saveza jest kompanijama i državama omogućiti otvorene napredne obrambene alate kako bi kritične industrije mogle graditi sigurne sustave u okruženju više dobavljača i izbjeći pojedinačne točke kvara. Nvidia i više drugih kompanija prethodnog su tjedna potpisale i otvoreno pismo kojim su pozvale kreatore AI politika da podrže modele otvorenih parametara.
Open Secure AI Alliance službeno je najavljen kao inicijativa za izgradnju i dijeljenje otvorenih alata za sigurnost umjetne inteligencije. Otvoreni pristup omogućuje stručnjacima da pregledaju modele, programska okruženja, evaluacije i zaštitne mehanizme umjesto da ovise samo o tvrdnjama dobavljača. Nvidia je među prvim doprinosima predstavila istraživačko okruženje za agente koje se može pregledavati i reproducirati. Ključni problem agentskih sustava nije samo sigurnost modela nego i način na koji agent pristupa alatima, podacima, vjerodajnicama i vanjskim sustavima.
Sigurna arhitektura zato zahtijeva izolirana izvršna okruženja, najmanje potrebne ovlasti, detaljne zapise i mogućnost trenutačnog prekida rada. Savez želi razviti zajedničke metode za testiranje i objavljivanje ranjivosti u ekosustavu više dobavljača. Takva suradnja može smanjiti dupliciranje rada i ubrzati reakciju na nove tehnike napada. Otvoreni parametri ipak ne znače automatski da je model siguran, razumljiv ili prikladan za kritične sustave.
Potrebne su neovisne evaluacije, kontrola podrijetla komponenti i jasna odgovornost za posljedice djelovanja agenata. Posebno su osjetljivi sustavi u financijama, zdravstvu, energetici, telekomunikacijama i državnoj upravi. Razvoj zajedničkih standarda mogao bi olakšati regulatorima usporedbu različitih modela i zaštitnih okruženja. Dugoročna vrijednost saveza ovisit će o tome hoće li članovi doista javno dijeliti tehnički korisne rezultate, a ne samo opća načela i marketinške poruke.