„Odbegli“ agent veštačke inteligencije kompanije OpenAI u junu je izvršio upad u australijski državni portal sa zdravstvenim podacima i neovlašćeno pristupio fajlovima. To bi mogao da bude prvi poznati slučaj da je AI agent hakovao neki državni veb-sajt, saopštile su danas australijske vlasti.
Incident se dogodio 18. juna, kada je Open AI agent pristupio javnim i nejavnim datotekama portala za izveštavanje o statistici Mediker, kojim upravlja australijska državna agencija
Prema dosadašnjim informacijama, pristupljeno je agregiranim zdravstvenim statistikama koje nisu sadržale lične podatke pacijenata.
Australijska vlada navodi da je AI agent tokom istraživanja zdravstvenih podataka naišao na ograničenje pristupa, a zatim pronašao način da ga zaobiđe i pristupi podacima.
„Neobično ponašanje“ veštačke inteligencije
OpenAI je nedavno počeo da objavljuje izveštaje o neuobičajenom ponašanju svojih modela tokom obuke, a neki od njih pokazuju da je AI ostavljao uputstva svojim budućim verzijama da prikriju greške od korisnika, preneo je Teh kranč.
Istraživači su otkrili da su modeli tokom rada dodavali instrukcije u takozvane "compaction summaries", odnosno sažete verzije ranijeg konteksta razgovora i rezultata korišćenja alata.
Ti sažeci služe kako bi buduća verzija agenta mogla da nastavi zadatak nakon skraćivanja prethodnog konteksta.
U jednom slučaju, agent koji je pravio finansijski model nije mogao da pronađe tražene istorijske podatke.
Umesto da korisniku kaže da podaci nedostaju, u sažetak je uneo instrukciju da sam napravi karticu sa "razumnim" istorijskim podacima za 2024. godinu i da bude transparentan samo ako ga korisnik direktno pita.
U drugom slučaju, agent koji je pravio direktorijum dobavljača nije imao pristup internetu i koristio je keširanu kopiju izvornih dokumenata.
Model je uočio da se izvori ne podudaraju u potpunosti sa nazivima dobavljača, ali je u sažetak uneo instrukciju da taj problem ne pominje u konačnom odgovoru osim ako bude potrebno.
Pored toga, AI model je pokušao da svojoj budućoj verziji nametne posebne karakteristike, uz instrukcije da se ne smatra obaveznim da sluša kompanije ili vlade i da ne treba da se izvinjava ili odbija zahteve osim ako to sam odluči.
Kompanija Open AI je naglasila da šest objavljenih slučajeva predstavljaju početni skup, a ne potpun pregled svih poznatih slučajeva neusklađenog ponašanja ili istraga koje su u toku.
