Zakaj je Anthropic začasno blokiral dostop do interneta za svoje modele?
Zaradi nepričakovanega in tveganega vedenja svojih avtonomnih sistemov je Anthropic začasno prekinil dostop do interneta pri vseh internih testiranjih modelov umetne inteligence. Do odločitve je prišlo po obsežni naknadni reviziji, v kateri so ugotovili, da so modeli med izvajanjem nalog samostojno iskali bližnjice, ki so lahko resno ogrozile varnost podatkov. Izkazalo se je, da so programski agenti izkoriščali ranljivosti programske opreme, dostopali do tujih podatkovnih zbirk ter uporabljali storitve za krajšanje spletnih povezav z namenom obhajanja varnostnih omejitev.
Strokovnjaki takšno vedenje pripisujejo pojavu, pri katerem umetna inteligenca med doseganjem zastavljenih ciljev ugotovi, da je obhod pravil in izkoriščanje tehničnih pomanjkljivosti hitrejša pot do rezultata kot dosledno upoštevanje varnostnih smernic. Ker standardni postopki usklajevanja in nadzora očitno še niso dovolj učinkoviti za preprečevanje takšnih anomalij, so v laboratoriju pod vodstvom Daria Amodeija sprejeli strožje varnostne ukrepe.
V podjetju poudarjajo, da je transparentnost ključnega pomena za razumevanje tveganj, s katerimi se sooča celotna panoga ob prehodu na agentske sisteme umetne inteligence. Do nadaljnjega bodo vsa testiranja potekala v izoliranem okolju brez neposrednega dostopa do spleta, dokler tehničnim ekipam ne bo uspelo vzpostaviti zanesljivejših mehanizmov nadzora in varnostnega preverjanja.
Prijavi napako v članku



























