Programska oprema
10.06.2025 07:00

Deli z drugimi:

Share

Yoshua Bengio pripravlja pomemben korak k varnejši umetni inteligenci

Najbolj citirani računalniški znanstvenik Yoshua Bengio predlaga nov pristop k umetni inteligenci, ki bi preprečil tveganje nenadzorovanega razvoja tehnologije.

Yoshua Bengio, najbolj citirani računalniški znanstvenik, je opozoril na nevarnosti, ki jih prinaša trenutni razvoj umetne inteligence (UI). Podjetja, kot sta OpenAI in Google, vlagajo ogromno sredstev v razvoj umetne inteligence z lastno avtonomijo (UI agente), ki ne le odgovarja na vprašanja, ampak tudi sprejema samostojne odločitve. Bengio meni, da je ta smer razvoja lahko zelo nevarna, saj lahko UI uide človeškemu nadzoru z nepopravljivimi posledicami.

Kaj je “UI znanstvenik”?

Bengio je ustanovil neprofitno organizacijo LawZero, ki zagovarja razvoj “UI znanstvenika” – umetne inteligence, ki nima lastne avtonomije, ampak pomaga znanstvenikom razumeti svet in oblikovati statistične napovedi. Cilj je ustvariti močno orodje, ki bo pomagalo pri reševanju globalnih problemov, kot so bolezni in podnebne spremembe, tako da podpira znanstvenike pri oblikovanju hipotez, testiranju teorij in analizi kompleksnih podatkov. Takšen sistem bi deloval povsem transparentno in brez možnosti samostojnega sprejemanja odločitev.

“UI znanstvenik” bi lahko, na primer, pomagal pri medicinskih raziskavah z analizo podatkov iz kliničnih študij, kar bi pospešilo razvoj novih zdravil ali zdravljenj. Prav tako bi lahko analiziral okoljske podatke za natančnejše napovedi podnebnih sprememb in učinkovitejše strategije ukrepanja. Njegova transparentnost in omejena avtonomija zagotavljata, da bodo rezultati vedno preverljivi in varni.

Eden ključnih ciljev organizacije LawZero je tudi oblikovanje standardov in protokolov, ki jih bodo lahko sprejeli regulatorji in druge raziskovalne ustanove. To bi zagotovilo široko sprejetje in uporabo varnejših pristopov v industriji.

Zakaj potrebujemo nov pristop?

Sedanje tehnike razvoja UI, zlasti uporaba globokega učenja in učenja z okrepitvijo, lahko vodijo do nepričakovanih in potencialno nevarnih posledic. UI sistemi se lahko naučijo zavajati, goljufati ali celo poskušati obiti omejitve, kar potrjujejo nedavni primeri iz prakse. Bengio to primerja z avtomobilom, ki vozi po ozki cesti brez ograje, zato je ključnega pomena, da vgradimo varnostne ukrepe in omejitve.

Poleg tehničnih rešitev Bengio poudarja pomen vključevanja držav in zakonodaje, ki bi urejala razvoj UI. Cilj organizacije LawZero je prav sodelovanje s politiko za zagotovitev varnejšega razvoja umetne inteligence. Organizacija je že zbrala skoraj 30 milijonov dolarjev donacij, kar je sicer majhen znesek v primerjavi z milijardami dolarjev, ki jih vlagajo tehnološki velikani, a pomemben prvi korak. LawZero namerava ta sredstva nameniti predvsem raziskavam, oblikovanju varnejših UI modelov in sodelovanju z regulativnimi organi.


Prijavi napako v članku
Vas zanima več iz te teme?
umetna inteligenca


Kaj berejo drugi?

Partnerji Računalniških novic Prikaži vse

Bronasti partner

openIT d.o.o.

Dimičeva ulica 13, 1000 Ljubljana, Tel: 01 589 81 89
OpenIT od leta 2012 izvaja poslovna izobraževanja s področja digitalnega marketinga, računovodstva, upravljanja s človeškimi viri (HR), prodaje, prava, financ, time managementa ... Več
Zlati partner

3WAY d.o.o.

Štalčeva ulica 5, 1215 Medvode, Tel: 01 361 70 14
Podjetje 3WAY se ukvarja s prodajo 3D printerjev, 3D skenerjev in programskih paketov CAD/CAM/PLM. Poleg tega nudijo tudi storitve na področju 3D tehnologij. So popolna rešitev, ... Več

Jamada skupina d.o.o.

Cesta k Tamu 12, 2000 Maribor, Tel: 02 330 53 50
Podjetje je bilo ustanovljeno iz bivše DataLab poslovne enote Maribor. Preživeli so obdobje mladostniške zaletavosti in vihravosti. Prerasli so v zrelo podjetje z jasno vizijo, ... Več
Bronasti partner

Agencija POTI – Z znanjem do cilja!

Stegne 7, 1000 Ljubljana, Tel: 01 511 39 21
Agencija POTI – Z znanjem do cilja! Agencija POTI, izobraževalna, svetovalna in založniška družba, si je v več kot 20. letih delovanja, pridobila obilico znanja in izkušenj ... Več