AI orodja za programiranje lahko upočasnijo izkušene programerje

Pomočniki umetne inteligence (AI) za programiranje, kot sta GitHub Copilot in Cursor Pro, postajajo stalnica v delovnem procesu programerjev. Orodja, ki temeljijo na velikih jezikovnih modelih podjetij OpenAI, DeepMind, Anthropic in xAI, obljubljajo hitrejše pisanje kode, samodejno odpravljanje napak in pametno testiranje. A najnovejša raziskava skupine METR (Model Evaluation and Testing for Responsibility) je presenetila z ugotovitvijo, da ti pomočniki v praksi ne pospešijo dela programerjev. V nekaterih primerih pa ga lahko celo upočasnijo.

V kontrolirani raziskavi, ki je vključevala 16 izkušenih razvijalcev odprte kode in 246 nalog, so raziskovalci ugotovili, da je dovoljena uporaba AI orodij povprečno podaljšala čas izvajanja nalog za 19 odstotkov. Udeleženci so sicer predhodno ocenili, da bo uporaba AI orodij skrajšala čas nalog za 24 odstotkov. Glavni AI pomočnik v študiji je bil Cursor Pro, ki pa ga je predhodno uporabljalo le 56 odstktkov razvijalcev. Čeprav so bili vsi pred začetkom usposobljeni zanj, je bila uporaba v praksi manj učinkovita. Orodja, kot je Cursor, zahtevajo veliko interakcije in čakanja na rezultate, kar je zmanjšalo učinkovitost, še posebej pri velikih in kompleksnih kodah.

Raziskovalci METR opozarjajo, da ta študija ni splošna obsodba AI orodij ter da številne druge študije potrjujejo njihovo korist. A trenutni rezultati so jasni: orodja, znana kot t. i. vibe coderji, še niso zagotovilo za boljšo produktivnost. Še več, druge raziskave opozarjajo tudi, da lahko AI orodja v kodo vnesejo napake ali celo varnostne ranljivosti. Zato previdnost in dodatno izobraževanje programerjev zagotovo ne bodo odveč.