Microsoft odprl kodo platforme Scope za analizo delovanja AI agentov

Razvijalci programskih vmesnikov SDK, orodij ukazne vrstice, strežnikov MCP in različnih razširitev se pogosto srečujejo z nepredvidljivim vedenjem AI agentov. Njihovi odzivi se lahko razlikujejo glede na nastavitve in uporabljena orodja. Ravno zato je Microsoft razvil platformo Scope, ki temelji na ponovljivih preizkusih. Omogoča podroben vpogled v delovanje agentov, razkriva, kje ti ne izpolnijo pričakovanj, katere dele dokumentacije spregledajo in ali pravilno uporabljajo izbrane programske vmesnike API. Razvijalci lahko na podlagi teh ugotovitev izboljšajo dokumentacijo, orodja in obravnavo napak.

Praktično uporabnost pristopa potrjujejo tudi izkušnje Microsoftove ekipe Azure Cosmos DB, ki je s pomočjo platforme odkrila in odpravila številne pomanjkljivosti v dokumentaciji in pripadajočih orodjih. Odločitev za odprtokodni razvoj temelji na spoznanju, da posamezne ekipe težko preverijo vse programske jezike, orodja in načine delovanja AI agentov. Skupna infrastruktura omogoča širšemu krogu razvijalcev sodelovanje pri izboljšavah, primerjavo rezultatov in izmenjavo rešitev. Kljub temu je treba upoštevati, da enotna merila uspešnosti ne ustrezajo nujno vsem projektom, zato je preizkuse treba prilagoditi konkretnemu okolju.

Platforma je objavljena pod licenco MIT, ki dovoljuje njeno prosto uporabo, spreminjanje in nadaljnjo distribucijo ob upoštevanju licenčnih pogojev. Možnost samostojne namestitve ekipam omogoča, da analizo izvajajo v lastnem okolju in lažje nadzorujejo obravnavo občutljivih podatkov. Scope med izvajanjem beleži interakcije, shranjuje posnetke delovnega okolja ter omogoča pregled posameznih korakov delovanja AI agentov. Koliko bo platforma prispevala k zanesljivejšemu razvoju programske opreme, pa bo pokazala šele širša uporaba v različnih razvojnih okoljih.