AI-nyhederInfraBench: Forskere tester AI-agenter i it-drift
Forskere har udviklet InfraBench, en testramme der vurderer AI-agenter i it-drift. Den måler på tværs af lag, livscyklus og risiko.
Det nye værktøj
InfraBench er en ny måde at teste AI-agenter, der arbejder med it-infrastruktur – altså de systemer, der får hjemmesider og apps til at køre. Forskerne bag værktøjet vil vide, hvor godt disse agenter klarer opgaver som at overvåge servere eller håndtere fejl.
Hvad måler den?
Testen kigger på tre ting: forskellige lag i systemet, hele livscyklussen fra planlægning til drift, og hvor godt agenten håndterer risiko. Det giver et mere nuanceret billede end tidligere tests, som ofte kun kiggede på enkelte opgaver.
Hvad kan det bruges til?
For virksomheder kan InfraBench hjælpe med at vælge de rigtige AI-agenter. Men for almindelige mennesker betyder det i sidste ende mere stabile it-systemer. Artiklen er et forskningsoplæg, så der er endnu ingen konkrete resultater.
- InfraBench evaluerer AI-agenter i it-drift.
- Værktøjet måler på tværs af systemlag.
- Testen dækker hele livscyklussen i driften.
- Den vurderer også risiko i agenternes handlinger.
- Forskningen er præsenteret på arXiv.
Du får hurtigere opdagelse af fejl i de systemer, du bruger dagligt, når AI-agenter bliver testet grundigere før udrulning.
Kilder:
arXiv cs.AI →
Genfortalt i egne ord af AI-nyheder.com · Tjek altid originalkilden, før du handler på vigtige oplysninger.