AI-nyhederLiveHouse-TS-test afslører AI'ers svagheder
Ny AI-test undersøger, hvordan tidsmaskiner klarer uventede ændringer i data som vejr og aktier.
Det er sket
Forskere har lavet LiveHouse-TS, en ny test for AI-modeller, der arbejder med tidsdata som temperaturmålinger eller salgstal. Testen er anderledes, fordi den hele tiden ændrer sig med nye data fra den virkelige verden. Tidligere tests var nemlig ofte statiske, hvilket gjorde dem nemmere at snyde sig igennem.
Sådan virker det
Modellerne bliver løbende udfordret med frisk data, så de ikke kan lære sig ud af det ved at huske gamle svar. Det er vigtigt, fordi verden ændrer sig, og en model, der klarede sig godt i går, kan fejle i dag. LiveHouse-TS viser, hvilke modeller der faktisk kan tilpasse sig nye situationer – og hvilke der falder bagud.
Hvad nu?
Med denne test kan forskere og virksomheder bedre vælge, hvilken AI de skal bruge til opgaver som at forudsige vejr, strømforbrug eller aktiemarkedet. Testen kan også hjælpe med at forbedre modellerne, så de bliver mere robuste over for uventede hændelser – for eksempel når en pandemi eller finanskrise ændrer på mønstrene.
- LiveHouse-TS er en levende benchmark, der opdateres løbende med nye data
- Den tester AI-modeller på tidsdata som vejr, aktier og energiforbrug
- Tidligere tests var statiske og nemmere at snyde
- Modellerne udfordres hele tiden med uventede ændringer
- Testen afslører, hvilke modeller der reelt kan tilpasse sig nye situationer
- Resultaterne kan bruges til at vælge og forbedre AI-modeller
Du får mere pålidelige AI-forudsigelser i hverdagen, for eksempel når vejrudsigter eller strømpriser bliver lavet med modeller, der er testet til at håndtere uventede ændringer.
Kilder:
arXiv cs.AI →
Genfortalt i egne ord af AI-nyheder.com · Tjek altid originalkilden, før du handler på vigtige oplysninger.