AI-nyhederGoogle-forskere gør AI-test 90 pct. hurtigere
Nye AI-tests kan blive langt hurtigere ved kun at bruge de vigtigste spørgsmål i stedet for tusindvis.
Ny metode
Forskere hos Google har fundet en måde at gøre test af AI-modeller markant hurtigere på. Metoden hedder CoT-Core og vælger kun de vigtigste testspørgsmål ud, der giver det samme resultat som en fuld testrunde. Det betyder, at udviklere kan få svar på, om en AI virker, uden at skulle køre alle spørgsmålene igennem.
Resultaterne
Testene viste, at man kan skære op til 90 procent af spørgsmålene væk og stadig få samme resultat. Det sparer både tid og computerkraft. Metoden virker på flere forskellige AI-modeller og kan bruges både til at tjekke om en model svarer rigtigt og til at sammenligne modellerne med hinanden.
Sådan virker det
CoT-Core kigger på, hvordan AI'en tænker, når den svarer. Ved at forstå hvilke spørgsmål, der er vigtigst, kan den vælge et lille udvalg, der stadig giver et præcist billede af AI'ens evner. Det er lidt som at tage en kort stikprøve i stedet for at tælle alle vælgerne.
Hvad nu?
Metoden kan gøre det billigere og hurtigere for virksomheder at udvikle nye AI-modeller. Det kan også betyde, at almindelige brugere får bedre og hurtigere opdateringer af de AI-chatbots og værktøjer, de bruger. Forskningen er stadig ny, men den ser lovende ud.
- Metoden hedder CoT-Core og er udviklet af Google-forskere.
- Den skærer op til 90 procent af testspørgsmålene væk uden at miste præcision.
- Metoden virker på flere forskellige AI-modeller.
- Den kan bruges til både at evaluere og sammenligne AI-modeller.
- CoT-Core analyserer AI'ens tankeproces for at finde de vigtigste spørgsmål.
- Metoden sparer tid og computerkraft ved tests.
Når udviklere tester hurtigere, kan du få opdateringer og forbedringer af AI-værktøjer meget hurtigere end i dag.
Kilder:
arXiv cs.AI →
Genfortalt i egne ord af AI-nyheder.com · Tjek altid originalkilden, før du handler på vigtige oplysninger.