AI fejler i geometri: Kan ikke tegne sig til svaret
Ny test viser, at AI-modeller klarer sig dårligere, når de selv skal tegne figurer i olympiade-geometri – ikke kun regne.
Den nye opdagelse
Forskere har lavet en benchmark, der tester AI i olympiade-geometri – men i stedet for at give den færdige figurer, skal den selv tegne dem. Resultatet: AI klarer sig markant dårligere end i opgaver, hvor diagrammet allerede er givet. Pointen er, at AI godt kan løse matematik, men ikke forstå at opbygge figuren fra bunden.
Hvorfor det betyder noget
De fleste AI-benchmarks giver modellerne alt informationen på forhånd. Her er det nye, at AI'en selv skal konstruere diagrammet undervejs – som en elev, der selv skal tegne sin figur, før hun løser opgaven. Det afslører en skjult svaghed, som de normale tests misser helt.
Hvad det kan bruges til
Resultaterne kan hjælpe udviklere med at bygge bedre AI til undervisning og matematik, hvor forståelse af rum og form er nødvendig. Hvis AI skal hjælpe elever med geometri i skolen, skal den også kunne navigere i at tegne korrekt – ikke bare regne på et givet billede.
- AI-modeller scorer væsentligt lavere, når de selv skal tegne diagrammet i geometriopgaver.
- Benchmarken fokuserer på olympiade-geometri, et højt niveau af matematik.
- Modellerne får ikke et færdigt diagram, men skal konstruere figuren selv.
- Forskningen peger på en forskel mellem at løse og at tegne – to færdigheder AI ikke har samlet.
- Tidligere benchmarks har undervurderet AI's svagheder ved at give figuren væk på forhånd.
Hvis du bruger AI til matematik eller undervisning, kan modellen fejle på opgaver, hvor det kræver at tegne og tænke i rum – ikke kun regne.
Kilder:
arXiv cs.AI →
Genfortalt i egne ord af AI-nyheder.com · Tjek altid originalkilden, før du handler på vigtige oplysninger.
AI-nyheder