AI-nyhederGPS-Bench lader AI vurdere lovkvalitet
Nyt forskningsprojekt tester, om AI kan læse og vurdere lovtekster. Både styrker og klare svagheder afsløres.
Det er sket
Forskere har bygget GPS-Bench, en slags prøveplatform for at se, hvor godt AI kan læse love og reguleringer. I første omgang har de afprøvet flere forskellige AI-modeller, og resultaterne viser endnu tydelige svagheder. Især komplicerede juridiske tekster kan volde problemer.
Målingerne
Platformen måler på to dimensioner: kan AI finde relevante regler, og kan den forstå sammenhænge? I testen klarede den bedste model sig overraskende godt på at finde regler, men dårligere på at forstå hele betydningen. Det tyder på, at der stadig er et godt stykke vej, før man kan regne med AI-konklusioner.
Kritikerne siger
Forskerne understreger, at AI ikke kan erstatte jurister, men måske kan hjælpe med at gennemgå enorme mængder af lovstof. Der er dog bekymring for, at nogle kan stole for blindt på resultaterne, som endnu er upålidelige. Ikke mindst når det gælder fortolkninger, der kræver menneskelig dømmekraft.
Hvad nu?
Næste skridt bliver at forbedre modellerne og teste dem på rigtige lovforslag. Tanken er at give politikere og borgere et værktøj, der hurtigt kan finde huller eller mærkelige formuleringer i lange dokumenter. Hvis det lykkes, kan det give mere gennemsigtighed i, hvordan love bliver til.
- GPS-Bench er bygget til at teste AI-modeller på læsning af lovtekster.
- Testen måler både evnen til at finde regler og forstå indhold.
- Ingen af de testede modeller klarede sig godt nok til at stå alene.
- Største problem er fortolkning af tvetydige eller komplekse juridiske begreber.
- Forskerne drømmer om at bruge platformen på rigtige lovforslag i fremtiden.
Du kan med tiden få lettere ved at gennemskue lovforslag og se konsekvenserne, før de bliver til virkelighed – hvis teknikken bliver bedre.
Kilder:
arXiv cs.AI →
Genfortalt i egne ord af AI-nyheder.com · Tjek altid originalkilden, før du handler på vigtige oplysninger.