AI-nyhederNetlify tester 11 AI-modeller: Opus koster 4x mere
Netlify sammenligner 11 AI-modeller med samme prompt. Resultatet: store forskelle i både pris og kvalitet på de færdige hjemmesider.
Testen
Netlify har kørt den samme opgave igennem 11 forskellige AI-modeller: byg en simpel hjemmeside til en kaffebar. Opgaven inkluderede åbningstider, adresse, menu og et billede. Modellerne fik frit spil til at designe, men skulle holde sig til en statisk side uden avanceret system. Resultaterne er offentliggjort med fuld rapport, så du selv kan se forskellene.
Prisforskellen
Prisen på at generere siden svinger voldsomt. Claude Opus brugte i gennemsnit flest credits, og én enkelt kørsel løb op i hele 1.055 credits – cirka fire gange mere end de andre. Til sammenligning tog en anden model kun 81 credits for samme opgave. På Netlifys Pro-plan følger der 3.000 credits med, og ekstra credits koster 10 dollar per 1.500.
Kvaliteten
Den dyre Opus-kørsel producerede en flot side med detaljer som et frimærke-lignende element og custom kort. Men de billigere modeller kom også med brugbare resultater, bare med mindre indhold og enklere grafik. Netlify påpeger, at vektorgrafik stadig er en udfordring for AI-modeller, og designet kan virke forudsigeligt, når modellerne ikke får mere specifikke instruktioner.
Hvad nu?
Netlify vil følge op med flere tests, der går ud over den simple kaffebar-side. De bruger internt værktøjet AXIS til automatisk at evaluere modellerne, og kun modeller med gode testresultater tilbydes i Agent Runners. Du kan selv prøve alle modellerne på Netlify og se, hvilken der passer bedst til dit projekt og dit budget.
- Netlify testede 11 modeller: Claude Opus, OpenAI Codex, Gemini CLI og flere via OpenCode-agent.
- Opus' dyre kørsel kostede 1.055 credits, mens gennemsnittet for andre lå langt lavere.
- De billige modeller gav enklere men funktionelle hjemmesider med mindre indhold.
- Netlify bruger open source-værktøjet AXIS til automatisk evaluering af modellerne.
- GPT 5.6 Sol kører med lav indsats som standard, så du sparer credits.
- Alle modeller kørte med standardindstillinger på Netlifys platform.
- Rapporten viser, at vektorgrafik stadig er svært for AI-modeller.
Du kan nu vælge den AI-model, der passer til dit budget, og undgå at bruge fire gange så mange credits på samme opgave – med næsten samme resultat.
Kilder:
Hacker News: AI →
Genfortalt i egne ord af AI-nyheder.com · Tjek altid originalkilden, før du handler på vigtige oplysninger.