TheoPhysEval blev bygget af opgaver, som aktive fysikere ikke havde offentliggjort, netop for at ingen model kunne have set dem. Den bedste agent missede én, til en gennemsnitspris på omkring 2,33 dollar per opgave.
Model
Claude Opus 5.5
Claude Opus 5.5 er en AI-model udviklet af Anthropic. Denne side samler det, der er offentligt kendt om modellen, og hvert benchmarkresultat Aivio News har registreret for den, med kilde og dato for hvert enkelt tal.
- Udvikler
- Anthropic
- Model
- Claude 5
- Udgivet
- 22. september 2026
- Modaliteter
- Model, Image, Code
- Status
- Aktiv
- Kilde
- anthropic.com
Benchmarks
Alle artikler| Benchmark | Score | Kilde | Evalueret |
|---|---|---|---|
| Vibe Code Bench single agent, medium effort | 91.5% | vals.ai Uafhængig Verificeret | — Kildedato: 9. oktober 2026 |
| Vibe Code Bench single agent, maximum effort | 89.8% | vals.ai Uafhængig Verificeret | — Kildedato: 9. oktober 2026 |
Mere om Claude Opus 5.5
Selskabet siger, at de ræsonnementstokens, destillatører kan trække ud, nu er 10 til 100 gange færre end før, og at det har afvist billioner af tokens betalende trafik.
Artificial Analysis giver Muse Wonder Full 56 point, fjerde af 689 modeller. Meta sælger den svagere Muse Wonder via API og holder den stærkeste inde i Muse Code.
Arena offentliggjorde et indeks bygget på 72.509 virkelige agentsessioner samme dag, som selskabet meldte om en runde på 200 millioner dollar. OpenAI tager de fem første pladser.
Firmaet oplyser, at dets almindeligt tilgængelige modeller blokerer det meste cyberarbejde, og at godkendte forsvarere nu kan søge om en af tre gradvise lempelser af blokeringen.
ML4 er en åbenvægtsmodel med tusind milliarder parametre, trænet på 3.800 Nvidia-chips i Mistrals egne europæiske datacentre. Tallet selskabet fremhæver er 82 procent i en sårbarhedstest, hvor Claude Opus 5.5 og GPT-6 Astra ifølge Mistral får nær nul, fordi de afviser opgaven.
Claude blev så sent som i sidste uge brugt til efterretningsarbejde og i operationer mod Iran, oplyser personer med indsigt. Anthropic ville ikke kommentere.
To tal offentliggjort i denne uge beskriver de samme modeller. Hvilket man citerer, afhænger helt af, hvor stor en del af en revisors arbejde man er villig til at lade være med.
Googles første Gemini 4-model går først til cyberforsvarere, og de får den med cyberværnet slået fra
Argon skriver op til en million tokens i ét svar og koster 2 og 10 dollar per million i en introduktionsperiode. Google siger, at modellen fandt en kritisk fejl i hospitalssoftware, som tidligere modeller overså.