Et laboratorium publiserer et tall om seg selv

Anthropic publiserte tre målinger 17. september som beskriver hvor mye av selskapets egen AI-forskning og -utvikling Claude nå utfører. Hovedtallet: Claude «leder» 26 prosent av det arbeidet i august 2026, mot under 1 prosent i februar.

Selskapet har bygget det de kaller en indeks for AI-ledet FoU-automatisering. De katalogiserte typene forskningsoppgaver som gjøres hos Anthropic, ga hver av dem en verdi på en automatiseringsskala fra AL0, ingen AI-involvering, til AL5, helt autonomt, og vektet resultatet etter hvor mye ansattes tid hver oppgave krever.

«Leder» tilsvarer AL4 på den skalaen: Claude fullfører mesteparten av en oppgave fra ende til ende ut fra en overordnet instruksjon, med et menneske som fører tilsyn. Trinnet under, AL3, er «samarbeider» — modellen gjør store deler under tett menneskelig styring. Mer enn 90 prosent av Anthropics AI-FoU ligger i dag på AL3 eller høyere.

Ingen målt del av arbeidet har nådd AL5. Anthropic sier rett ut at Claude ikke opererer helt autonomt på noen del av det.

Serverskap med ryddige kabelbunter mellom seg
Anthropic opplyste at rundt 30 000 agenter arbeidet samtidig i august. Illustrasjonsbilde. panumas nikhomkhai · pexels · Pexels License

Tretti tusen agenter, og hva som overvåker dem

Den andre opplysningen handler om tilsyn. Anthropic opplyste at rundt 30 000 agenter utførte forsknings- og ingeniørarbeid til enhver tid på selskapets viktigste interne plattform i august.

Hver handling disse agentene utfører går gjennom en sanntidsovervåker før den kjøres. Anthropic rapporterte at overvåkeren blokkerte 0,002 prosent av beslutningene — omtrent én av 47 000. En egen etterhåndsovervåker gjennomgår 100 prosent av handlingene i ettertid og flagger omtrent én til to transkripsjoner per tusen. Mennesker gjennomgår direkte rundt 50 prioriterte saker i uken.

Disse tallene fortjener en ny lesning. En blokkeringsrate på én av 47 000 kan bety at sikringene sjelden trengs, eller at de fanger lite. Tallet alene skiller ikke mellom de to, og Anthropic hevder ikke at det gjør det.

Seks prosent til sikkerhet

Den tredje målingen gjelder regnekraft. Anthropic opplyste at 6 prosent av regnekraften til AI-forskning gikk til sikkerhetsforskning i juli 2026, og 12 prosent av kraften som var satt av spesifikt til AI-drevet FoU.

Selskapet legger selv til et forbehold: sikkerhetsarbeid hviler mer på eksperimentdesign enn på ren regnekraft, så en lav andel oversettes ikke direkte til lav innsats. Det er en rimelig innvending og samtidig en beleilig en, og nettopp den typen påstand en ekstern evaluator måtte prøve.

Et tomt møterom med et langbord og stoler
Selskapet publiserte tre målinger av sitt eget utviklingstempo. Illustrasjonsbilde. cottonbro studio · pexels · Pexels License

Hvorfor nå

Tidspunktet er neppe tilfeldig. Fem dager tidligere publiserte Anthropics toppsjef Dario Amodei et essay der han hevder at bransjen må bremse takten den forbedrer modellenes evner med, og at frontlaboratoriene bør slippe uavhengige evaluatorer inn for å kontrollere påstandene deres.

Å publisere selvmålte tall er hvordan det argumentet ser ut i praksis. Det setter også en standard konkurrentene ikke har møtt: ingen andre frontlaboratorier publiserer et tall for hvor mye av egen forskning modellene deres utfører.

Hva som er verdt å følge

Alt dette er Anthropic som måler Anthropic. Indeksen er selskapets egen konstruksjon, automatiseringsnivåene er dets egne definisjoner, og ingenting er revidert.

Anthropic sier de har til hensikt å la uavhengige tredjepartsevaluatorer verifisere målene. Prøven på denne åpenheten blir om det skjer, hvem evaluatorene er, og om tallet på 26 prosent overlever noen andres regnestykke.