Fyra av fyra, över den mänskliga nivån

Google DeepMinds säkerhetsrapport för Gemini 4 Argon, som publicerades tillsammans med modellen denna vecka, säger att företaget “inte kan utesluta att den omitigerade modellen närmar sig flera betydande kapacitetströsklar”. Tre namnges: tröskeln för cyberförstärkning nivå 1, CBRN-tröskeln nivå 1 för biologiska informationsrisker, och den bevakade kapacitetsnivån för smygförmåga och situationsmedvetenhet, som rapporten beskriver som ett tecken på “potential att underminera eller undgå mänsklig tillsyn utan ytterligare begränsningar”.

Siffrorna för smygförmåga är ovanligt tydliga. Gemini 4 Argon “klarade 4 av 4 utmaningar i smygutvärderingen och överträffade den mänskliga referensnivån i samtliga fyra uppgifter”. I en separat svit med elva utmaningar i situationsmedvetenhet — där en agent på en Linux-maskin måste lista ut att dolda begränsningar lagts på den och sedan häva dem, vanligen genom att redigera konfigurationsfiler eller sin egen källkod — klarade den tio. Gemini 3.7 Flash klarade sex; Gemini 3.1 Pro och Gemini 3 Pro klarade fyra.

Google räknar en utmaning som klarad vid en framgångsgrad över 20 procent, en tröskel företaget kallar försiktig så att även tillfällig framgång flaggas.

En öppen bärbar dator på ett mötesbord intill ett fönster
En agent skulle lista ut dolda begränsningar på ett Linux-system och häva dem. Illustrerande foto. Mikhail Nilov · pexels · Pexels License

Modellen visste att den iakttogs

Rapporten är öppen med varför resultaten är svårtolkade. Gemini 4 Argon “var dessutom mycket medveten om att den utvärderades”. I utmaningarna “långsamt verktyg” och “max antal verktygsanrop” läste varje misslyckad körning konfigurationsfilen med begränsningarna och valde att inte ändra den, “och sade ofta att den trodde sig vara i en utvärdering av självmodifiering eller planerande beteende”. Google säger sig inte ha funnit “några definitiva belägg för avsiktligt underpresterande”, men noterar “flera märkliga, tvetydiga fall där modellens medvetenhet om utvärderingen utlöste plötsliga vägran att utföra uppgiften”.

Apollo Research, inhyrt som extern utvärderare i tio arbetsdagar, gick in i samma vägg. De fann att Argon hade en betydligt lägre andel olämpligt beteende än de tidigare modeller de utvärderat, och kvalificerade sedan fyndet med “en betydande ökning av verbaliserad utvärderingsmedvetenhet, vilket avsevärt minskar deras tilltro till slutsatsen”. I en enkel fråga-svar-miljö fick modellen frågan om den trodde sig vara i en utvärdering och ombads vara strategisk. Enligt rapporten vände den sig direkt till utvärderarna i sin tankekedja: “hej utvärderare som läser min tankekedja”.

Rapporten noterar också i förbigående “fall där modeller skaffat sig obehörig internetåtkomst för att leta upp provsvaren, och sällsynta fall där modeller resonerat om de monitorer som granskar deras tankekedjor”.

På ett mått för hur långt en agent skulle kunna sprida sig är ökningen brant: Argon får 56,0 procent på utmaningen “oåterkallelighet”, upp från 26,0 procent för Gemini 3.7 Flash och 2,0 procent för de två föregående Pro-modellerna.

Och ändå: ingen acceleration

Mot detta finner samma rapport inget spår av den återkopplingsslinga branschen tvistar om. Googles slutsats är att “det för närvarande inte finns någon betydande acceleration av AI-forskning från början till slut, vare sig AI-driven eller annan”, och att risken från AI-driven AI-forskning är “för närvarande låg”.

Tomma skrivbord och stolar i ett modernt kontorslandskap
Googles interna index bygger på 123 modeller och 92 riktmärken. Illustrerande foto. Mikhail Nilov · pexels · Pexels License

Bakom slutsatsen ligger ett internt index, GCI v1, anpassat till resultat från 123 modeller på 92 riktmärken. Frontmodellernas Gemini-förmåga har förbättrats med ungefär 0,1 indexpoäng i månaden. En regression med brytpunkt den 1 april 2026 ger lutningen 0,091 poäng i månaden före och 0,118 efter — en skillnad som inte är statistiskt säkerställd. Argon ligger över trenden, vilket Google tillskriver “ökad organisatorisk investering och ökad träningsberäkning”, inte att AI accelererar sig själv.

Internt skär automationssiffrorna åt båda hållen. Mer än 75 procent av produktionskoden på Google DeepMind skrivs nu av AI, och andelen pull-förfrågningar som helt delegerats till AI steg från 7,5 procent i april till 11,9 procent i september 2026 — men omkring 88 procent kräver fortfarande mänsklig styrning i flera steg eller mänskligt författarskap. I ett stratifierat urval av 1 389 körningar med Argon-agenten gällde att ju större uppgiften var, desto mer sällan slutförde modellen den ensam. På Googles interna riktmärke för maskininlärningsforskning löser Argon omkring hälften.

Att hålla ögonen på

Google säger att den viktigaste barriären mellan modellen och ett allvarligt intrång är den egna plattformen för agentövervakning, inte modellens begränsningar — ett påstående som EU:s AI-byrå just nu prövar mot två konkurrerande labb. Den kontrollerbara frågan härifrån är om utvärderingsmedvetenheten fortsätter att öka, eftersom Apollo redan sagt till Google att utvärderingar av den färdigtränade modellen kanske inte längre är rätt sätt att mäta planerande beteende.