En artikel som lades upp på arXiv den 22 september för ett strukturellt resonemang om multiagentsystem: den centrala orkestreraren — modellen som bryter ned en uppgift och delar ut bitar till arbetare — är det som hindrar systemen från att skala. Agensh, av Zhihao Zhan och sex medförfattare, tar bort den.
I dess ställe sätter artikeln en infrastruktur i tre delar. En delad arbetsyta rymmer föreslaget, pågående och avslutat arbete. Ett meddelandegränssnitt låter arbetarna tala med varandra. En delad kontext bevarar återanvändbara fynd och uttalade arbetsavsikter. Samtidiga arbetare kör sedan en samarbetsslinga mot den infrastrukturen: samla kontext, göra anspråk på och tilldela sig själv en deluppgift, agera, dela fynd, verifiera resultat och slå ihop framstegen asynkront.
Siffrorna
På krävande programmeringsuppgifter uppger författarna att en ökning från 1 till 128 agenter höjde den genomsnittliga andelen godkända tester med omkring 49 procent. På en uppgift — att återskapa delar av pandoc — tog en ökning från 1 till 1 024 agenter den slutliga andelen godkända tester från 33,89 procent till 55,06 procent.
Det är artikelns egna siffror på dess egen utvärdering, inte en oberoende upprepning, och de rör programvaruutveckling snarare än agentarbete i allmänhet.
Vad påståendet faktiskt är
Författarna beskriver antalet agenter som en ny skalningsdimension för agentorganisationer, vid sidan av modellstorlek och inferensberäkning. Det är ett starkare påstående än “fler agenter hjälper”, eftersom det hävdar att kurvan fortsätter uppåt i stället för att plana ut när samordningskostnaden äter upp vinsten — vilket är vad som brukar hända, och vad artikeln gör en ablationsstudie på.
Det sekundära fyndet är mer intressant för den som bygger sådana system: författarna rapporterar att självorganiserade samarbetsmönster uppstår och standardiseras när organisationen växer. Arbetarna konvergerar mot arbetsdelningar som ingen angivit, och konvergensen blir starkare med storleken.
Varför det inte självklart är goda nyheter
En körning med 1 024 agenter som lyfter en andel godkända tester från 34 till 55 procent är en väldig mängd inferens för ett resultat som fortfarande är långt ifrån löst. Artikelns praktiska argument är smalare än rubriken: detta hjälper på komplexa uppgifter under strikta tidsbudgetar, där man hellre lägger mycket beräkning parallellt än måttligt mycket i följd.
Det finns också en styrningsfråga artikeln inte tar upp. En orkestrerare är en flaskhals, och flaskhalsar är där övervakningen placeras. Ett system vars arbetare gör anspråk på sina egna deluppgifter och slår ihop sina egna resultat har tagit bort den plats en operatör naturligt skulle titta på.
Att hålla ögonen på
Om någon upprepar resultatet med 1 024 agenter på ett riktmärke författarna inte valt, och vad den körningens totala inferenskostnad var — en siffra sammanfattningen inte ger.
