TheoPhysEval उन सवालों से बना है जिन्हें कार्यरत भौतिकविदों ने छापा नहीं था, ठीक इसलिए कि कोई मॉडल उन्हें पहले से न देख चुका हो। सबसे अच्छे एजेंट ने सिर्फ़ एक ग़लत किया, औसतन लगभग 2.33 डॉलर प्रति सवाल की लागत पर।
मॉडल
Claude Opus 5.5
Claude Opus 5.5, Anthropic द्वारा विकसित एक आर्टिफिशियल इंटेलिजेंस मॉडल है। इस पृष्ठ पर मॉडल के बारे में सार्वजनिक रूप से ज्ञात जानकारी और Aivio News द्वारा दर्ज हर बेंचमार्क परिणाम उसके स्रोत तथा तिथि के साथ दिया गया है।
- डेवलपर
- Anthropic
- मॉडल
- Claude 5
- जारी किया गया
- 22 सितंबर 2026
- मोडैलिटी
- मॉडल, Image, Code
- स्थिति
- सक्रिय
- स्रोत
- anthropic.com
बेंचमार्क
सभी ख़बरें| बेंचमार्क | स्कोर | स्रोत | मूल्यांकन तिथि |
|---|---|---|---|
| Vibe Code Bench single agent, medium effort | 91.5% | vals.ai स्वतंत्र सत्यापित | — स्रोत तिथि: 9 अक्टूबर 2026 |
| Vibe Code Bench single agent, maximum effort | 89.8% | vals.ai स्वतंत्र सत्यापित | — स्रोत तिथि: 9 अक्टूबर 2026 |
Claude Opus 5.5 पर और
कंपनी का कहना है कि आसवक अब जितने तर्क-टोकन निकाल पाते हैं वे पहले से 10 से 100 गुना कम हैं, और उसने भुगतान करने वाले खरबों टोकन का ट्रैफ़िक ठुकरा दिया है।
Artificial Analysis Muse Wonder Full को 56 अंक देता है — 689 मॉडलों में चौथा स्थान। मेटा कमज़ोर Muse Wonder को API से बेचता है और ज़्यादा मज़बूत मॉडल Muse Code के भीतर रखता है।
अरीना ने 72,509 वास्तविक एजेंट सत्रों पर बना एक सूचकांक उसी दिन प्रकाशित किया जिस दिन उसने 20 करोड़ डॉलर की राउंड की घोषणा की। पहले पाँच स्थान ओपनएआई के हैं।
कंपनी कहती है कि उसके आम उपलब्ध मॉडल अधिकांश साइबर काम रोक देते हैं, और जाँचे-परखे रक्षक अब उस रोक में तीन श्रेणीबद्ध छूटों में से एक के लिए आवेदन कर सकते हैं।
ML4 एक ट्रिलियन पैरामीटर वाला खुला-वेट मॉडल है, जिसे मिस्ट्राल के यूरोपीय डेटा सेंटरों में 3,800 एनवीडिया चिप पर प्रशिक्षित किया गया। कंपनी जो आंकड़ा सबसे आगे रखती है वह एक सुरक्षा-खामी परीक्षण पर 82% है, जिसमें उसके अनुसार क्लॉड ओपस 5.5 और जीपीटी-6 एस्ट्रा लगभग शून्य पाते हैं क्योंकि वे काम करने से मना कर देते हैं।
जानकार लोगों के मुताबिक क्लॉड का इस्तेमाल पिछले सप्ताह तक खुफिया काम और ईरान के खिलाफ अभियानों में हो रहा था। एंथ्रोपिक ने टिप्पणी करने से इनकार किया।
इस सप्ताह प्रकाशित दो आंकड़े उन्हीं मॉडलों का वर्णन करते हैं। आप कौन सा उद्धृत करते हैं, यह पूरी तरह इस पर निर्भर है कि लेखाकार के काम का कितना हिस्सा आप बाहर छोड़ने को तैयार हैं।
आर्गन एक उत्तर में दस लाख टोकन तक लिख सकता है और शुरुआती दौर में प्रति दस लाख पर 2 और 10 डॉलर लेता है। गूगल कहता है कि उसने अस्पताल सॉफ़्टवेयर में एक गंभीर खामी पकड़ी जो पुराने मॉडल चूक गए थे।