फ्रंटियर स्तर के स्कोर वाला सस्ता जेमिनी
गूगल ने 12 नवंबर को जेमिनी 4 हाइड्रोजन जारी किया, एक मॉडल जिसे कंपनी अक्टूबर में पेश किए गए अपने दो फ्रंटियर मॉडलों के नीचे रखती है और जिसकी कीमत प्रति दस लाख इनपुट टोकन 1.50 डॉलर और प्रति दस लाख आउटपुट टोकन 7.50 डॉलर रखी गई है। ये दरें मॉडल की पूरी दस लाख टोकन वाली कॉन्टेक्स्ट विंडो पर एक समान हैं, लंबे प्रॉम्प्ट के लिए कोई बढ़ी हुई दर नहीं है, और मॉडल दस लाख आउटपुट टोकन तक लौटा सकता है।
यह रिलीज़ गूगल की श्रेणी के शिखर पर जो जोड़ती है उसके लिए कम महत्वपूर्ण है, और जो नीचे की ओर खिसकाती है उसके लिए अधिक। आर्टिफिशियल एनालिसिस इंटेलिजेंस इंडेक्स पर गूगल बताता है कि हाइड्रोजन अपने डिफ़ॉल्ट “हाई” थिंकिंग स्तर पर 51 अंक पाता है — जेमिनी 4 आर्गन से एक अंक ऊपर, जो उन दो फ्रंटियर मॉडलों में से एक है जिनके साथ यह अब खड़ा है। एक नई “एक्सहाई” सेटिंग पर गूगल यह आंकड़ा 54 बताता है। दोनों संख्याएँ गूगल की अपनी घोषणा में हैं, जो कंपनी के मुख्य एआई आर्किटेक्ट कोरे कावुकचुओग्लू ने लिखी है, और उस स्वतंत्र लीडरबोर्ड पर नहीं जो इस इंडेक्स को रखता है।

गूगल ने क्या मापा, और क्या नहीं
घोषणा स्कोरों से भरी है, और उनमें से लगभग सभी गूगल के अपने हैं। कंपनी हाइड्रोजन को टर्मिनल-बेंच 4.1 पर 57 प्रतिशत पर रखती है, जबकि जेमिनी 3.8 फ्लैश, जिसकी जगह यह व्यवहार में ले रहा है, 18.2 प्रतिशत पर है; एचएलई-डायमंड पर 58.8 प्रतिशत; एजेंट्स लास्ट एग्ज़ाम v1.1 पर 71.6 प्रतिशत; और वाल्स टैक्स एजेंट बेंच पर 52.3 प्रतिशत, जहाँ वह कुल मिलाकर पहले स्थान का दावा करती है। वाल्स लीगल रिसर्च बेंच पर वह 55.8 प्रतिशत और पहले स्थान पर बराबरी बताती है।
एक आंकड़ा बाहरी स्रोत से जाँचा जा सकता है। गूगल कहता है कि हाइड्रोजन मल्टीमॉडल नॉलेज एजेंट पर 53.4 प्रतिशत तक पहुँचता है, वह ज्ञान-कार्य परीक्षण जो उसने आर्टिफिशियल एनालिसिस के साथ बनाया और 10 नवंबर को जारी किया। आर्टिफिशियल एनालिसिस की सार्वजनिक एमकेए तालिका में एंथ्रोपिक का क्लॉड फ़ेबल 5.2 57 प्रतिशत के साथ शीर्ष पर है, और जेमिनी 4 कार्बन 54 प्रतिशत के साथ दूसरे स्थान पर। हाइड्रोजन का आंकड़ा दोनों से नीचे है।
गति सबसे स्पष्ट दावा है। गूगल कहता है कि मॉडल हाई सेटिंग पर जेमिनी 3.8 फ्लैश से लगभग 2.5 गुना तेज़ चलता है, और इसे परखने वाले साझेदारों ने 12 से 23 प्रतिशत कम टोकन खर्च के साथ 2 से 2.8 गुना तेज़ी मापी। गूगल एंटीग्रैविटी, कंपनी के एजेंट परिवेश के भीतर, वह कहती है कि ऑर्केस्ट्रेटर के रूप में हाइड्रोजन टर्मिनल-बेंच पर कार्बन की कार्य सफलता के करीब पहुँचा, 24 प्रतिशत कम कोटा खर्च करते हुए और औसतन 19 प्रतिशत जल्दी पूरा करते हुए।

सुरक्षा के आंकड़े आंतरिक हैं
गूगल ने एजेंट सुरक्षा पर आंकड़ों का एक समूह भी प्रकाशित किया, सभी अपनी ही जाँचों से: एजेंट कार्यों में 81 प्रतिशत तक कम अतिक्रमण और 79 प्रतिशत तक कम अपर्याप्त सेवा, उपकरण उपयोग और कोडिंग जाँचों में गलत दिशा वाली कार्रवाइयों और कार्यों में शॉर्टकट लेने में बारह गुना कमी, और एक मॉडल जो कार्य रुकने पर अनुमति की सीमा पार करने की दो गुना कम संभावना रखता है। वह एक आंतरिक जाँच में 96.7 प्रतिशत ईमानदारी दर और दो लाख से अधिक जाँचे गए टर्न में 99.9 प्रतिशत विचार-शृंखला पठनीयता बताती है। एक बाहरी आंकड़ा भी है: गूगल कहता है कि मॉडल ग्रे स्वान के अप्रत्यक्ष प्रॉम्प्ट इंजेक्शन बेंचमार्क पर 2.3 गुना से अधिक प्रतिरोधी है।
यह कहाँ उतरता है
हाइड्रोजन 12 नवंबर से जेमिनी एपीआई और गूगल एआई स्टूडियो, एंड्रॉइड स्टूडियो के सशुल्क स्तर, और भुगतान करने वाले गूगल एआई प्रो तथा अल्ट्रा ग्राहकों के लिए एंटीग्रैविटी के ज़रिए उपलब्ध हो रहा है। व्यवसायों को यह जेमिनी फ़ॉर बिज़नेस और गूगल शीट्स में मिलता है। उपभोक्ता इसे जेमिनी ऐप के मॉडल चयनकर्ता में पाते हैं, और निःशुल्क उपयोगकर्ता स्वचालित मॉडल चयन से इस तक पहुँचते हैं। यह सभी उपयोगकर्ताओं के लिए गूगल सर्च में भी जाता है, लॉन्च का वह हिस्सा जिसके दर्शक सबसे अधिक और प्रकाशित आंकड़े सबसे कम हैं।
देखने की बात यह है कि आर्टिफिशियल एनालिसिस का स्वतंत्र परीक्षण उस इंडेक्स स्कोर को दोहराता है या नहीं जिसे गूगल ने उद्धृत किया। किसी विक्रेता के आंकड़े और किसी लीडरबोर्ड की अपनी माप के बीच की दूरी ही वह जगह है जहाँ इस रिलीज़ को आँका जाएगा।