GPT-5.5 ने यूके साइबरसुरक्षा परीक्षणों में Mythos Preview के बराबर प्रदर्शन किया, जिससे हाइप और वास्तविकता के बीच का अंतर चुनौती में पड़ा

नए बेंचमार्क परिणाम AI सुरक्षा कथाओं और मापी गई कार्यक्षमता के बीच की दूरी को कम करते हैं

यूके के AI Security Institute की ताज़ा साइबरसुरक्षा परीक्षण रिपोर्ट frontier AI के हालिया और अधिक मुखर आख्यानों में से एक को जटिल बना रही है: यह धारणा कि Anthropic का Mythos Preview एक अनूठा रूप से ऊंचा साइबर खतरा है। नए परिणामों के अनुसार, OpenAI के GPT-5.5 ने संस्थान के साइबर मूल्यांकनों में समान प्रदर्शन स्तर हासिल किया, जिससे संकेत मिलता है कि Mythos एक अकेली छलांग से कम और व्यापक मॉडल प्रगति का संकेत अधिक हो सकता है।

यह वही केंद्रीय निष्कर्ष है जिसे Ars Technica ने AISI के निष्कर्षों के आधार पर रिपोर्ट किया। इसका महत्व इसलिए है क्योंकि Anthropic ने पहले Mythos Preview के असामान्य साइबरसुरक्षा जोखिम पर ज़ोर दिया था और उसकी शुरुआती रिलीज़ को केवल महत्वपूर्ण उद्योग भागीदारों तक सीमित रखा था। यह नई तुलना यह नहीं कहती कि वे जोखिम अवास्तविक हैं। यह कहती है कि जैसे-जैसे दीर्घकालिक स्वायत्तता, तर्कशक्ति और कोडिंग सुधर रही है, वैसी ही क्षमताएँ शीर्ष-स्तरीय मॉडलों में पहले से उभर रही हो सकती हैं।

परीक्षणों में क्या मापा गया

2023 से, AISI 95 Capture the Flag चुनौतियों के माध्यम से frontier AI प्रणालियों का परीक्षण कर रहा है, जिनका उद्देश्य रिवर्स इंजीनियरिंग, वेब एक्सप्लोइटेशन और क्रिप्टोग्राफी सहित क्षेत्रों में साइबरसुरक्षा क्षमताओं की पड़ताल करना है। ये मॉडल की दक्षता की अस्पष्ट छापें नहीं हैं। ये कार्य-आधारित मूल्यांकन हैं, जिन्हें यह दिखाने के लिए बनाया गया है कि प्रणालियाँ ठोस आक्रामक-शैली के साइबर कार्यों में कितनी दूर जा सकती हैं।

उच्चतम-स्तरीय “Expert” कार्यों पर, GPT-5.5 ने औसतन 71.4 प्रतिशत सफलता हासिल की, जो Mythos Preview के 68.6 प्रतिशत से थोड़ा अधिक है और त्रुटि-सीमा के भीतर है। यह बात महत्वपूर्ण है। यह परिणाम किसी निर्णायक विजेता की पुष्टि नहीं करता। यह उस स्तर पर समानता स्थापित करता है, जो यह चुनौती देने के लिए पर्याप्त ऊँचा है कि क्या केवल एक मॉडल ही किसी नए जोखिम-श्रेणी में प्रवेश कर चुका है।

ऐसा प्रदर्शन जो तेजी से परिचालनात्मक दिखता है

रिपोर्टिंग का एक सबसे उल्लेखनीय विवरण एक कठिन कार्य से जुड़ा है, जिसमें Rust बाइनरी को डिकोड करने के लिए एक डिसअसेंबलर बनाने की आवश्यकता थी। AISI के अनुसार GPT-5.5 ने यह चुनौती 10 मिनट और 22 सेकंड में, बिना मानव सहायता के, $1.73 की API लागत पर हल कर दी। यह एक छोटा-सा डेटा बिंदु है, लेकिन यह बहुत कुछ बताता है: गति, स्वायत्तता और कम सीमांत लागत सभी उस दिशा में बढ़ रही हैं, जिस पर करीबी ध्यान देना चाहिए।

संस्थान ने मॉडलों का “The Last Ones” पर भी मूल्यांकन किया, जो एक कॉरपोरेट नेटवर्क के विरुद्ध 32-चरणीय सिम्युलेटेड डेटा-एक्सट्रैक्शन हमला है। GPT-5.5 ने 10 में से 3 प्रयासों में सफलता पाई, जबकि Mythos Preview ने 10 में से 2 में। Ars Technica ने नोट किया कि इससे पहले कोई भी मॉडल इस परीक्षण में एक बार भी सफल नहीं हुआ था। इसका यह अर्थ नहीं है कि ये प्रणालियाँ असंयमित वास्तविक-विश्व परिस्थितियों में ऐसे हमलों को भरोसेमंद ढंग से अंजाम दे सकती हैं। लेकिन इसका मतलब यह है कि, गंभीर साइबर अभियानों की नकल करने के लिए बनाए गए संरचित वातावरणों में, frontier मॉडल अब ऐसे परिणाम हासिल कर रहे हैं जिन्हें पहले की पीढ़ियाँ बिल्कुल भी नहीं छू पाती थीं।

सीमाएँ अब भी महत्वपूर्ण हैं

ये निष्कर्ष अनियंत्रित AI साइबर महारत की कहानी नहीं हैं। GPT-5.5 अभी भी AISI के अधिक कठिन “Cooling Tower” सिमुलेशन में असफल रहा, जो पावर-प्लांट नियंत्रण सॉफ़्टवेयर को बाधित करने के प्रयास का मॉडल है। इस बेंचमार्क में पहले परखे गए हर मॉडल को भी असफलता मिली है। यह अनसुलझी सीमा महत्वपूर्ण है क्योंकि यह दिखाती है कि क्षमता-वृद्धि वास्तविक है, लेकिन असमान है। कुछ आक्रामक कार्यों की श्रेणियों में मॉडल अब भौतिक रूप से अधिक सक्षम हो सकते हैं, लेकिन उन्होंने अभी तक क्षमताओं का वह पूरा सेट नहीं दिखाया है जो सबसे चरम दावों को उचित ठहरा सके।

दूसरे शब्दों में, नए परिणाम आत्मसंतोष और सनसनीखेज़ी, दोनों के विरुद्ध जाते हैं। वे संकेत देते हैं कि साइबर क्षमता मॉडल परिवारों में तेज़ी से आगे बढ़ रही है, लेकिन वे इस विचार का समर्थन नहीं करते कि आज की प्रणालियों ने पहले ही महत्वपूर्ण अवसंरचना हमले के सिमुलेशन में हर कठिन लक्ष्य को हल कर लिया है।

जोखिम को लेकर कंपनियाँ कैसे बात करती हैं, इस पर बहस

यह बेंचमार्क तुलना AI संचार रणनीति को लेकर एक अलग बहस को भी हवा देती है। Ars Technica ने OpenAI के CEO Sam Altman की उस आलोचना को रेखांकित किया, जिसमें उन्होंने कुछ मॉडलों की सीमित रिलीज़ के आसपास “fear-based marketing” कहा था। AISI की अपनी व्याख्या भी इसी दिशा में जाती दिखती है, यह लिखते हुए कि Mythos Preview संभवतः किसी एक मॉडल की “breakthrough” नहीं था, बल्कि स्वायत्तता, तर्कशक्ति और कोडिंग में अधिक सामान्य सुधारों का उपोत्पाद था।

इसका यह अर्थ नहीं है कि मॉडल डेवलपर्स को साइबर जोखिम के बारे में चेतावनी देना बंद कर देना चाहिए। बल्कि, इसका व्यापक निहितार्थ उलटा भी हो सकता है। यदि समान क्षमताएँ कई frontier प्रणालियों में उभर रही हैं, तो नीति-विमर्श को अलग-अलग मॉडल लॉन्च को असाधारण घटनाओं की तरह देखने से हटकर एक अधिक प्रणालीगत प्रवृत्ति को समझने की ओर जाना चाहिए। जोखिम केवल एक कंपनी के प्रीव्यू मॉडल तक सीमित नहीं है, यदि अंतर्निहित प्रदर्शन वक्र साझा है।

यह अभी क्यों मायने रखता है

GPT-5.5 परिणाम का वास्तविक महत्व शेखी बघारने में नहीं है। महत्व इस प्रमाण में है कि उन्नत साइबर क्षमता प्रमुख मॉडलों में अधिक व्यापक रूप से वितरित हो रही है। इससे लैब्स, नियामकों और एंटरप्राइज़ उपयोगकर्ताओं को मूल्यांकन, पहुँच-नियंत्रण, रेड-टीमिंग और घटना-तैयारी के बारे में सोचने का तरीका बदलना चाहिए। यह अनुभवजन्य सुरक्षा चर्चाओं का मानक भी ऊँचा करता है। कंपनियाँ किसी मॉडल की विशिष्टता के बारे में नाटकीय दावे कर सकती हैं, लेकिन तुलनात्मक परीक्षण उन आख्यानों पर बढ़ता हुआ नियंत्रण प्रदान करता है।

फिलहाल, उपलब्ध साक्ष्य एक संकुचित लेकिन फिर भी महत्वपूर्ण निष्कर्ष का समर्थन करते हैं। GPT-5.5 ने AISI के साइबर मूल्यांकनों में Mythos Preview के लगभग समान स्तर पर प्रदर्शन किया, कुछ मापों पर उससे थोड़ा बेहतर रहा, और frontier मॉडलों के दीर्घकालिक तकनीकी कार्यों में अधिक सक्षम होने के व्यापक पैटर्न से मेल खाता रहा। हाइप का अंतर शायद सिकुड़ रहा है। लेकिन क्षमता-वक्र अभी भी ऊपर की ओर बढ़ता दिख रहा है।

यह लेख Ars Technica की रिपोर्टिंग पर आधारित है। मूल लेख पढ़ें.