गैर-लाभकारी मूल्यांकन समूह एमईटीआर द्वारा गुरुवार को जारी एक स्वतंत्र विश्लेषण के अनुसार, एंथ्रोपिक अपने एआई मॉडल की क्षमताओं में एक साल पहले की तुलना में लगभग दोगुनी तेजी से सुधार कर रहा है, और उस गति का अधिकांश हिस्सा एआई सिस्टम से आ रहा है जो अपने स्वयं के उत्तराधिकारियों को बनाने में मदद कर रहा है।
एसोसिएटेड प्रेस द्वारा रिपोर्ट किए गए निष्कर्षों में असामान्य महत्व है क्योंकि वे एमईटीआर द्वारा एंथ्रोपिक के आंतरिक डेटा तक "अभूतपूर्व पहुंच" के रूप में वर्णित पर आधारित हैं। बर्कले, कैलिफोर्निया स्थित समूह के शोधकर्ताओं - जिनका पूरा नाम मॉडल इवैल्यूएशन एंड थ्रेट रिसर्च है - को अगस्त के मध्य से अक्टूबर के अंत तक लगभग 11 सप्ताह के लिए कंपनी के अंदर आमंत्रित किया गया था, जहां उन्होंने आंतरिक अनुसंधान डेटा का विश्लेषण किया और कर्मचारियों का साक्षात्कार लिया।
सीमांत प्रयोगशालाओं के आसपास सुरक्षा बहस पर नज़र रखने वाले पाठकों के लिए, हमारी ब्रेकिंग एआई न्यूज़ कवरेज देखें।
मुख्य खोज: प्रगति जटिल है
METR का केंद्रीय अनुमान यह है कि एंथ्रोपिक अच्छी तरह से निर्दिष्ट कार्यों पर अपने मॉडलों के प्रदर्शन में एक साल पहले की तुलना में लगभग दोगुनी तेजी से सुधार कर रहा है। रिपोर्ट ने इसे स्पष्ट रूप से कहा: "ऐसा प्रतीत होता है कि एंथ्रोपिक ने पिछले वर्ष बेंचमार्क पर उतनी ही प्रगति की है जितनी उन्होंने अक्टूबर 2023 और अक्टूबर 2025 के बीच की थी।"
एमईटीआर का मानना है कि तेजी को बढ़ावा देना अधिक परिणामी है। शोधकर्ताओं ने कहा कि वे कारण के रूप में कंप्यूटिंग शक्ति में वृद्धि को "विश्वासपूर्वक" खारिज करने में सक्षम थे - पारंपरिक रूप से मॉडल प्रदर्शन से सबसे कसकर जुड़ा हुआ चर। उनका निष्कर्ष: सुधार काफी हद तक एआई अनुसंधान करने के लिए एआई का उपयोग करने पर ही निर्भर है।
एंथ्रोपिक ने स्वीकार किया है कि उसका क्लाउड चैटबॉट कंपनी को नए, अधिक उन्नत संस्करण विकसित करने में तेजी से मदद कर रहा है। एमईटीआर की रिपोर्ट में कोई "अड़चनें" नहीं पाई गईं - जैसे कि गणना या डेटा पर प्रतिबंध - उस प्रक्रिया को रोक रही है, और नोट किया कि जबकि एआई अभी तक मॉडल प्रशिक्षण के सबसे महत्वपूर्ण हिस्सों में "अत्यधिक महत्वपूर्ण और पूरी तरह से स्वायत्त योगदान" नहीं दे रहा है, एंथ्रोपिक शोधकर्ताओं ने महत्वपूर्ण "जीवन के संकेत" का वर्णन किया है जिसका अर्थ है कि यह जल्द ही बदल सकता है।
मंदी की बहस के बीच निष्कर्ष निकले
यह समय उस कंपनी के लिए अजीब है जिसका मुख्य कार्यकारी संयम की पैरवी कर रहा है। एमईटीआर की मूल्यांकन अवधि के दौरान एंथ्रोपिक सीईओ डारियो अमोदेई ने 12 सितंबर को एक निबंध प्रकाशित किया था जिसमें एआई उद्योग से आग्रह किया गया था कि "जिस गति से हम एआई मॉडल की क्षमताओं में सुधार करते हैं उसे धीमा करें" ताकि सुरक्षा उपायों को गति मिल सके।
एमईटीआर ने अगस्त में प्रकाशित सार्वजनिक जोखिम रिपोर्ट एंथ्रोपिक और एक निजी संस्करण दोनों की भी समीक्षा की और निष्कर्ष निकाला कि सार्वजनिक दस्तावेज़ "कुल मिलाकर घटित होने वाले त्वरण के स्तर को कम करता है।"
एंथ्रोपिक की प्रतिक्रिया: आंशिक सहमति, भारी कटौती
एंथ्रोपिक के सह-संस्थापक और कंपनी के मुख्य वास्तुकार सैम मैककैंडलिश ने गुरुवार को एक्स पर एक लंबी पोस्ट में रिपोर्ट का जवाब देते हुए लिखा कि एमईटीआर के कई निष्कर्ष उनके अपने दृष्टिकोण से मेल खाते हैं।
उन्होंने लिखा, "एआई हमारे शोध को गति दे रहा है, लेकिन यह कहना मुश्किल है कि कितना," उन्होंने लिखा, एंथ्रोपिक ने आने वाले हफ्तों में कंपनी के अंदर एआई प्रगति की गति का अपना विश्लेषण जारी करने की योजना बनाई है।
मैककैंडलिश ने रिपोर्ट के बड़े हिस्से को संशोधित करने के कंपनी के फैसले का भी बचाव किया, जिसने यह सीमित कर दिया कि एमईटीआर अपने त्वरण अनुमानों को कितनी सटीकता से संप्रेषित कर सकता है। उन्होंने कहा कि "वास्तव में जो गति बढ़ा रहा है उसे साझा करना सही बात नहीं है," क्योंकि जानकारी व्यावसायिक रूप से संवेदनशील है और "दूसरों को तेजी से आगे बढ़ने के लिए एक रोडमैप सौंपने का जोखिम है" - उन्होंने तर्क दिया, जिससे एमईटीआर को और भी अधिक जोखिम होने की चिंता है। "यह एक समझौता है," उन्होंने लिखा।
महत्वपूर्ण चेतावनियाँ
एमईटीआर के स्वयं के विवरण के अनुसार, यह रिपोर्ट चेतावनियों से भरपूर थी। समूह ने कहा कि इसकी प्रमुख खोज मामलों को बढ़ा-चढ़ाकर पेश करने वाली हो सकती है: मापा गया त्वरण केवल अच्छी तरह से निर्दिष्ट कार्यों पर लागू हो सकता है जिन्हें स्वचालित रूप से वर्गीकृत किया जा सकता है, न कि गंदे, खुले अंत वाले काम जो सीमांत अनुसंधान को परिभाषित करते हैं। वैकल्पिक रूप से, एंथ्रोपिक ने बस अपनी पिछली आधार रेखा को कम करके आंका होगा, जिससे नवीनतम छलांग उससे अधिक बड़ी दिखाई देगी।
पारदर्शिता कारणों से एमईटीआर की स्थिति भी ध्यान देने योग्य है: गैर-लाभकारी संस्था को दान के माध्यम से वित्त पोषित किया जाता है, यह अपने मूल्यांकन के लिए मुआवजा स्वीकार नहीं करता है, और वर्षों से एंथ्रोपिक, ओपनएआई और अन्य प्रयोगशालाओं के लिए क्षमता मूल्यांकन आयोजित करता है - हालांकि साझेदार कंपनियां अपने शोध को चलाने के लिए आवश्यक मॉडल पहुंच और टोकन प्रदान करती हैं।
यह अब क्यों मायने रखता है
यह विश्लेषण एंथ्रोपिक के सार्वजनिक होने की उम्मीद से कई हफ्ते पहले सामने आया है, जो इतिहास की सबसे बड़ी आरंभिक सार्वजनिक पेशकश हो सकती है, जिसमें इस बात पर बहस चल रही है कि क्या तेजी से सक्षम एआई मॉडल मानव नियंत्रण से बच सकते हैं। सुरक्षा अधिवक्ताओं ने लंबे समय से तर्क दिया है कि स्वतंत्र सत्यापन - प्रयोगशाला स्व-रिपोर्टिंग नहीं - एकमात्र भरोसेमंद उपाय है कि सीमा कितनी तेजी से आगे बढ़ रही है, खासकर जब ट्रम्प प्रशासन ने कंपनियों को खुद को पुलिस करने के लिए प्रोत्साहित किया है।
एमईटीआर ने एक अंतिम चिंता को चिह्नित किया: यदि एआई-सहायता प्राप्त एआई अनुसंधान जटिल होना शुरू हो जाता है, तो त्वरण स्वयं तेज हो सकता है, उन्नत मॉडल के जोखिम उस गति से बढ़ रहे हैं जिसे बाहरी पर्यवेक्षक आसानी से ट्रैक नहीं कर सकते हैं। समूह की रिपोर्ट बताती है कि कम से कम एक अग्रणी प्रयोगशाला के लिए, जिस फीडबैक लूप के बारे में क्षेत्र चिंतित है वह अब काल्पनिक नहीं है - यह बेंचमार्क डेटा में दिखाई दे रहा है।
बाकी उद्योग कितनी तेजी से इसका अनुसरण करता है, इस पर अब नियामकों, निवेशकों और कंपनी के अपने अधिकारियों की नजर रहेगी।
---
एआई से आगे रहेंनवीनतम एआई समाचार, विश्लेषण और सफलताएँ प्राप्त करें - सभी एक ही स्थान पर।
अधिक AI समाचार पढ़ें →