METR या नानफा मूल्यमापन गटाने गुरुवारी जारी केलेल्या स्वतंत्र विश्लेषणानुसार, Anthropic एक वर्षापूर्वीच्या तुलनेत त्याच्या AI मॉडेल्सच्या क्षमतेत अंदाजे दुप्पट वेगाने सुधारणा करत आहे, आणि त्यातील बरीच गती AI प्रणालींमधून त्यांच्या स्वत:चे उत्तराधिकारी तयार करण्यात मदत करत असल्याचे दिसते.

असोसिएटेड प्रेसने नोंदवलेले निष्कर्ष, असामान्य वजन धारण करतात कारण ते METR ने एन्थ्रोपिकच्या अंतर्गत डेटामध्ये "अभूतपूर्व प्रवेश" म्हणून वर्णन केलेल्या गोष्टींवर अवलंबून असतात. बर्कले, कॅलिफोर्निया-आधारित गटातील संशोधकांना - ज्यांचे पूर्ण नाव मॉडेल मूल्यांकन आणि धोका संशोधन आहे - यांना ऑगस्टच्या मध्यापासून ते ऑक्टोबरच्या अखेरीस सुमारे 11 आठवड्यांसाठी कंपनीमध्ये आमंत्रित केले गेले होते, जिथे त्यांनी अंतर्गत संशोधन डेटाचे विश्लेषण केले आणि कर्मचाऱ्यांची मुलाखत घेतली.

फ्रंटियर लॅबच्या आसपास सुरक्षितता वादाचा मागोवा घेणाऱ्या वाचकांसाठी, आमचे ब्रेकिंग एआय न्यूज कव्हरेज पहा.

मूळ शोध: प्रगती चक्रवाढ होत आहे

एमईटीआरचा केंद्रीय अंदाज असा आहे की अँथ्रोपिक एक वर्षापूर्वीच्या तुलनेत दुप्पट वेगाने त्याच्या मॉडेल्सच्या चांगल्या-निर्दिष्ट कार्यांवर कामगिरी सुधारत आहे. अहवालात स्पष्टपणे असे म्हटले आहे: "मानवशास्त्राने ऑक्टोबर 2023 ते ऑक्टोबर 2025 या कालावधीत बेंचमार्कवर जितकी प्रगती केली होती तितकीच गेल्या वर्षी दिसून येते."

अधिक परिणामकारक म्हणजे METR च्या मते प्रवेग वाढवत आहे. संशोधकांनी सांगितले की ते "आत्मविश्वासाने" कारण म्हणून संगणकीय शक्तीतील वाढ नाकारण्यात सक्षम आहेत - पारंपारिकपणे मॉडेलच्या कामगिरीशी सर्वात घट्टपणे जोडलेले चल. त्यांचा निष्कर्ष: सुधारणा मुख्यत्वे AI संशोधन करण्यासाठी AI चा वापर करण्यावर अवलंबून आहे.

अँथ्रोपिकने कबूल केले आहे की त्याचा क्लॉड चॅटबॉट कंपनीला स्वतःच्या नवीन, अधिक प्रगत आवृत्त्या विकसित करण्यास मदत करतो. METR च्या अहवालात कोणतीही "अडथळे" आढळली नाहीत — जसे की गणना किंवा डेटावरील निर्बंध — त्या प्रक्रियेला रोखून धरले, आणि नमूद केले की AI अद्याप मॉडेल प्रशिक्षणाच्या सर्वात महत्त्वाच्या भागांमध्ये "अत्यंत महत्त्वपूर्ण आणि पूर्णपणे स्वायत्त योगदान" देत नसले तरी, मानववंशीय संशोधकांनी लक्षणीय "जीवनाची चिन्हे" वर्णन केली ज्याचा अर्थ लवकरच बदलू शकतो.

निष्कर्ष मध्य-मंदीच्या चर्चेत उतरले

ज्या कंपनीचे मुख्य कार्यकारी संयम ठेवण्यासाठी लॉबिंग करत आहेत अशा कंपनीसाठी वेळ विचित्र आहे. METR च्या मूल्यमापन कालावधीतच Anthropic CEO Dario Amodei यांनी 12 सप्टेंबर रोजी AI उद्योगाला "आम्ही AI मॉडेल्सची क्षमता सुधारण्याची गती कमी करावी" असे आवाहन करणारा एक निबंध प्रकाशित केला होता जेणेकरून सुरक्षा उपाय पकडता येतील.

एमईटीआरने ऑगस्टमध्ये प्रकाशित झालेला अँथ्रोपिक आणि खाजगी आवृत्ती या दोन्ही सार्वजनिक जोखीम अहवालाचे पुनरावलोकन केले आणि असा निष्कर्ष काढला की सार्वजनिक दस्तऐवज "एकंदरीत प्रवेगाची पातळी कमी करते."

मानववंशीयांचा प्रतिसाद: आंशिक करार, हेवी रिडॅक्शन

सॅम मॅककँडलिश, एक एन्थ्रोपिक सह-संस्थापक आणि कंपनीचे मुख्य वास्तुविशारद यांनी गुरुवारी X वर एका लांबलचक पोस्टमध्ये या अहवालाला प्रतिसाद दिला, असे लिहिले की METR चे बरेच निष्कर्ष त्यांच्या स्वतःच्या मताशी जुळतात.

"एआय आमच्या संशोधनाला गती देत ​​आहे, परंतु नेमके किती हे सांगणे कठीण आहे," त्यांनी लिहिले की, अँथ्रोपिक येत्या काही आठवड्यांत कंपनीच्या अंतर्गत AI प्रगतीच्या गतीचे स्वतःचे विश्लेषण प्रकाशित करण्याची योजना आखत आहे.

मॅककँडलिशने अहवालाचा मोठा भाग सुधारित करण्याच्या कंपनीच्या निर्णयाचा बचाव केला, ज्याने METR त्याच्या प्रवेग अंदाजे किती अचूकपणे संप्रेषण करू शकते हे मर्यादित केले. ते म्हणाले की "नक्की काय वेग वाढवत आहे ते करणे योग्य नाही," कारण माहिती दोन्ही व्यावसायिकदृष्ट्या संवेदनशील आहे आणि "इतरांना जलद जाण्यासाठी रोडमॅप देणारी जोखीम" आहे - ज्यामुळे, त्याने असा युक्तिवाद केला की, METR ला चिंतेत असलेल्या जोखीम आणखी वाईट होतील. "तो एक व्यापार आहे," त्याने लिहिले.

महत्वाच्या सूचना

अहवाल, METR च्या स्वतःच्या वर्णनानुसार, सावधगिरीने भरलेला होता. गटाने म्हटले आहे की त्याचे हेडलाइन शोधणे अतिरेकी बाबी असू शकतात: मोजलेले प्रवेग केवळ चांगल्या-निर्दिष्ट कार्यांसाठी लागू होऊ शकते ज्यांना आपोआप श्रेणीबद्ध केले जाऊ शकते, सीमावर्ती संशोधन परिभाषित करणाऱ्या अव्यवस्थित, मुक्त कार्याऐवजी. वैकल्पिकरित्या, अँथ्रोपिकने कदाचित त्याची पूर्वीची आधाररेखा अधोरेखित केली असेल, ज्यामुळे नवीनतम उडी त्याच्यापेक्षा मोठी दिसते.

पारदर्शकतेच्या कारणास्तव METR ची स्थिती देखील लक्षात घेण्यासारखी आहे: ना-नफा देणग्यांद्वारे निधी दिला जातो, त्याच्या मूल्यमापनासाठी भरपाई स्वीकारत नाही आणि अनेक वर्षांपासून Anthropic, OpenAI आणि इतर लॅबसाठी क्षमता मूल्यांकन आयोजित केले आहे — जरी भागीदार कंपन्या मॉडेल प्रवेश आणि त्याचे संशोधन चालविण्यासाठी आवश्यक टोकन प्रदान करतात.

हे आता महत्त्वाचे का आहे

इतिहासातील सर्वात मोठी प्रारंभिक सार्वजनिक ऑफर कोणती असू शकते याविषयी एन्थ्रोपिकच्या अपेक्षा असलेल्या काही आठवड्यांपूर्वी विश्लेषण केले गेले आहे, वाढत्या प्रमाणात सक्षम AI मॉडेल्स मानवी नियंत्रणापासून दूर जाऊ शकतात की नाही यावर वादविवाद सुरू आहेत. सुरक्षा वकिलांनी बराच काळ असा युक्तिवाद केला आहे की स्वतंत्र सत्यापन - लॅब सेल्फ-रिपोर्टिंग नाही - सीमा किती वेगाने पुढे जात आहे याचे एकमेव विश्वासार्ह उपाय आहे, विशेषत: ट्रम्प प्रशासनाने कंपन्यांना स्वत: पोलीस करण्यास प्रोत्साहित केले आहे.

METR ने एक अंतिम चिंतेचा ध्वजांकित केला: जर AI-सहाय्यित AI संशोधन वाढू लागले, तर प्रवेग स्वतःच वेगवान होऊ शकतो, प्रगत मॉडेल्सच्या जोखीम वेगाने वाढू शकतात बाहेरील निरीक्षक सहजपणे ट्रॅक करू शकत नाहीत. गटाच्या अहवालात असे सुचवले आहे की किमान एका अग्रगण्य प्रयोगशाळेसाठी, फील्डने ज्या फीडबॅक लूपबद्दल काळजी केली आहे ती यापुढे काल्पनिक नाही - ते बेंचमार्क डेटामध्ये दिसून येत आहे.

बाकीचे उद्योग किती लवकर फॉलो करतात हा प्रश्न नियामक, गुंतवणूकदार आणि कंपनीचे स्वतःचे अधिकारी आता पाहत असतील.

---

एआयच्या पुढे राहा

नवीनतम AI बातम्या, विश्लेषण आणि यश मिळवा — सर्व एकाच ठिकाणी.

अधिक AI बातम्या वाचा →