OpenAI inarudi nyuma baada ya Claude Opus 5 ya Anthropic kutawala alama ya ARC-AGI-3, ikichapisha matokeo ambayo yanaonyesha muundo wake wa GPT-5.6 Sol ukifikia asilimia 38.3 - mradi utumie mipangilio inayopendelewa ya OpenAI badala ya zana rasmi ya majaribio.
Mzozo huo, uliochezwa Julai 30, 2026, unapunguza kiini cha tatizo linaloongezeka katika tathmini ya AI: vigezo havipimii tena kielelezo pekee, lakini kiunzi kizima cha kiufundi kinaizunguka. Kwa uchanganuzi wa kina wa maendeleo ya hivi punde ya AI na matoleo ya modeli, AI Buzz Wire inafuatilia hadithi.
Namba na Kukamata
OpenAI iliripoti kuwa GPT-5.6 Sol inafikia asilimia 38.3 kwenye ARC-AGI-3, ikipita Anthropic Claude Opus 5, ambaye alipata asilimia 30.2 baada ya kuzidisha rekodi ya kiwango hicho mara nne. Tahadhari ni muhimu: idadi hiyo ya asilimia 38.3 inategemea vipengele viwili mahususi vya API ya Majibu ya OpenAI.
Ya kwanza ni Kutoa Sababu Zilizohifadhiwa, ambayo huhifadhi msururu wa mawazo wa kielelezo kati ya hatua badala ya kuitupilia mbali baada ya kila tendo. Ya pili ni Compaction, ambayo ni muhtasari wa muktadha wa zamani badala ya kuikata, ikiruhusu kielelezo kuendelea kufanyia kazi matatizo marefu bila kupoteza hoja za awali.
Tembea kupitia uunganisho rasmi wa Tuzo ya ARC - ambayo huepuka kwa makusudi mipangilio mahususi ya mtoa huduma ili kuhakikisha ulinganisho wa tufaha na tufaha - GPT-5.6 Sol ilidhibiti asilimia 7.8 pekee. Sababu, OpenAI inasema, ni kwamba usanidi rasmi hutupilia mbali hoja za kielelezo baada ya kila hatua, na kuathiri utendaji wa kazi zinazohitaji fikra endelevu za hatua nyingi.
Alama Iliyojengwa kwa Usafi
ARC-AGI-3 iliundwa na François Chollet na timu ya Tuzo ya ARC ili kuchunguza uwezo wa mwanamitindo kutatua mafumbo ya riwaya ambayo haijawahi kuona hapo awali - jaribio la akili ya jumla badala ya maarifa ya kukariri. Ili kuweka ulinganifu kuwa sawa, unganisho rasmi huondoa kwa makusudi vipengele mahususi vya mtoa huduma, kupima uwezo wa kielelezo mbichi katika mazingira yasiyoegemea upande wowote.
Hoja ya OpenAI ni kwamba kutoegemea upande wowote kunaweza kuwa kilema. Kampuni hiyo inakubali kwamba kuunganisha rasmi kunategemea "API ya ukamilishaji ya mtindo wa OpenAI" ya zamani ambayo haikuwa na uwezo wa API ya Claude ambayo tayari ilikuwa imetolewa, na hivyo kuweka OpenAI katika hasara ya kimuundo kuhusiana na Anthropic katika ulinganisho wa awali.
Kwa kweli, OpenAI inasema: ulipima mfano wetu kwa mkono mmoja umefungwa nyuma yake.
Majibu ya Chollet
Mwanzilishi mwenza wa Tuzo ya ARC François Chollet alijibu kwa kuchora mstari wazi kati ya aina mbili za usanidi wa majaribio. Nguo "zilizoundwa kidesturi kusuluhisha alama au ambazo zina maarifa juu ya umbizo la benchmark" hazina kikomo, alisema. Lakini mipangilio ya madhumuni ya jumla ya API "ambayo haikutengenezwa kwa ARC-AGI-3 na ambayo inapatikana kwa watumiaji wote wa API" ni mchezo wa haki.
Kwa kweli, Chollet alikubali kwamba alama ya ARC ya Tuzo ya GPT-5.6 Sol iliiweka OpenAI katika hali mbaya. Alibainisha kuwa shirika limekuwa na "mengi na kurudi na OpenAI kuhusu jinsi ya kupima mifano yao, hasa kuhusu compaction," na kukaribisha kampuni "kuanza kufikiri jibu."
Chollet aliripoti wasiwasi mmoja uliobaki. Watoa huduma tofauti wanaotumia mipangilio tofauti huunda kile alichokiita "suala linalowezekana la usawa" - lakini anaona hilo linakubalika "ilimradi mipangilio na gharama zimeripotiwa wazi."
Kwa Nini Hili Ni Muhimu Zaidi ya Ubao wa Wanaoongoza
Kipindi kinasisitiza mvutano ambao unaunda upya jinsi tasnia ya AI inavyotathmini maendeleo. Kadiri miundo inavyozidi kutumiwa kupitia API zenye vipengele vingi badala ya kama mifumo inayojitegemea, mstari kati ya uwezo asili wa modeli na uhandisi unaoizunguka unaendelea kutia ukungu. Kigezo kinachopuuza kiunzi kinaweza kudharau utendaji wa ulimwengu halisi; ambayo inaikumbatia inaweza kuwazawadi makampuni kwa kucheza jaribio.
Mjadala wa ARC-AGI-3 hauwezekani kuwa wa mwisho. Miundo ya mipaka inapokusanyika karibu na sehemu ya juu ya viwango vilivyoidhinishwa, kutokubaliana juu ya kile kinachohesabiwa kuwa kipimo cha haki - na ambao uunganisho wake unapata kuweka kiwango - utaongezeka tu.
Kaa Mbele ya AI
Je, ungependa kufuata habari zinazochipuka za AI kuhusu miundo, vigezo na maabara zinazoziunda? AI Buzz Wire imekushughulikia.
Soma habari zaidi za AI
