Kikundi cha AI Frontiers cha Utafiti wa Microsoft Kimekwisha, Mwanzilishi Anaandika, kama Microsoft AI Inapendelea Kuongeza Utafiti

Kikundi cha AI Frontiers cha Utafiti wa Microsoft - takribani kitengo cha watu 50 nyuma ya mfumo wa ochestration wa wakala wa AutoGen na wakala wa utumiaji wa kompyuta wa Fara - kimefikia mwisho wake, kulingana na akaunti ya mtu wa kwanza iliyochapishwa wiki hii na mtafiti wa kujifunza mashine John Langford, ambaye alipanga kikundi ndani ya MSR mnamo 2023. Langford anaandika katika Septemba kwamba timu hiyo ilianza kufyonzwa na AI mapema katika mazoezi ya Microsoft. hakuna nyumbani kwa ajenda yake ya utafiti. Chapisho hili lilivutia hisia: lilikua juu zaidi Hacker News likiwa na zaidi ya pointi 300 ndani ya saa moja, na linatoa mojawapo ya akaunti za ndani kuhusu jinsi mabadiliko ya sekta hii kutoka kwa utafiti hadi kuongeza yanavyofanyika ndani ya maabara kuu. Tunafuatilia matokeo mabaya katika habari ya habari ya biashara ya AI.

Mipaka ya AI Iliyojengwa

Langford anafuatilia asili ya kikundi hadi miezi baada ya ChatGPT kutolewa, alipohitimisha kwamba utafiti wa maana wa AI ndani ya Microsoft unahitaji muundo zaidi kuliko mtindo wa jadi wa MSR. "Kiasi cha usaidizi na umakini ambao vikundi vingine vya utafiti vilikuwa vikitumia ulikuwa mkubwa vya kutosha hivi kwamba hata kwa wazo la busara lililofuatwa na mtu mmoja kulikuwa na uwezekano wa kuchelewa na kutoshawishika," anaandika, akielezea kuwa mtafiti peke yake hakuweza kukusanya msingi wenye nguvu za kutosha ili kudhibitisha wazo ambalo linafaa kufuatwa.

Kwa hivyo Langford na wenzake wenye nia kama hiyo walipanga AI Frontiers kama shirika dogo la watu wapatao 50, kwa makusudi hawakuunda juu-chini wala chini-juu bali "mahali fulani katikati yenye fujo." Matokeo yanayoonekana zaidi ya kikundi yalitumika: AutoGen, mfumo wa chanzo huria wa Microsoft unaotumika sana kwa kupanga mawakala wengi wa AI, na Fara, wakala wa matumizi ya kompyuta. Kwa kusema kwa Langford, "kazi kubwa ya AIF ilikuwa kutafuta jinsi ya kufanya mawakala kufanya kazi."

Kidogo kilichoonekana ni utafiti wa kimsingi wa kikundi. Kikosi cha New York kilifuatilia kile ambacho Langford anakielezea kama uwezo mpya wa msingi: lengo la "Next Latent" ambalo huwezesha miundo kuzidisha, kiboreshaji kiitwacho Dion3 ambacho huboresha Muon, na "Kibadilisha Kigeuzi Kamili cha Bandwidth" iliyoundwa kufanya miundo kuwa na nguvu zaidi kupitia urejeshaji.

Kikundi pia kilijaribu kushiriki miundombinu na Utafiti mwingine wa Microsoft, kudumisha monorepo wazi kwa watafiti wote wa MSR. Hazina hiyo ilijumuisha kanuni ya msingi ya mafunzo ya awali ya Langford iliyowasilishwa kwenye mkutano wa mwezi uliopita wa COLM - maelezo anayoita madogo, lakini moja anayotumia kusisitiza ni juhudi ngapi bomba la mafunzo ya kielelezo inachukua kujenga, akibainisha kuwa timu nyingine tatu za ndani zilikuwa zikijaribu kitu sawa bila msingi wa pamoja.

The September Reorg

Mapema Septemba, Microsoft ilikunja AI Frontiers kuwa Microsoft AI, kitengo kikubwa zaidi cha bidhaa ambacho huhifadhi juhudi za watumiaji na biashara za AI. Kwenye karatasi, Langford anakubali, hatua hiyo ilikuwa na maana: kuchanganya mashirika mawili ya AI huzingatia juhudi, na kila moja lilikuwa na uwezo ambalo lingine lilikosa.

Katika mazoezi, anaandika, muunganisho ulioanzishwa kwenye falsafa. "Falsafa ya msingi huko ni kuongeza, na kwa ukali sio utafiti," Langford anasema juu ya uongozi wa zamani wa Microsoft AI - rejeleo la timu iliyojiunga na Microsoft kutoka kwa uanzishaji wa Inflection AI, ambayo sasa inaunda mwelekeo wa kitengo chini ya uongozi wake. Muundo wake wa matokeo ya uchumi ni butu: miundo mikubwa hutoa utabiri bora zaidi, na "kurejesha kwa kiwango kunaweza kutabirika zaidi kuliko kurudi kwa utafiti," kwa hivyo shirika la kwanza linazingatia kupata na kuboresha data badala ya mbinu mpya.

Lengo hilo, anasema, ni "hatua mbali kabisa" na kazi ya kimsingi ya AI Frontiers ilikuwa ikifanya - na zaidi ya kutolingana kwa kifalsafa, anasema kukaribishwa kulikuwa na uvuguvugu bora zaidi. "Kulikuwa na ushahidi mwingi kwamba hawakututaka tu," Langford anaandika, akiita hali hiyo "kuwa ngumu kujikuta." Yeye haondoi maoni yake mwenyewe ya biashara, akielezea mbinu ya kuongeza tu kama ilivyoelekezwa vibaya, ingawa hoja kamili inaenea zaidi ya hoja anayotoa kwa uwazi katika chapisho.

Utafiti dhidi ya Kuongeza, Zaidi ya Microsoft

Insha inatua huku kukiwa na mjadala mpana wa tasnia kuhusu kama maabara za mipakani zinaweza kuendeleza mashirika ya kweli ya utafiti kando na ratiba za bidhaa. Microsoft haiko peke yake katika kuunganisha utafiti wa AI chini ya uongozi unaozingatia bidhaa, lakini akaunti ya Langford ni mahususi isivyo kawaida kuhusu mechanics: kikundi kidogo, chenye tija ambacho hakikupewa mamlaka wala kukaribishwa baada ya upangaji upya wa shirika, na michango yake ya miundombinu ikichukuliwa kimya kimya.

Majadiliano kuhusu Hacker News, ambapo chapisho lilivuta mamia ya maoni, kwa kiasi kikubwa yalizingatia mvutano huo - iwe uchunguzi wa kiotomatiki kama huu unaelezea ukomavu usioepukika wa utafiti wa shirika wa AI, au hitilafu ya kimkakati ambapo maabara hufanya biashara ya manufaa ya kudumu ya kimbinu kwa faida zinazotabirika. Watoa maoni pia waliashiria kejeli kwamba AutoGen, mojawapo ya miradi ya sahihi ya AI Frontiers, ilisaidia kufafanua aina ya wakala-ochestration ambayo sasa inatawala ramani za barabara za AI za biashara.

Kwa Microsoft, kipindi ni tanbihi yenye sifa na athari za vitendo. Kampuni hiyo imeweka mkakati wake wa AI kwenye safu ya usafirishaji ya Microsoft AI, na Langford hadai kuwa shirika lililounganishwa litaunda bidhaa mbaya zaidi. Wasiwasi wake ni finyu na unaonyeshwa zaidi: kwamba bomba la mawazo mapya - watu, miundombinu, uvumilivu kwa mbinu ambazo hazijathibitishwa - ni nini hasa kitengo cha kwanza hakina matumizi kidogo, hadi siku inahitaji moja.

Wala chapisho la Langford au upangaji upya anaoelezea hubadilisha kile watumiaji wanaona leo, lakini zinafafanua jinsi Microsoft sasa inapanga dau zake za AI. Utafiti ambao unaweza kugeuzwa kuwa mizani uko katika; utafiti ambao unaweza kubadilisha maana ya mizani ni, bora, kwenye majaribio. Kama Langford anavyoiweka katika kichwa cha chapisho, huu ndio mwisho wa AI Frontiers - na sehemu ya data katika hoja juu ya utafiti wa shirika wa AI ni wa nini.

Kaa Mbele ya AI

Biashara ya AI inaandikwa upya kwa wakati halisi, na maamuzi yanayofanywa ndani ya maabara kama vile muundo wa Microsoft ambao kila mtu anarithi. Fuata kila jambo linaloendelea katika habari zetu za AI.

Soma habari zaidi za AI →