Anthropic förbättrar kapaciteten hos sina AI-modeller ungefär dubbelt så snabbt som för ett år sedan, och mycket av den snabbheten verkar komma från AI-system som hjälper till att bygga sina egna efterföljare, enligt en oberoende analys som släpptes på torsdagen av den ideella utvärderingsgruppen METR.
Fynden, rapporterade av Associated Press, har ovanlig vikt eftersom de vilar på vad METR beskrev som "oöverträffad tillgång" till Anthropics interna data. Forskare från den Berkeley, Kalifornien-baserade gruppen – vars fullständiga namn är Model Evaluation and Threat Research – bjöds in i företaget i ungefär 11 veckor, från mitten av augusti till slutet av oktober, där de analyserade interna forskningsdata och intervjuade personal.
För läsare som följer säkerhetsdebatten kring frontier labs, se vår breaking AI news täckning.
Kärnresultatet: Framsteg är sammansatta
METR:s centrala uppskattning är att Anthropic förbättrar sina modellers prestanda på väl specificerade uppgifter ungefär dubbelt så snabbt som det var ett år tidigare. Rapporten uttryckte det skarpt: "Anthropic verkar ha gjort lika stora framsteg med riktmärken under det senaste året som de gjorde mellan oktober 2023 och oktober 2025."
Mer följdriktigt är vad METR tror driver accelerationen. Forskarna sa att de kunde "säkert" utesluta tillväxt i datorkraft som orsak - traditionellt sett den variabel som är mest kopplad till modellprestanda. Deras slutsats: förbättringen beror till stor del på att använda AI själv för att göra AI-forskning.
Anthropic har erkänt att dess Claude chatbot alltmer hjälper företaget att utveckla nyare, mer avancerade versioner av sig själv. METR:s rapport fann inga "flaskhalsar" - såsom begränsningar av beräkning eller data - som håller den processen tillbaka, och noterade att även om AI ännu inte ger "mycket betydande och helt autonoma bidrag" till de viktigaste delarna av modellträning, beskrev antropiska forskare betydande "tecken på liv" vilket antyder att det kan förändras snart.
Fynden landade i mitten av avmattningsdebatten
Timingen är besvärlig för ett företag vars verkställande direktör har kämpat för återhållsamhet. Det var under METR:s bedömningsperiod som Anthropics vd Dario Amodei publicerade en essä den 12 september där han uppmanade AI-industrin att "sänka takten med vilken vi förbättrar AI-modellernas kapacitet" så att säkerhetsåtgärderna kunde komma ikapp.
METR granskade också både den offentliga riskrapporten Anthropic publicerad i augusti och en privat version och drog slutsatsen att det offentliga dokumentet "överlag underskattar nivån av acceleration som inträffade."
Anthropics svar: partiell överenskommelse, tunga neddragningar
Sam McCandlish, en Antropisk medgrundare och företagets chefsarkitekt, svarade på rapporten i torsdags i ett långt inlägg på X och skrev att många av METRs slutsatser stämmer överens med hans egen uppfattning.
"AI påskyndar vår forskning, men det är svårt att säga exakt hur mycket", skrev han och tillade att Anthropic planerar att släppa sin egen analys av takten i AI-framsteg inom företaget under de kommande veckorna.
McCandlish försvarade också företagets beslut att redigera stora delar av rapporten, vilket begränsade hur exakt METR kunde kommunicera sina accelerationsuppskattningar. Han sa att det inte är rätt sak att dela "exakt vad som driver upp hastigheten", eftersom informationen är både kommersiellt känslig och "risker att dela ut en färdplan för andra att gå snabbare" - vilket, han hävdade, skulle göra de risker som METR är oroliga för värre. "Det är en avvägning", skrev han.
Viktiga varningar
Rapporten var, enligt METR:s egen beskrivning, späckad med varningar. Gruppen sa att dess rubrikfynd kunde vara att överdriva saker: den uppmätta accelerationen kan endast gälla väl specificerade uppgifter som kan graderas automatiskt, snarare än det rörigare, öppna arbetet som definierar frontlinjeforskning. Alternativt kan Anthropic helt enkelt ha underskattat sin tidigare baslinje, vilket får det senaste hoppet att se större ut än det är.
METR:s position är också värd att notera av transparensskäl: den ideella organisationen finansieras genom donationer, accepterar inte kompensation för sina utvärderingar och har genomfört kapacitetsbedömningar för Anthropic, OpenAI och andra labb i flera år – även om partnerföretag tillhandahåller modelltillgång och de symboler som behövs för att driva sin forskning.
Varför det är viktigt nu
Analysen landar veckor innan Anthropic förväntar sig att bli börsnoterad i vad som kan vara det största börsintroduktionen i historien, med debatt som virvlar runt om huruvida alltmer kapabla AI-modeller kan undgå mänsklig kontroll. Säkerhetsförespråkare har länge hävdat att oberoende verifiering – inte självrapportering från laboratorier – är det enda pålitliga måttet på hur snabbt gränsen rör sig, särskilt som Trump-administrationen har uppmuntrat företag att polisera sig själva.
METR flaggade för en sista oro: om AI-assisterad AI-forskning börjar förvärras, kan själva accelerationen accelerera, med riskerna från avancerade modeller som växer i en takt som externa observatörer inte enkelt kan spåra. Gruppens rapport tyder på att återkopplingsslingan som fältet har oroat sig för åtminstone för ett ledande labb inte längre är hypotetisk - den visas i riktmärkesdata.
Hur snabbt resten av branschen följer med är frågan som tillsynsmyndigheter, investerare och företagets egna chefer nu kommer att titta på.
---
Stay ahead of AIFå de senaste AI-nyheterna, analyserna och genombrotten – allt på ett ställe.
Läs mer AI-nyheter →
