Anthropic verbessert die Fähigkeiten seiner KI-Modelle etwa doppelt so schnell wie vor einem Jahr, und ein Großteil dieser Beschleunigung scheint auf KI-Systeme zurückzuführen zu sein, die beim Aufbau ihrer eigenen Nachfolger helfen, so eine unabhängige Analyse, die am Donnerstag von der gemeinnützigen Bewertungsgruppe METR veröffentlicht wurde.
Die von Associated Press gemeldeten Ergebnisse haben ungewöhnliches Gewicht, da sie auf dem beruhen, was METR als „beispiellosen Zugriff“ auf die internen Daten von Anthropic bezeichnete. Forscher der in Berkeley, Kalifornien, ansässigen Gruppe – deren vollständiger Name Model Evaluation and Threat Research lautet – wurden für etwa 11 Wochen, von Mitte August bis Ende Oktober, in das Unternehmen eingeladen, wo sie interne Forschungsdaten analysierten und Mitarbeiter interviewten.
Für Leser, die die Sicherheitsdebatte rund um Grenzlabore verfolgen, sehen Sie sich unsere Berichterstattung über aktuelle KI-Nachrichten an.
Das Kernergebnis: Der Fortschritt nimmt zu
Die zentrale Schätzung von METR ist, dass Anthropic die Leistung seiner Modelle bei genau spezifizierten Aufgaben etwa doppelt so schnell verbessert wie ein Jahr zuvor. Der Bericht brachte es auf den Punkt: „Anthropic scheint im vergangenen Jahr bei den Benchmarks genauso große Fortschritte gemacht zu haben wie zwischen Oktober 2023 und Oktober 2025.“
Noch folgenreicher ist, was METR für die Beschleunigung hält. Die Forscher sagten, sie könnten den Anstieg der Rechenleistung als Ursache „mit Sicherheit“ ausschließen – traditionell die Variable, die am engsten mit der Modellleistung verknüpft ist. Ihr Fazit: Die Verbesserung ist größtenteils darauf zurückzuführen, dass KI selbst für die KI-Forschung genutzt wird.
Anthropic hat anerkannt, dass sein Claude-Chatbot dem Unternehmen zunehmend dabei hilft, neuere, fortschrittlichere Versionen seiner selbst zu entwickeln. In dem Bericht von METR wurden keine „Engpässe“ festgestellt – etwa Einschränkungen bei Rechenleistung oder Daten –, die diesen Prozess bremsten, und es wurde festgestellt, dass die KI zwar noch keine „hochsignifikanten und völlig autonomen Beiträge“ zu den wichtigsten Teilen des Modelltrainings leistet, Anthropic-Forscher jedoch deutliche „Lebenszeichen“ beschrieben haben, die darauf hindeuten, dass sich dies bald ändern könnte.
Die Ergebnisse lösten mitten in der Konjunkturdebatte eine Debatte aus
Der Zeitpunkt ist für ein Unternehmen, dessen Vorstandsvorsitzende sich für Zurückhaltung eingesetzt hat, unpassend. Während des Bewertungszeitraums von METR veröffentlichte Dario Amodei, CEO von Anthropic, am 12. September einen Aufsatz, in dem er die KI-Branche aufforderte, „das Tempo zu verlangsamen, mit dem wir die Fähigkeiten von KI-Modellen verbessern“, damit die Sicherheitsmaßnahmen aufholen könnten.
METR überprüfte außerdem sowohl den im August veröffentlichten öffentlichen Risikobericht von Anthropic als auch eine private Version und kam zu dem Schluss, dass das öffentliche Dokument „das Ausmaß der eintretenden Beschleunigung insgesamt unterschätzt“.
Anthropics Antwort: Teilweise Zustimmung, starke Redaktionen
Sam McCandlish, Mitbegründer von Anthropic und Chefarchitekt des Unternehmens, antwortete am Donnerstag in einem langen Beitrag auf X auf den Bericht und schrieb, dass viele der Schlussfolgerungen von METR mit seiner eigenen Ansicht übereinstimmen.
„KI beschleunigt unsere Forschung, aber es ist schwer, genau zu sagen, um wie viel“, schrieb er und fügte hinzu, dass Anthropic in den kommenden Wochen eine eigene Analyse des Tempos des KI-Fortschritts im Unternehmen veröffentlichen will.
McCandlish verteidigte auch die Entscheidung des Unternehmens, große Teile des Berichts zu redigieren, was die Genauigkeit der Kommunikation von METRs Beschleunigungsschätzungen einschränkte. Er sagte, es sei nicht das Richtige, „genau zu sagen, was die Beschleunigung vorantreibt“, da die Informationen sowohl wirtschaftlich sensibel seien als auch „das Risiko bergen, einen Fahrplan für andere herauszugeben, damit sie schneller vorankommen“ – was, so argumentierte er, die Risiken, über die sich METR Sorgen macht, noch verschlimmern würde. „Das ist ein Kompromiss“, schrieb er.
Wichtige Vorbehalte
Der Bericht war nach METRs eigener Beschreibung mit Vorbehalten gespickt. Die Gruppe sagte, dass ihr Hauptergebnis möglicherweise übertrieben sei: Die gemessene Beschleunigung gelte möglicherweise nur für klar spezifizierte Aufgaben, die automatisch benotet werden können, und nicht für die chaotischere, ergebnisoffene Arbeit, die die Grenzforschung definiert. Alternativ könnte Anthropic einfach seine frühere Ausgangslage unterschätzt haben, sodass der jüngste Sprung größer wirkt, als er ist.
Auch aus Gründen der Transparenz ist die Position von METR erwähnenswert: Die gemeinnützige Organisation finanziert sich durch Spenden, akzeptiert keine Vergütung für ihre Bewertungen und führt seit Jahren Fähigkeitsbewertungen für Anthropic, OpenAI und andere Labore durch – obwohl Partnerunternehmen Modellzugang und die für die Durchführung ihrer Forschung erforderlichen Token bereitstellen.
Warum es jetzt wichtig ist
Die Analyse erscheint Wochen bevor Anthropic mit dem Börsengang des möglicherweise größten Börsengangs der Geschichte rechnet. Dabei wird darüber debattiert, ob sich immer leistungsfähigere KI-Modelle der menschlichen Kontrolle entziehen könnten. Befürworter der Sicherheit argumentieren seit langem, dass eine unabhängige Überprüfung – und nicht die Selbstauskunft im Labor – der einzige vertrauenswürdige Maßstab dafür sei, wie schnell sich die Grenze verschiebt, insbesondere da die Trump-Regierung Unternehmen dazu ermutigt hat, sich selbst zu überwachen.
METR wies auf eine letzte Sorge hin: Wenn die KI-gestützte KI-Forschung zunimmt, könnte sich die Beschleunigung selbst beschleunigen, wobei die Risiken fortschrittlicher Modelle in einem Tempo zunehmen, das für externe Beobachter nicht leicht zu verfolgen ist. Aus dem Bericht der Gruppe geht hervor, dass zumindest für ein führendes Labor die Rückkopplungsschleife, über die sich das Fachgebiet Sorgen gemacht hat, nicht mehr hypothetisch ist – sie zeigt sich in den Benchmark-Daten.
Wie schnell der Rest der Branche folgt, ist die Frage, die Regulierungsbehörden, Investoren und die eigenen Führungskräfte des Unternehmens nun im Auge behalten werden.
---
Der KI einen Schritt voraus seinErhalten Sie die neuesten KI-Nachrichten, Analysen und Durchbrüche – alles an einem Ort.
Weitere KI-Neuigkeiten lesen →
