Anthropic meningkatkan kemampuan model AI-nya sekitar dua kali lebih cepat dibandingkan tahun lalu, dan sebagian besar peningkatan tersebut tampaknya berasal dari sistem AI yang membantu membangun penerusnya sendiri, menurut analisis independen yang dirilis pada hari Kamis oleh kelompok evaluasi nirlaba METR.

Temuan tersebut, yang dilaporkan oleh Associated Press, memiliki bobot yang tidak biasa karena didasarkan pada apa yang digambarkan METR sebagai "akses yang belum pernah terjadi sebelumnya" terhadap data internal Anthropic. Para peneliti dari kelompok yang berbasis di Berkeley, California – yang bernama lengkap Model Evaluation and Threat Research – diundang ke dalam perusahaan selama kurang lebih 11 minggu, dari pertengahan Agustus hingga akhir Oktober, di mana mereka menganalisis data penelitian internal dan mewawancarai staf.

Untuk pembaca yang menelusuri perdebatan keselamatan seputar laboratorium perbatasan, lihat liputan berita AI terkini kami.

Temuan Inti: Kemajuan Semakin Meningkat

Perkiraan utama METR adalah Anthropic meningkatkan kinerja modelnya pada tugas-tugas tertentu sekitar dua kali lebih cepat dibandingkan tahun sebelumnya. Laporan tersebut dengan tegas menyatakan: "Anthropic tampaknya telah membuat banyak kemajuan dalam tolok ukur pada tahun lalu dibandingkan antara Oktober 2023 dan Oktober 2025."

Yang lebih penting adalah apa yang METR yakini mendorong akselerasi. Para peneliti mengatakan mereka mampu “dengan percaya diri” mengesampingkan pertumbuhan daya komputasi sebagai penyebabnya – yang secara tradisional merupakan variabel yang paling terkait erat dengan kinerja model. Kesimpulan mereka: peningkatan ini sebagian besar disebabkan oleh penggunaan AI itu sendiri untuk melakukan penelitian AI.

Anthropic mengakui bahwa chatbot Claude-nya semakin membantu perusahaan mengembangkan versi yang lebih baru dan lebih maju. Laporan METR tidak menemukan “hambatan” – seperti pembatasan pada komputasi atau data – yang menghambat proses tersebut, dan mencatat bahwa meskipun AI belum memberikan “kontribusi yang sangat signifikan dan sepenuhnya otonom” pada bagian terpenting dari pelatihan model, para peneliti Anthropic menggambarkan “tanda-tanda kehidupan” yang signifikan yang menyiratkan bahwa hal itu dapat segera berubah.

Temuan ini Mendatangkan Debat di Tengah Perlambatan

Waktunya tidak tepat bagi perusahaan yang kepala eksekutifnya telah melobi untuk menahan diri. Selama periode penilaian METR, CEO Anthropic Dario Amodei menerbitkan esai pada tanggal 12 September yang mendesak industri AI untuk "memperlambat laju peningkatan kemampuan model AI" sehingga langkah-langkah keselamatan dapat menyusul.

METR juga meninjau laporan risiko publik Anthropic yang diterbitkan pada bulan Agustus dan versi swasta, dan menyimpulkan bahwa dokumen publik tersebut “secara keseluruhan meremehkan tingkat percepatan yang terjadi.”

Tanggapan Anthropic: Kesepakatan Parsial, Redaksi Berat

Sam McCandlish, salah satu pendiri Anthropic dan kepala arsitek perusahaan, menanggapi laporan tersebut pada hari Kamis dalam postingan panjang di X, menulis bahwa banyak kesimpulan METR yang sesuai dengan pandangannya.

“AI mempercepat penelitian kami, namun sulit untuk mengatakan secara pasti berapa besarnya,” tulisnya, seraya menambahkan bahwa Anthropic berencana untuk merilis analisisnya sendiri mengenai laju kemajuan AI di dalam perusahaan dalam beberapa minggu mendatang.

McCandlish juga membela keputusan perusahaan untuk menyunting sebagian besar laporan tersebut, yang membatasi seberapa tepat METR dapat mengkomunikasikan perkiraan percepatannya. Dia mengatakan bahwa berbagi “apa yang sebenarnya mendorong percepatan ini bukanlah hal yang benar untuk dilakukan,” karena informasi tersebut sensitif secara komersial dan “berisiko memberikan peta jalan kepada pihak lain untuk bergerak lebih cepat” – yang, menurutnya, akan memperburuk risiko yang dikhawatirkan METR. "Itu pengorbanan," tulisnya.

Peringatan Penting

Laporan tersebut, menurut deskripsi METR sendiri, dipenuhi dengan peringatan. Kelompok tersebut mengatakan temuan utama mereka mungkin melebih-lebihkan: percepatan terukur mungkin hanya berlaku untuk tugas-tugas tertentu yang dapat dinilai secara otomatis, dibandingkan pekerjaan yang lebih berantakan dan terbuka yang mendefinisikan penelitian terdepan. Atau, Anthropic mungkin hanya mengecilkan dasar sebelumnya, membuat lompatan terbaru terlihat lebih besar dari sebelumnya.

Posisi METR juga perlu diperhatikan karena alasan transparansi: organisasi nirlaba ini didanai melalui donasi, tidak menerima kompensasi atas evaluasinya, dan telah melakukan penilaian kemampuan untuk Anthropic, OpenAI, dan laboratorium lainnya selama bertahun-tahun — meskipun perusahaan mitra menyediakan akses model dan token yang diperlukan untuk menjalankan penelitiannya.

Mengapa Ini Penting Sekarang

Analisis ini dilakukan beberapa minggu sebelum Anthropic berencana untuk melakukan penawaran umum perdana (IPO) terbesar dalam sejarah, dengan perdebatan mengenai apakah model AI yang semakin mumpuni dapat lolos dari kendali manusia. Para pendukung keselamatan telah lama berpendapat bahwa verifikasi independen – bukan pelaporan mandiri di laboratorium – adalah satu-satunya ukuran yang dapat dipercaya mengenai seberapa cepat kemajuan yang terjadi, terutama karena pemerintahan Trump telah mendorong perusahaan untuk mengawasi diri mereka sendiri.

METR menandai satu kekhawatiran terakhir: jika penelitian AI yang dibantu AI mulai bertambah, akselerasinya sendiri bisa semakin cepat, dengan risiko dari model-model canggih yang tumbuh dengan kecepatan yang tidak dapat dilacak dengan mudah oleh pengamat luar. Laporan kelompok tersebut menunjukkan bahwa setidaknya untuk satu laboratorium terkemuka, putaran umpan balik yang dikhawatirkan oleh lapangan tidak lagi bersifat hipotetis — hal ini muncul dalam data benchmark.

Seberapa cepat industri lainnya akan mengikuti perkembangan ini adalah pertanyaan yang kini akan diawasi oleh regulator, investor, dan eksekutif perusahaan.

---

Tetap Terdepan dalam AI

Dapatkan berita, analisis, dan terobosan AI terkini — semuanya di satu tempat.

Baca berita AI selengkapnya →