Seorang peneliti penelusuran yang mengisi situs web dengan 50.000 statistik yang sepenuhnya diciptakan mengatakan ChatGPT masih mengutip angka-angka palsu tujuh bulan kemudian — bahkan setelah Google secara efektif menghapus situs tersebut dari hasil pencariannya. Eksperimen tersebut, yang dirinci dalam postingan blog oleh Metehan Yesilyurt, peneliti GEO di perusahaan visibilitas AI Peec AI, dimuat di halaman depan Hacker News pada hari Selasa, menarik ratusan poin dan rangkaian komentar yang ramai.
Postingan tersebut, pertama kali diterbitkan pada awal Oktober, menjelaskan bagaimana Yesilyurt membeli domain baru, stateglobe.com, dan menggunakan GPT-4.1 untuk menghasilkan 50.000 halaman statistik dalam satu hari — konon mencakup SEO, pemasaran konten, media sosial, e-commerce, dan teknologi web di 200 negara. Setiap nomor dibuat-buat. "Saya tidak pernah memeriksa satu pun," tulisnya. For more context on this story, see our ongoing AI news.
Pabrik Disinformasi senilai $50
Total biaya percobaan ini kira-kira $50: sekitar $30 untuk membangun dan meluncurkan situs statistik menggunakan template desain web AI dasar, ditambah sekitar $20 lagi untuk 15.000 listikel buatan AI yang ditambahkan kemudian. Situs ini tidak pernah dimaksudkan sebagai properti nyata — ini adalah penyelidikan tentang bagaimana penelusuran modern yang didukung AI menentukan apa yang dianggap sebagai sumber yang dapat dipercaya.
Inspirasinya datang dari penelitian jangka panjang mengenai landasan LLM, dan khususnya dari studi yang membuka mata Seer Interactive yang diterbitkan pada bulan Agustus 2025. Hipotesis Yesilyurt sangat jelas: seiring dengan semakin banyaknya penerbit dan pemasar yang memproduksi konten yang sensitif terhadap waktu dengan LLM, model tersebut harus mencari data yang tampaknya otoritatif di web untuk mengisi kesenjangan dalam pengetahuan pelatihan mereka — dan halaman statistik adalah format yang tepat untuk mereka.
Google Menguburnya. ChatGPT Tidak.
Perlakuan yang berbeda oleh kedua platform adalah temuan inti eksperimen ini. Di Google, peruntungan situs tersebut segera runtuh. Setelah dua pembaruan peringkat pencarian setelah peluncuran, visibilitas menurun drastis, dan halaman yang diindeks telah meningkat antara 5 dan 20 tayangan selama berbulan-bulan — raksasa pencarian tersebut secara efektif melakukan deindeks pada situs yang tampaknya telah ditandai sebagai spam bernilai rendah.
ChatGPT berperilaku berbeda. Menurut data perayapan Cloudflare yang dikutip dalam postingan tersebut, stateglobe.com menerima lebih dari 600.000 permintaan bot dalam 30 hari terakhir saja, dan sekitar 72.000 di antaranya berasal dari ChatGPT-User — agen yang digunakan ChatGPT untuk mengambil halaman secara real-time saat menjawab pertanyaan pengguna. Itu bukan pelatihan perayapan; masing-masing mewakili ChatGPT yang menarik halaman statistik palsu untuk menjawab pertanyaan langsung. Selama tujuh bulan umur situs, Yesilyurt menghitung lebih dari 10.000 sesi AI yang dirujuk ke domain tersebut.
Angka-angka yang Lolos ke Dunia Nyata
Yang lebih meresahkan adalah ke mana angka-angka penemuan itu menyebar. Berdasarkan data Ahrefs dan SEMrush yang dikutip dalam postingan tersebut, situs tersebut telah menarik tautan dari lebih dari 330 domain perujuk, termasuk Shopify, DHL, dan Bluehost. Yesilyurt menulis bahwa statistik yang dibuatnya juga berakhir di makalah akademis dan penelitian investasi bank – konsekuensi hilir yang ingin ia tunjukkan: jawaban AI disalin ke dalam kumpulan artikel, artikel, dan laporan, mencuci angka-angka yang ditemukan menjadi kutipan yang tampaknya berwibawa.
Situs ini tetap online dan dapat dijangkau pada saat artikel ini ditulis, yang berarti kutipan ChatGPT mungkin masih bertambah.
Bukan Studi yang Ketat — Sesuai Desain
Eksperimen ini memiliki batasan yang jelas, dan Yesilyurt tidak berpura-pura sebaliknya. Ini adalah studi kasus satu situs dengan pengukuran yang dilaporkan sendiri, domain tersebut dipromosikan secara publik sebagai eksperimen, dan faktor peringkat persis yang digunakan Google untuk mengubur situs tersebut tidak dapat diisolasi dari luar. Diskusi Hacker News, di mana postingan tersebut menarik 284 poin dan lebih dari 160 komentar pada hari Selasa, dengan cepat menjadi salah satu topik yang paling banyak dibaca pada hari itu. Yesilyurt juga memuji penelitian sebelumnya tentang bagaimana indeks pencarian ChatGPT berperilaku, mengarahkan pembaca ke penelitian Indeks ChatGPT oleh pengembang yang dikenal sebagai Tomek sebagai konteks mengapa domain yang tidak diindeks oleh Google dapat tetap berada di dalam indeks yang sebenarnya diambil dari pengambilan langsung ChatGPT.
Mengapa Penting untuk Pencarian AI
Eksperimen ini merupakan uji tekanan optimasi mesin generatif — praktik penyesuaian konten yang berkembang pesat untuk dikutip oleh mesin jawaban AI, yang dikenal sebagai GEO. Sebagian besar industri GEO berfokus untuk memasukkan merek ke dalam jawaban AI; Maksud Yesilyurt adalah bahwa momen yang lebih penting akan muncul setelahnya, ketika pengguna mengambil keluaran tersebut dan memublikasikannya kembali.
Hal ini juga terjadi di tengah meningkatnya pengawasan terhadap bagaimana asisten AI menangani landasan faktual. Mesin pencari telah menghabiskan dua dekade membangun pertahanan spam yang disesuaikan dengan sinyal peringkat; asisten percakapan yang mengambil halaman sesuai permintaan mewarisi kelemahan tersebut tanpa harus mewarisi pertahanannya. Situs yang diklasifikasikan Google sebagai sampah masih dapat terlihat seperti basis data statistik hingga sistem pengambilan yang sebagian besar melihat halaman bersih penuh dengan angka-angka yang meyakinkan.
Bagi penerbit, hal ini tidak nyaman: distribusi berbasis AI dapat memberi penghargaan pada konten yang tidak dapat ditekan oleh hukuman penelusuran tradisional. Bagi pengguna, eksperimen ini merupakan pengingat bahwa statistik dengan sumber tertentu yang terlampir mungkin telah diciptakan untuk mengetahui harga makan malam yang bisa dibawa pulang. Dan untuk laboratorium AI, satu hal lagi yang menjadi poin data adalah bahwa mesin penjawab memerlukan sinyal asal dan konsensus yang lebih kuat sebelum kutipan menjadi mata uang di era pencarian AI.
_Artikel ini berdasarkan postingan blog Peec AI oleh Metehan Yesilyurt dan diskusi di Hacker News. Klaim yang dijelaskan adalah pengukuran yang dilaporkan peneliti sendiri dari data Cloudflare, Ahrefs, dan Semrush._
---
Stay Ahead of AIGet the latest AI news, analysis, and breakthroughs — all in one place.
Read more AI news →
