OpenAI telah mengganggu jaringan penipuan terkoordinasi yang digerakkan oleh ChatGPT yang beroperasi di Poipet, Kamboja, perusahaan tersebut mengungkapkan dalam sebuah laporan yang merinci bagaimana kelompok kriminal kini memasukkan model kecerdasan buatan komersial ke dalam operasi sehari-hari di kompleks kerja paksa.

Pengungkapan tersebut, yang diterbitkan pada tanggal 31 Juli dengan judul “Mengganggu Operasi Penipuan Kriminal,” menggambarkan sebuah sindikat yang menggunakan ChatGPT tidak hanya untuk menipu korban di seluruh dunia tetapi juga untuk mengelola cara kerja perusahaan yang terkait dengan perdagangan manusia. Kasus ini menawarkan gambaran bagaimana model bahasa besar digunakan kembali sebagai infrastruktur operasional untuk kejahatan terorganisir. Untuk pelaporan berkelanjutan mengenai penyalahgunaan dan batasan AI, ikuti perkembangan AI terbaru di AI Buzz Wire.

Bagaimana Jaringan Dioperasikan

Berdasarkan temuan OpenAI, perusahaan kriminal mengandalkan ChatGPT untuk menerjemahkan penjangkauan korban, menghasilkan antarmuka investasi palsu, dan menyusun pemberitahuan hukum palsu. Operator menargetkan individu melalui platform pengiriman pesan termasuk WhatsApp dan Telegram, melalui tiga tahap siklus penipuan.

Skema ini biasanya dimulai dengan tawaran romantis yang dirancang untuk membangun kepercayaan, kemudian beralih ke platform investasi mata uang kripto palsu, dan akhirnya meningkat menjadi ancaman denda penegakan hukum palsu ketika upaya sebelumnya gagal. Operator tidak membatasi diri pada satu vertikal penipuan saja – mereka menggabungkan pengaturan romantis dengan meja perdagangan emas palsu dan mengalihkan target ke saluran perjudian, sehingga memaksimalkan jumlah jalur menuju pembayaran.

Yang membedakan operasi ini adalah skala dan disiplin penggunaan AI-nya. Daripada menjalankan beberapa perintah yang hanya dilakukan sekali saja, sindikat ini mensistematisasikan model generatif untuk menghasilkan komunikasi yang meyakinkan dan terlokalisasi dalam volume tinggi dalam berbagai bahasa.

Dimensi Kerja Paksa

Temuan yang paling meresahkan bukan berasal dari penipuan yang dialami korban, melainkan dari aktivitas internal kelompok tersebut. Log cepat yang ditemukan selama penyelidikan mengungkapkan bahwa operator menggunakan ChatGPT untuk tugas administratif di dalam kompleks penipuan fisik yang terletak di dekat perbatasan Thailand-Kamboja.

Catatan tersebut mencakup penerjemahan komunikasi manajemen, pencatatan utang pekerja, pendokumentasian masa tinggal visa yang melebihi batas waktu, dan pelacakan denda disipliner. Beberapa entri merujuk pada penahanan paksa, pekerja yang melarikan diri, dan jaringan perdagangan manusia. Rincian ini selaras dengan laporan bertahun-tahun mengenai kompleks penipuan di Asia Tenggara, yang sering kali memikat pencari kerja dengan tawaran administratif palsu sebelum menyita paspor dan memaksa mereka melakukan pekerjaan kejahatan dunia maya di bawah ancaman kekerasan.

Dengan kata lain, model AI melakukan tugas ganda: dijadikan senjata melawan korban eksternal sekaligus berfungsi sebagai perangkat lunak manajemen untuk tenaga kerja yang terikat.

Tanggapan OpenAI

OpenAI mengatakan pihaknya mengidentifikasi dan memotong akun yang terkait dengan operasi tersebut, memblokir akses sindikat tersebut ke modelnya. Perusahaan mencirikan gangguan ini sebagai bagian dari upaya yang lebih luas untuk mendeteksi dan membongkar jaringan yang menyalahgunakan platformnya untuk melakukan kejahatan keuangan dan pelanggaran hak asasi manusia.

Kasus ini menggarisbawahi tantangan yang semakin besar bagi penyedia AI. Pelaku kejahatan tidak lagi memperlakukan model bahasa komersial hanya sebagai senjata eksternal – mereka menerapkannya sebagai perantara operasional, memasukkannya ke dalam mesin back-office perusahaan kriminal. Untuk mendeteksi pelecehan semacam itu, kita perlu melihat lebih dari sekadar petunjuk yang jelas-jelas ditujukan kepada korban.

Masalah Deteksi Baru

Analisis keamanan operasi menunjukkan bahwa pemfilteran kata kunci sederhana pada permintaan terkait penipuan tidak lagi memadai. Kasus penggunaan administratif – menerjemahkan memo, melacak utang, mencatat kehadiran – dianggap sebagai hal yang biasa jika dilakukan secara terpisah dan jauh lebih sulit untuk ditandai dibandingkan skrip penipuan yang terang-terangan.

Berdasarkan cakupan gangguan tersebut, mendeteksi penyalahgunaan seperti ini semakin memerlukan pertukaran intelijen lintas platform dan analisis perilaku atas perintah administratif, dimana operasi kriminal meninggalkan jejak operasional yang berbeda bahkan ketika permintaan individu terlihat tidak berbahaya. Perintah yang meminta model untuk "menerjemahkan pesan manajer ini" pada dasarnya tidak mencurigakan — namun ratusan perintah tersebut, yang berasal dari akun yang ditautkan ke senyawa yang diketahui, membentuk sebuah pola.

Gambaran Yang Lebih Besar

Operasi di Kamboja ini merupakan sinyal terbaru bahwa penyalahgunaan AI generatif telah meluas melampaui deepfake dan spam. Seiring dengan semakin matangnya teknologi, penyalahgunaan dengan nilai tertinggi mungkin paling sedikit terlihat: AI secara diam-diam menjalankan logistik bisnis terlarang, mulai dari penerjemahan korban hingga manajemen tenaga kerja.

Bagi OpenAI dan para pesaingnya, perubahan ini menimbulkan pertanyaan sulit tentang sejauh mana tanggung jawab pemantauan harus diperluas. Penyedia layanan dapat menangguhkan akun, namun kondisi yang mendasarinya, jaringan perdagangan manusia, dan kondisi kerja paksa tetap ada. Mengganggu lapisan digital memang membantu, namun tidak menghilangkan infrastruktur fisik yang menopang operasi ini.

Pengungkapan ini juga dilakukan di tengah momen peraturan yang lebih luas. Dengan berlakunya peraturan transparansi baru dan meningkatnya tekanan pada perusahaan AI untuk memperhitungkan bagaimana model mereka digunakan, kasus seperti ini kemungkinan besar akan menentukan prioritas penegakan hukum dan upaya perlindungan teknis yang akan dibangun oleh penyedia sistem di masa depan.

Ini juga menyoroti asimetri yang tidak nyaman. Kemampuan bahasa yang sama yang menjadikan ChatGPT berharga bagi bisnis yang sah — terjemahan, penyusunan, ringkasan — itulah yang membuatnya menarik bagi perusahaan kriminal yang beroperasi melintasi batas negara dan bahasa. Sebuah model yang dapat membantu bisnis kecil menjangkau pelanggan di banyak negara juga dapat dengan mudah membantu sindikat penipuan menargetkan korban di setiap benua. Perbedaannya bukan terletak pada teknologinya namun pada infrastruktur yang mendukungnya, dan di sinilah penyedia layanan memiliki visibilitas paling rendah.

Apa yang Terjadi Selanjutnya

Pengungkapan OpenAI penting karena transparansinya dan gangguan itu sendiri. Dengan mempublikasikan rincian bagaimana jaringan tersebut beroperasi, perusahaan ini menawarkan template yang dapat digunakan oleh penyedia layanan lain dan lembaga penegak hukum untuk mendeteksi penyalahgunaan serupa. Namun kasus ini juga memperjelas bahwa penangguhan akun, betapapun diperlukannya, merupakan tindakan reaktif terhadap musuh yang dapat memunculkan identitas baru dan merelokasi operasi dengan relatif mudah.

Bagi tim keamanan dan penyedia AI, kesimpulannya adalah bahwa upaya untuk melawan penyalahgunaan ini memerlukan investasi berkelanjutan dalam deteksi pola, pembagian data antar perusahaan, dan kerja sama dengan pihak berwenang yang dapat mengambil tindakan terhadap senyawa fisik itu sendiri. Lapisan digital dan lapisan fisik, seperti yang ditunjukkan dalam kasus ini, tidak lagi dapat dipisahkan.

Tetap Terdepan dalam AI

Untuk informasi lebih lanjut mengenai risiko keamanan, dilema etika, dan perdebatan kebijakan seputar kecerdasan buatan, ikuti terus berita AI terkini dari AI Buzz Wire.

Baca berita AI selengkapnya →