Sebuah proyek sumber terbuka baru bertaruh bahwa cara tercepat untuk menemukan memori adalah dengan mendeskripsikannya — dan pencarian tersebut tidak boleh meninggalkan laptop Anda. SCM, kependekan dari Screen Memories, adalah aplikasi macOS gratis yang menerapkan model AI lokal ke setiap foto dan setiap frame video dalam sebuah folder, sehingga memungkinkan pengguna mencari perpustakaan mereka dalam bahasa yang sederhana. Proyek ini muncul di GitHub minggu ini dan dengan cepat naik ke halaman depan Hacker News, dan memperoleh lebih dari 85 poin dalam beberapa jam.
Pitchnya sederhana di permukaan: arahkan SCM ke folder mana pun, dan ini akan membuat indeks yang dapat dicari tentang apa yang sebenarnya ada di media Anda — bukan hanya nama file, tetapi konten visual setiap gambar dan setiap adegan di dalam setiap video. Apa yang membedakannya dari berbagai alat foto AI adalah semuanya berjalan di Mac itu sendiri. Tidak ada akun, tidak ada unggahan cloud, dan tidak ada telemetri. Setelah model mengunduh bobotnya saat pertama kali dijalankan, aplikasi akan bekerja secara offline. For more context on this story, see our ongoing breaking AI news.
Lima Cara Mencari Media Seumur Hidup
SCM mengatur pencarian ke dalam lima mode berbeda, masing-masing didukung oleh model berbeda yang berjalan secara lokal.
Mode File melakukan pencarian semantik seluruh file di seluruh foto dan video, memberi peringkat hasil berdasarkan makna dengan peningkatan dari nama file dan frasa. Adegan lebih mendalam: aplikasi mengelompokkan video ke dalam adegan tersendiri dan menyematkannya secara terpisah, sehingga kueri akan membawa Anda pada pengambilan gambar yang tepat, dengan lompatan langsung ke kode waktunya, bukan stempel waktu yang terkubur dalam nama file.
Dua mode fokus teks menangani kata-kata di dalam media. Mode OCR, dibangun di atas mesin Tesseract, membaca teks yang terlihat jelas dalam gambar dan bingkai video dan mencocokkannya secara harfiah, dengan bahasa Inggris ditambah 35 paket bahasa tambahan yang dapat diaktifkan. Mode Dialog menjalankan pengenalan ucapan Bisikan melalui video dan mengindeks kata-kata yang diucapkan dengan tepat, dengan tingkat ketepatan pencocokan berjenjang untuk mencari baris tertentu.
Terakhir, mode opt-in LLMs mengubah materi yang diekstraksi — transkrip dialog, teks OCR, dan nama file — menjadi konteks obrolan lokal. Pengguna dapat mengajukan pertanyaan tentang perpustakaan mereka sendiri, dan aplikasi mengembalikan jawaban dengan kutipan yang menunjuk kembali ke file sumber, semua dihasilkan oleh model yang berjalan pada mesin yang sama.
Cara Kerjanya di Balik Terpal
Secara teknis, SCM adalah aplikasi Electron yang ditulis dalam JavaScript, menggunakan toolkit Bun sebagai pengelola paket dan runtimenya. Pekerjaan berat dilakukan oleh model trafo yang dijalankan langsung di aplikasi — model vision default adalah varian CLIP yang bobotnya, sekitar 435 megabita, diunduh sekali pada penggunaan pertama.
Indeks mempertahankan dirinya sendiri. Folder yang diawasi secara otomatis mengimpor media baru saat media baru tiba, hashing konten menghapus duplikat file yang baru saja diganti namanya atau dipindahkan, dan beralih ke model lain akan menyematkan kembali perpustakaan di latar belakang tanpa memblokir pencarian. Pengembang mencatat bahwa fitur bilah menu dan baki khusus untuk macOS, tempat aplikasi dikemas untuk distribusi.
Model privasi adalah nilai jualnya. Dokumentasi proyek ini eksplisit: media tidak pernah meninggalkan mesin, inferensi berjalan secara lokal melalui runtime transformator, dan setelah pengunduhan bobot awal, semuanya bekerja secara offline. Bagi pengguna dengan arsip sensitif — citra medis, rekaman hukum, video pribadi — pilihan arsitektur adalah fiturnya.
Dibuat untuk Arsip Pribadi
Antarmukanya mencerminkan filosofi penyesuaian yang sama. Kueri apa pun dapat disimpan sebagai tab yang dapat digunakan kembali, sehingga penelusuran yang memerlukan waktu beberapa saat hingga menjadi frasa menjadi tampilan permanen di perpustakaan. Aplikasi ini juga hadir dengan tab Screenshot dan Email yang dapat diubah, mengakui bahwa Mac modern mengumpulkan tangkapan layar dan lampiran dengan kecepatan yang dengan cepat melampaui pencarian sistem operasi itu sendiri.
Teknik yang mendasarinya adalah mesin pencarian semantik yang sekarang menjadi standar: model visi mengubah setiap gambar dan adegan video menjadi penyematan numerik, dan kueri disematkan dengan cara yang sama sehingga pencocokan terjadi berdasarkan makna, bukan kata kunci yang tumpang tindih. Yang menonjol di sini bukanlah tekniknya, melainkan kemasannya — jalur yang sama yang dijalankan oleh layanan foto cloud di kumpulan server dikompresi menjadi aplikasi Electron yang dapat dipasang dan dijalankan oleh non-pengembang tanpa pengawasan pada folder yang mereka pilih.
Bagian dari Pergeseran Besar Menuju AI Lokal
SCM hadir saat menjalankan model AI yang mumpuni pada perangkat keras konsumen telah berkembang dari hal baru menjadi sesuai ekspektasi. Apple terus mendorong pencarian semantik ke dalam aplikasi Foto miliknya, sementara model ucapan, visi, dan teks sumber terbuka telah menyusut ke ukuran yang dapat berjalan dengan nyaman di laptop. Yang masih langka bukanlah model dasarnya, melainkan lapisan integrasinya — perangkat lunak yang menghubungkan model-model tersebut menjadi sesuatu yang benar-benar dapat digunakan oleh non-insinyur pada file mereka sendiri.
Itulah ceruk yang ditempati SCM, dan penerimaannya menunjukkan bahwa rasa gatal itu nyata. Repositori ini mengumpulkan 160 bintang dan delapan fork dalam waktu sekitar satu hari, dengan komentator Hacker News memfokuskan pertanyaan mereka pada ukuran model, kecepatan pengindeksan, dan ketersediaan Windows — saat ini jawaban untuk pertanyaan terakhir adalah tidak, karena saat ini proyek tersebut hanya untuk macOS.
Proyek ini dirilis di bawah lisensi MIT, yang mengizinkan penggunaan dan modifikasi komersial. Bagi siapa pun yang memiliki arsip foto dan rekaman layar yang besar dan tidak teratur, dan tidak suka mengunggahnya di mana pun, ini adalah salah satu demonstrasi yang lebih menarik bahwa mesin pencari media lokal bukan lagi sebuah demo penelitian — ini adalah instalasi sore hari.
---
Stay Ahead of AIGet the latest AI news, analysis, and breakthroughs — all in one place.
Read more AI news →
