Peneliti Berhasil Melatih AI Mencuri Data, Hanya dengan Mendengar Suara Keyboard Ditekan

Uli Febriarni
Selasa 08 Agustus 2023, 22:02 WIB
ilustrasi mengetik dengan keyboard komputer (Sumber : freepik)

ilustrasi mengetik dengan keyboard komputer (Sumber : freepik)

Tim peneliti dari sebuah universitas di Inggris, telah melatih model pembelajaran mendalam memanfaatkan kecerdasan buatan (Artificial Intelligence/AI) untuk dapat mencuri data; dengan cara memahami suara rekaman tombol keyboard yang direkam menggunakan mikrofon.

Tindakan itu menghasilkan akurasi 95%. Dan ketika melatih algoritma klasifikasi suara dilakukan menggunakan Zoom, akurasi prediksi turun menjadi 93%.

Serangan semacam itudiketahui sangat memengaruhi keamanan data target, dan dapat membocorkan kata sandi, diskusi, pesan, atau informasi sensitif orang lain ke pihak ketiga yang berbahaya. 

Selain itu, serangan akustik menjadi jauh lebih sederhana, mengingat banyaknya perangkat bantalan mikrofon yang dapat menghasilkan tangkapan audio berkualitas tinggi.

"Serangan berbasis suara dapat dilakukan dan jauh lebih berbahaya daripada yang diperkirakan sebelumnya," ungkap laman Bleeping Computer yang dikutip Senin (8/8/2023).

Langkah pertama serangan, dimulai dengan merekam suara tombol yang ditekan pada keyboard target; data tersebut diperlukan untuk melatih algoritma prediksi. Ini dapat dilakukan dengan adanya mikrofon terdekat atau ponsel target, yang mungkin telah terinfeksi malware yang memiliki akses ke mikrofon target.

Baca Juga: Spotify Memberikan Fitur DJ Bagi Pengguna di Lebih Banyak Negara

Baca Juga: Nokia Merilis Ulang HP Jadul Mereka, Nokia 130 dan 150

Sebagai alternatif latihan, penekanan tombol direkam melalui panggilan Zoom, di mana peserta rapat nakal membuat korelasi antara pesan yang diketik oleh target dan rekaman suaranya.

Para peneliti selanjutnya mengumpulkan data pelatihan, dengan menekan 36 tombol pada MacBook Pro modern masing-masing 25 kali dan merekam suara yang dihasilkan oleh setiap penekanan.

Kemudian, suara rekaman tadi menghasilkan bentuk gelombang dan spektogram. Itu memvisualisasikan perbedaan yang dapat diidentifikasi untuk setiap tombol.

"Dari sana dilakukan langkah pemrosesan data khusus, untuk menambah sinyal yang dapat digunakan dalam mengidentifikasi penekanan tombol," ungkap laman itu. 

Gambar spektogram digunakan untuk melatih 'CoAtNet,' yang merupakan pengklasifikasi gambar, sedangkan prosesnya memerlukan beberapa eksperimen dengan parameter zaman, kecepatan pembelajaran, dan pemisahan data hingga hasil akurasi prediksi terbaik dapat dicapai.

Dalam eksperimennya, para peneliti menggunakan laptop yang sama, yang keyboardnya telah digunakan di semua laptop Apple selama dua tahun terakhir, iPhone 13 mini berjarak 17 cm dari target, dan Zoom.

Pengklasifikasi CoANet mencapai akurasi 95% dari rekaman smartphone dan 93% dari yang ditangkap melalui Zoom. Skype menghasilkan akurasi 91,7% yang lebih rendah tetapi masih dapat digunakan.

Untuk pengguna yang terlalu khawatir tentang serangan akustik ini, peneliti menyarankan agar pengguna mengubah gaya mengetik atau menggunakan kata sandi acak.

Baca Juga: Zoom Hadirkan Fitur Clips: Bisa Rekam dan Berbagi Video Klip Tanpa Perlu Ikut Rapat

Baca Juga: Peneliti Kembangkan Teknologi AI untuk Pemindaian Kanker Payudara

Tindakan pertahanan potensial lainnya, yakni menggunakan perangkat lunak untuk mereproduksi suara penekanan tombol, atau filter audio penekanan tombol berbasis perangkat lunak.

"Ingat, model serangan terbukti sangat efektif bahkan terhadap keyboard yang sangat senyap. Jadi, menambahkan peredam suara pada keyboard mekanis atau beralih ke keyboard berbasis membran sepertinya tidak akan membantu," demikian ditekankan oleh makalah tersebut. 

Serangan akustik (yang menggunakan pengawasan sonik untuk menangkap informasi sensitif) bukanlah fenomena baru, ungkap laman Gizmodo. Tetapi integrasi kemampuan AI yang menjanjikan, dapat membuatnya jauh lebih efektif dalam mencuri data.

Yang dianggap sebagai ancaman besar, menurut sudut pandang peneliti adalah: jika seorang peretas dapat menggunakan bentuk penyadapan ini, untuk mendapatkan informasi yang terkait dengan kata sandi dan kredensial online pengguna. 

Pada akhirnya jika memungkinkan, pengguna bisa menggunakan otentikasi biometrik dan menggunakan pengelola kata sandi. Selain itu, hindari memasukkan informasi sensitif secara manual. 

Follow Berita Techverse.Asia di Google News
Berita Terkait Berita Terkini
Lifestyle28 Agustus 2026, 15:17 WIB

Pertamina Eco RunFest 2026: Hadirkan 7 Inisiatif Keberlanjutan Lingkungan

Ajang yang memasuki tahun ke-13 pelaksanaannya ini menargetkan 14 ribu pelari dan 10 ribu pengunjung.
Pertamina Eco Run Fest 2026. (Sumber: istimewa)
Techno28 Agustus 2026, 15:16 WIB

Ditenagai Ryzen Z2 Extreme, ASUS ROG Xbox Ally 20 Bisa Dipesan Sekarang

Mennyambut hari jadi ke-20, ASUS ROG umumkan Xbox Ally X20 dengan performa AMD Ryzen AI Z2 Extreme dan dukungan kacamata Xreal R1.
ROG XBOX Ally X20. (Sumber: ASUS)
Startup28 Agustus 2026, 13:26 WIB

Asosiasi Blockchain Indonesia Gandeng Privy Perkuat Kepercayaan Digital

ABI bekerja sama dengan Privy untuk meningkatkan infrastruktur digital trust dan keamanan verifikasi identitas di industri blockchain Indonesia.
Asosiasi Blockchain Indonesia x Privy. (Sumber: ist)
Techno28 Agustus 2026, 13:23 WIB

SailPoint Hilangkan Blind Spot dengan Perlindungan Terpadu Identitas Manusia, non-human, dan AI agent

Solusi keamanan identitas yang dirancang untuk melindungi, mengelola, dan mendukung konvergensi tenaga kerja masa depan
SailPoint Identity Security. (Sumber: null)
Travel28 Agustus 2026, 11:58 WIB

Dragon Ball Z Bakal Punya Taman Hiburan Raksasa di Prancis, Gokunya Bisa Jadi Nyata!

Intip lokasi, konsep, dan detail lengkapnya di sini!
Taman hiburan bertemakan Dragon Ball Z. (Sumber: null)
Techno28 Agustus 2026, 11:57 WIB

Sony Meluncurkan Xperia 10 VIII dengan Fokus pada Peningkatan Kemudahan Penggunaan Sehari-hari

Handset ini menawarkan sedikit peningkatan dengan harga yang jauh lebih mahal.
Sony Xperia 10 VIII. (Sumber: Sony)
Automotive28 Agustus 2026, 09:40 WIB

Pendiri VeilSide Hironao Yokomaku akan Meriahkan Gelaran IMX 2026

Jangan lewatkan kesempatan langka bertemu sang legenda tuning dunia!
Pendiri VeilSide Hironao Yokomaku. (Sumber: istimewa)
Techno28 Agustus 2026, 09:40 WIB

Spesifikasi dan Harga Garmin Fenix 9 Series, Daya Tahannya Bisa Capai 57 Hari

Model Pro yang tangguh namun elegan ini menghadirkan casing jam tangan titanium pertama dan layar AMOLED terbesar pada seri Fenix.
Garmin Fenix 9 dan Fenix 9 Pro. (Sumber: Garmin)
Techno27 Agustus 2026, 14:49 WIB

Shokz OpenFit Air 2: Earbud Open-Ear Terringan dengan Hook yang Hampir Tak Terasa

Perangkat ini dirancang untuk kenyamanan ekstra tanpa menutup saluran telinga.
Shokz OpenFit Air 2. (Sumber: Shokz)
Techno27 Agustus 2026, 14:47 WIB

ASUS Hadirkan 2 Mouse Gaming yang Dapat Diskutomisasi

Mouse ROG Gladius IV Ace dan ROG Spatha X memadukan kontrol presisi dengan beragam opsi kustomisasi mendalam.
ROG Gladius IV Ace. (Sumber: ASUS)