Mau Mengubah Teks Menjadi Musik? Pakai Project Music GenAI Control dari Adobe

Setelah mengumumkan bahwa Adobe Express-nya mendukung Assistant Creative TikTok, kini Adobe mengungkap alat revolusioner baru bernama Project Music GenAI Control.

Project Music GenAI Control adalah sebuah sistem yang dapat mengubah teks menjadi alunan musik dengan dukungan kecerdasan buatan (AI).

Sistem AI pada alat ini, memungkinkan pengguna untuk mengeditnya sesuai kebutuhan. Semua dilakukan langsung dalam antarmuka yang sama.

Ilmuwan Riset Senior di Adobe Research, Nicholas Bryan, menjelaskan bahwa dengan Project Music GenAI Control, AI generatif menjadi rekan komposer.

"Ini membantu orang membuat musik untuk proyek mereka, baik itu penyiar, pemilik siniar (podcast), atau siapa pun yang membutuhkan audio dengan suasana hati, nada, dan durasi yang tepat," kata Bryan, yang merupakan salah satu pencipta teknologi Project Music GenAI Control ini, dikutip dari keterangan perusahaan, Senin (4/3/2024).

Pengguna memasukkan perintah teks, seperti 'powerful rock,' 'happy dance,' atau 'sad jazz' untuk menghasilkan musik.

Namun, Project Music GenAI Control tidak hanya sebatas menghasilkan musik. Dengan antarmuka pengguna yang sederhana, pengguna dapat mengubah audio yang dihasilkan berdasarkan melodi referensi; mengatur tempo, struktur, dan pola pengulangan (repetisi).

Setelah alat menghasilkan musik, pengeditan terperinci diintegrasikan langsung ke dalam alur kerja. Pengguna juga bisa memilih kapan akan menambah dan mengurangi intensitas audio, memperpanjang panjang klip, mencampur ulang satu bagian, atau menghasilkan loop yang dapat diulang dengan mulus.

"Salah satu hal menarik tentang alat baru ini adalah bahwa alat ini tidak hanya menghasilkan audio. Alat ini membawanya ke level Photoshop, dengan memberikan kontrol mendalam yang sama kepada materi iklan untuk membentuk, mengubah, dan mengedit audionya," jelas Bryan.

Dalam sebuah analogi, menurut Bryan hal itu memberikan tingkat kontrol seperti bekerja dengan piksel di Photoshop, tetapi diterapkan pada dunia suara.

Jika pengguna memiliki potongan audio yang sudah ada, mereka dapat mengubahnya berdasarkan melodi referensi, yang mana ini dapat membuka lebih banyak kemungkinan berkreasi.

Berbeda dengan alat musik AI lainnya, Project Music GenAI Control memberdayakan pengguna dengan kemampuan pengeditan yang tepat. Alur kerja yang mulus menghilangkan kebutuhan untuk melompat-lompat antara aplikasi yang berbeda, menyederhanakan proses kreatif.

Project Music GenAI Control masih dalam tahap eksperimen. Meskipun antarmuka yang ramah pengguna masih dalam pengembangan, pandangan ini menunjukkan: di masa depan akan ada alat yang kuat dan intuitif yang membantu penciptaan audio.

Adobe memaparkan, mereka memiliki warisan inovasi AI selama satu dekade. Firefly, salah satu rangkaian model AI generatif Adobe, telah menjadi model pembuatan gambar AI paling populer, yang dirancang untuk penggunaan komersial yang aman, dalam waktu singkat, secara global.

Firefly telah digunakan untuk menghasilkan lebih dari 6 miliar gambar hingga saat ini. Adobe berkomitmen, untuk memastikan teknologi yang mereka luncurkan dikembangkan sejalan dengan prinsip etika AI yang Adobe yakini, yaitu akuntabilitas, tanggung jawab, dan transparansi.

"Semua konten yang dihasilkan dengan Firefly secara otomatis menyertakan Content Credentials – yang merupakan 'label nutrisi' untuk konten digital, yang tetap terkait dengan konten di mana pun konten tersebut digunakan, dipublikasikan, atau disimpan," kata Bryan.

Project Music GenAI Control dikembangkan bekerja sama dengan rekan-rekan di University of California, San Diego, termasuk Zachary Novack, Julian McAuley, dan Taylor Berg-Kirkpatrick, serta rekan-rekan di School of Computer Science, Carnegie Mellon University, termasuk Shih-Lun Wu, Chris Donahue, dan Shinji Watanabe.