Meta meningkatkan taruhan dengan AudioCraft, alat AI generatif baru untuk audio dan musik

Sumber gambar: Dihasilkan oleh AI Tak Terbatas

Sumber: Wall Street News

Pengarang: Cao Zexi

Pada hari Rabu, 2 Agustus, Meta meluncurkan alat AI generatif baru untuk audio dan musik yang disebut AudioCraft, yang membantu pengguna membuat musik dan audio berdasarkan permintaan teks.

Alat AI ini menggabungkan tiga model atau teknologi AudioGen, EnCodec, dan MusicGen menjadi satu, dan dapat menghasilkan audio dan musik berkualitas tinggi yang hampir dibuat oleh manusia dari konten teks.

Di antara mereka, MusicGen telah menerima pelatihan musik yang dimiliki Meta dan diberi wewenang khusus, dan dapat menghasilkan musik dari perintah teks; AudioGen telah menerima pelatihan efek suara publik, dan dapat menghasilkan audio dari perintah teks, seperti mensimulasikan gonggongan anjing atau langkah kaki; ditambah dengan EnCodec codec Dengan versi pemutar yang ditingkatkan, pengguna dapat menghasilkan musik berkualitas lebih tinggi dengan lebih efisien.

Menurut Meta, jajaran model AudioCraft menghasilkan audio berkualitas tinggi dengan konsistensi jangka panjang dan mudah digunakan:

Dengan AudioCraft, kami menyederhanakan keseluruhan desain model audio generatif dibandingkan dengan pekerjaan sebelumnya di lapangan - memberi orang cara lengkap untuk menggunakan model yang sudah ada yang telah dikembangkan Meta selama beberapa tahun terakhir, sekaligus memungkinkan mereka untuk mendorong batas dan mengembangkan kemampuan Anda. model sendiri.

Meta menunjukkan bahwa AudioCraft cocok untuk kompresi dan pembuatan file musik, suara, dan audio. Karena sangat mudah untuk membangun dan menggunakan kembali, seseorang yang ingin membangun generator suara, algoritme kompresi, atau generator musik yang lebih baik dapat melakukan semuanya dalam basis kode yang sama dan membangun apa yang telah dilakukan orang lain.

Nama meta:

Memiliki fondasi open source yang solid akan mendorong inovasi dan melengkapi cara kami membuat dan mendengarkan audio dan musik di masa mendatang. Dengan kontrol yang lebih besar, menurut kami MusicGen bisa menjadi jenis instrumen baru - seperti yang dilakukan synthesizer saat pertama kali dirilis.

Semua pengguna Facebook dapat menginstal AudioCraft, dan Meta secara khusus mengundang peneliti dan profesional musik untuk menggunakan alat ini:

Kami melihat koleksi model AudioCraft sebagai alat yang menginspirasi bagi musisi dan perancang suara, membantu orang dengan cepat melakukan brainstorming dan mengulangi komposisi mereka dengan cara baru. Kami tidak sabar untuk melihat apa yang orang buat dengan Audiocraft.

Meta meluncurkan versi pertamanya EnCodec pada Oktober 2022 sebagai alat AI untuk mengompresi dan mendekompresi file audio tanpa kehilangan kualitas suara, memungkinkan pengguna berbagi dokumen audio dengan cepat dan mudah. Tujuannya adalah untuk meningkatkan kualitas semua file audio, bukan hanya file musik. Pada saat itu, secara khusus ditujukan untuk meningkatkan kualitas panggilan suara dan pesan suara, terutama dalam situasi buruk seperti koneksi jaringan yang buruk. Model tersebut telah berevolusi dan sekarang diperkenalkan dengan AudioGen dan SoundGen sebagai alat untuk membantu suara dan musik yang disintesis tampak lebih realistis saat dimainkan.

Sementara beberapa artis telah menggunakan alat yang dihasilkan AI untuk lebih banyak kreativitas, yang lain mengkritik pelanggaran hak cipta.