¡Ve un paso más allá en el campo de la IA! Meta presenta AudioCraft, una nueva herramienta generativa de IA para audio y música

Autor: Cao Zexi

El miércoles 2 de agosto, Meta lanzó una nueva herramienta de inteligencia artificial generativa para audio y música llamada AudioCraft, que ayuda a los usuarios a crear música y audio en función de indicaciones de texto.

Esta herramienta de IA combina los tres modelos o tecnologías de AudioGen, EnCodec y MusicGen en uno, y puede generar audio y música de alta calidad, casi creados por humanos, a partir de contenido de texto.

Entre ellos, MusicGen ha recibido capacitación musical de propiedad de Meta y especialmente autorizada, y puede generar música a partir de indicaciones de texto; AudioGen ha recibido capacitación pública sobre efectos de sonido y puede generar audio a partir de indicaciones de texto, como simular ladridos de perros o pasos; junto con EnCodec códec Con una versión mejorada del reproductor, los usuarios pueden generar música de mayor calidad de manera más eficiente.

Según Meta, la línea de modelos AudioCraft produce audio de alta calidad con consistencia a largo plazo y es fácil de usar:

Con AudioCraft, simplificamos el diseño general de los modelos generativos de audio en comparación con el trabajo anterior en el campo, brindando a las personas una forma completa de usar los modelos existentes que Meta ha desarrollado durante los últimos años, al mismo tiempo que les permite superar los límites y desarrollar su modelos propios.

Meta señala que AudioCraft es adecuado para la compresión y generación de archivos de música, sonido y audio. Debido a que es tan fácil de construir y reutilizar, alguien que quiera construir un mejor generador de sonido, algoritmo de compresión o generador de música puede hacerlo todo en la misma base de código y construir sobre lo que otros han hecho.

Metanombre:

Tener una base sólida de código abierto fomentará la innovación y complementará la forma en que hacemos y escuchamos audio y música en el futuro. Con más control, creemos que MusicGen puede convertirse en un nuevo tipo de instrumento, tal como lo hicieron los sintetizadores cuando aparecieron por primera vez.

Todos los usuarios de Facebook pueden instalar AudioCraft, y Meta invita específicamente a investigadores y profesionales de la música a usar la herramienta:

Vemos la colección de modelos de AudioCraft como una herramienta inspiradora para músicos y diseñadores de sonido, que ayuda a las personas a intercambiar ideas rápidamente e iterar sus composiciones de nuevas maneras. No podemos esperar a ver lo que la gente crea con Audiocraft.

Meta lanzó su primera versión de EnCodec en octubre de 2022 como una herramienta de inteligencia artificial para comprimir y descomprimir archivos de audio sin pérdida de calidad de sonido, lo que permite a los usuarios compartir documentos de audio de forma rápida y sencilla. Su propósito es mejorar la calidad de todos los archivos de audio, no solo los archivos de música. En ese momento, estaba específicamente dirigido a mejorar la calidad de las llamadas de voz y los mensajes de voz, especialmente en situaciones adversas como conexiones de red deficientes. Desde entonces, el modelo ha evolucionado y ahora se presenta con AudioGen y SoundGen como una herramienta para ayudar a que los sonidos y la música sintetizados parezcan más realistas cuando se reproducen realmente.

Si bien algunos artistas han adoptado herramientas generadas por IA para una mayor creatividad, otros han criticado la infracción de derechos de autor.