Inicio de clonación de voz oncelabs introducido una nueva herramienta para que los usuarios generen efectos de sonido a través de indicaciones hoy. la empresa primero anunció el proyecto en febrero.
La herramienta, disponible para todos los usuarios a partir de hoy, les permite escribir mensajes como “olas rompiendo”, “metal chocando”, “pájaros cantando” y “motor de coche de carreras” para generar fragmentos de sonidos.
La herramienta de efectos de sonido también puede generar clips musicales instrumentales de hasta 22 segundos con indicaciones como bucles de guitarra, solos de saxofón de jazz y bucles de música techno.
Los usuarios gratuitos obtienen una generación de 10.000 caracteres por mes; una generación de bytes de sonido requiere alrededor de 150 caracteres por solicitud. Básicamente, los usuarios de la versión gratuita pueden generar casi 60 efectos de sonido por mes. También tienen que atribuir el sonido a “elevenlabs.io”en el título al publicar cualquier contenido que contenga el clip de sonido.
ElevenLabs dijo que utilizó la biblioteca de audio de Shutterstock que contiene pistas con licencia como herramienta para entrenar su modelo. La compañía agregó que los usuarios que probaron la herramienta durante la fase de prueba alfa incluyeron desarrolladores de videojuegos, productores de películas, creadores de contenido de redes sociales y especialistas en marketing.
La startup señaló que la herramienta no permite la generación de sonido a través de indicaciones que violen sus Política de usos y contenidos prohibidosque incluye temas como autolesiones, amenazas a la seguridad infantil y fraude.
Si bien solo hay unas pocas empresas y startups que trabajan en la generación de sonido impulsada por IA, ElevenLabs podría encontrar el espacio de generación de música abarrotado. Harmonai, respaldada por Stability AI, ha lanzado Dance Diffusion; Google ha trabajado en MusicLM; OpenAI tiene Jukebox; y Meta tiene su modelo AudioCraft. TikTok y Adobe también han experimentado con sus propias herramientas de creación musical basadas en inteligencia artificial generativa.
¡Estamos lanzando un boletín informativo sobre IA! Inscribirse aquí para comenzar a recibirlo en sus bandejas de entrada el 5 de junio.