Seth ForsgrenCofundador y CEO de Riffusion, lidera el desarrollo de una herramienta de generación musical con IA que crea pistas de audio a partir de indicaciones de texto. Riffusion permite a los usuarios experimentar con diferentes estilos y sonidos musicales en tiempo actual, haciendo que la creación de música sea más accesible. Diseñada tanto para la creatividad como para la facilidad de uso, la plataforma permite a cualquier persona explorar la música generada por la IA sin requerir experiencia musical formal.
Riffusion es el mejor generador de música AI que he probado personalmente, y es una herramienta que recomendaría para los usuarios interesados en la música generada por IA.
¿Puedes llevarnos de regreso a los primeros días de riffusion? ¿Cuál fue la chispa inicial que te llevó a construir una herramienta de generación de música AI?
Riffusion comenzó como un proyecto de pasatiempo whole entre dos músicos de toda la vida. Mi cofundador, Hayk, y yo hemos estado tocando en bandas novice juntas durante más de una década, y siempre nos ha fascinado el acto creativo. Una tarde estábamos en mi patio trasero escribiendo una canción, y en la búsqueda de inspiración comenzamos a tocar con los primeros modelos de IA que podían generar imágenes de la nada. Pero lo que realmente queríamos period una herramienta que pudiera hacer música con nosotros, una IA con la que podríamos colaborar para conjurar nuevas melodías y sonidos que nadie había escuchado nunca. No había nada como esto en ese momento, así que tratamos de construirlo para nosotros mismos más que nadie.
¿En qué momento te diste cuenta de que tenía el potencial de convertirse en una empresa completa?
El punto de inflexión llegó cuando compartimos nuestro proyecto de pasatiempo con algunos amigos, y de la nada se volvió loco. No fueron solo tecnólogos o entusiastas de la IA interesados: músicos profesionales, productores y millones de amantes de la música cotidianos se involucraban de manera que nunca podríamos haber anticipado. ¡Algunos de nuestros artistas favoritos en el mundo comenzaron a llegar con muestras que habían creado con Riffusion!
El proyecto también inspiró a los principales laboratorios de investigación en Google, Bytedance y otros para que hicieran sus propios esfuerzos musicales de IA basados en nuestro trabajo, y estaba claro que esto no period solo un experimento, fue la base de algo mucho más grande. Como empresa, ahora tenemos la oportunidad de llevar este nuevo instrumento a las personas creativas en todas partes.
¿Cuáles fueron los mayores desafíos técnicos y comerciales que enfrentó al hacer la transición de riffusion de un experimento a un producto comercial?
En el lado técnico, hemos recorrido un largo camino. Nuestros primeros modelos generaron fragmentos granulados de cinco segundos de música de baja fidelidad, y ahora podemos generar canciones de alta calidad y de alta calidad con gran capacidad de management y expresividad. Esto ha tomado importantes avances en la arquitectura modelo y repensando constantemente las cosas desde cero. Es un crédito para los increíbles investigadores de nuestro equipo que hemos llegado tan lejos, y sabemos que esto sigue siendo solo el comienzo de lo que es posible con la tecnología.
En el lado comercial, tuvimos que pensar profundamente sobre dónde encaja Riffusion dentro de la industria de la música. La música de IA sigue siendo nueva, y aunque estamos viendo una adopción increíble de creadores y profesionales aficionados por igual, hay una conversación continua sobre cómo la IA y la creatividad humana pueden coexistir. Nuestro enfoque siempre ha sido empoderar a los músicos, no reemplazarlos, dando a las personas nuevas herramientas para explorar su creatividad de una manera que nunca pensaron posible.
Riffusion originalmente se centró en generar riffs musicales cortos, pero ahora puede componer piezas de longitud completa. ¿Qué avances le permitieron extender sus capacidades?
Al entrenar nuestros propios modelos de base desde cero, hemos podido mejorar la calidad, la expresividad y la capacidad de management de la producción de Riffusion. Un gran avance llegó con el desarrollo y el lanzamiento de nuestro último modelo, Fuzz. En las pruebas ciegas, Fuzz supera constantemente a los modelos competidores cuando se les da las mismas letras y indicaciones de sonido, y el modelo está diseñado de manera única para ayudar a los usuarios a encontrar su sonido private: cuanto más tiempo pasa un usuario usando riffusion, más fuzz aprende su gusto particular person y Cuanto más personalizada se vuelve la música generada. Vemos esto como un gran diferenciador para la riffusion.
Muchos modelos de música de IA luchan para mantener la profundidad emocional en la música. ¿Cómo captura la riffusion los matices de diferentes estados de ánimo y estilos?
La música es profundamente private y emocional, y queremos que la riffusion genere música que resuene a nivel humano. Como cube nuestro asesor Alex Pall: “Esto no se trata de hacer sonido; Se trata de hacer que la gente se sienta algo especial a través del sonido “.
Al igual que un violín bien hecho puede empoderar a un artista para que se exprese por completo, entrenamos a nuestros modelos para que sean un instrumento guiado por la creatividad del usuario a cada paso. Ya sea que ingrese una melodía, un mensaje de texto o incluso una imagen, la riffusion se adapta a su intención, dando forma a la salida para reflejar diferentes estados de ánimo, dinámicas y opciones estilísticas. Estamos enfocados en los usuarios que regresan día tras día para crear música realmente increíble en la plataforma.
A medida que la música generada por AI continúa evolucionando, ¿cómo lo ves complementando en lugar de reemplazar la creatividad humana?
AI es un instrumento para músicos, no un reemplazo. A lo largo de la historia, las nuevas herramientas musicales, desde sintetizadores hasta estaciones de trabajo de audio digital, han ampliado lo que los artistas pueden crear sin disminuir el arte humano. Riffusion sigue esa misma filosofía. Vemos a Riffusion como un instrumento que alienta a los músicos a experimentar, colaborar y probar nuevas formas de narración de cuentos. Los artistas aún dan vida al alma y la intención, y la IA ayuda a dar vida a esas concepts. Estamos encantados de que tantos músicos y entusiastas profesionales adopten esta herramienta todos los días y encuentren alegría en el proceso creativo.
¿Cómo han respondido los músicos y los productores a las capacidades de Riffusion? ¿Has visto algún uso inesperado o innovador de la herramienta?
La respuesta ha sido bastante increíble. Hubo algunos que comenzaron a usar estas herramientas hace años, pero cada semana ahora el número de músicos y productores profesionales que están adoptando la tecnología se está expandiendo drásticamente. Hemos visto a los artistas usar riffusion para hacer una lluvia de concepts sobre nuevas melodías, crear nuevos sonidos e incluso componer álbumes completos. Algunos han mezclado las generaciones de Riffusion con instrumentación en vivo para crear géneros completamente nuevos. Una de las cosas más emocionantes ha sido ver cómo las personas toman esta herramienta y la hacen suya, ya sea generando música a partir de los sonidos de la naturaleza, probando composiciones experimentales o anotaciones de piezas cinematográficas.
Ahora que la riffusion puede crear música de forma larga, ¿ves potencial para puntajes generados por IA en películas, videojuegos u otros medios de comunicación?
La capacidad de generar música de forma larga ciertamente hace que Riffusion sea una herramienta poderosa para el panorama de los medios más grandes. Ya estamos viendo el interés de los cineastas, los desarrolladores de juegos y los creadores de contenido que desean puntajes únicos que se adapten a sus narraciones, tal vez incluso en tiempo actual. Está claro que la IA puede ayudar a los narradores a expresarse a través de modalidades, y estamos al comienzo de esta frontera.
Mirando hacia el futuro, ¿cuál es su visión definitiva para la riffusion y cómo lo ves moldeando el futuro de la creación de la música?
Hoy, solo una pequeña fracción de personas hace música, pero la creatividad es inherente a todos nosotros. Al construir herramientas que bajan la barrera de entrada al tiempo que elevan el techo de lo que es posible con el sonido, la riffusion será un instrumento importante en el futuro. Veo a Riffusion como el lugar de referencia para cualquiera que quiera crear, experimentar y conectar a través de la música. Ya sea que sea un productor profesional o alguien que nunca haya hecho una canción antes, queremos que Riffusion sea el instrumento que lo ayuda a encontrar su sonido.
Gracias por la gran entrevista, los usuarios interesados en generar algo de música deben visitar Riffusion.
