Mirando hacia el futuro: Los avances en IA están intentando eliminar muchos de los prohibitivos desafíos financieros y técnicos que pueden hacer que la creación de contenido sea más desafiante fuera de los grandes centros de datos en la nube. Los equipos de investigación de IA están desarrollando y perfeccionando herramientas que permiten que incluso los creadores más novatos generen contenido basándose nada más que en una descripción de lo que quieren ver. Esta semana, Meta publicó una publicación de blog destacando Movie Gen, el próximo generador de audio y video de conversión de texto a contenido de la compañía.
Movie Gen fue presentada esta semana por Mark Zuckerberg en un publicación de instagram recordándonos que no debemos saltarnos el día de piernas. La vista previa llega varios meses después de la introducción de OpenAI de su Hermana AI Solución de texto a vídeo.
Un libro más largo e informativo. anuncio fue publicado en el blog del equipo de investigación de IA de Meta, proporcionando información adicional sobre las capacidades de Movie Gen. La nueva herramienta admitirá capacidades de generación y edición de audio y video basadas en texto.
La publicación incluye varios vídeos demostrativos La capacidad de Movie Gen para crear y modificar contenido fácilmente basándose en las entradas de texto del usuario, produciendo contenido de vídeo de hasta 16 segundos de duración a una velocidad de 16 fotogramas por segundo. La herramienta también puede generar videos altamente personalizados utilizando una sola foto en combinación con un mensaje de texto descriptivo.
Además de la edición de vídeo, la solución de IA de Meta también puede crear sonido ambiental, música de fondo y efectos de sonido para acompañar los vídeos generados o creados previamente. Al igual que sus capacidades de generación de video, la generación de audio de Movie Gen está impulsada por entradas de texto definidas por el usuario.
La publicación muestra varios ejemplos de sus capacidades de audio, incluido un vehículo todo terreno que recorre dunas de arena, un patinador que recorre un parque de patinaje y pingüinos nadando en una masa de agua generada por IA llena de grandes esferas flotantes.
A pesar de la publicación de Zuckerberg que afirma que la nueva función podría estar disponible para los usuarios de Instagram el próximo año, un Trapos La publicación del director de productos de Meta, Chris Cox, aclaró el estado actual de Movie Gen. Cox explicó que Meta está incorporando comentarios de cineastas y creadores de videos para priorizar funciones como capacidades de edición mejoradas y la capacidad de generar videos usando un personaje o imagen específica.
Si bien la vista previa parece mostrar que Movie Gen ya ofrece estas funciones, Cox mencionó que el equipo aún no está listo para lanzarlas como producto. Según él, «… sigue siendo caro y el tiempo de generación es demasiado largo, pero queríamos compartir dónde estamos ya que los resultados están siendo bastante impresionantes».