Adobe dijo hoy que está trayendo video generado por IA, también conocido como el modelo de video Firefly, a Adobe Premiere Pro más su servicio de arte generativo de Firefly. Sin embargo, a diferencia de sus capacidades generativas de imagen de IA, no será gratuita.
El video generado por IA ha estado disponible durante meses. En diciembre, Operai lanzó a Sorasu capacidad para crear videoclips de IA de varios segundos a partir de un mensaje de texto. Lo que Adobe ofrece es autenticidad. Al igual que las imágenes generadas por IA en Firefly y Photoshop, Adobe entrenó su modelo de video Firefly en clips con licencia.
En este momento, Adobe está posicionando sus videoclips generados por IA como B-Roll. Es como un video de relleno detrás de un título, por ejemplo. También ayuda a facilitar una transición entre dos escenas diferentes.
En una demostración proporcionada a los periodistas, Adobe imaginó un clip generado por IA de chispas candentes que vuelan a través de la pantalla, como telón de fondo para una pantalla de título que introdujo clips de Islandia. Sin embargo, Adobe también mostró un «vuelo de drones» completamente generado por AI sobre un volcán en erupción para el mismo proyecto, lo que sugiere que los espectadores aún tendrán que cuestionar la autenticidad de lo que ven.
Adobe Firefly Models podrá generar y descargar el video. En Premiere Pro, como en Photoshop, los usuarios podrán generar el contenido generado por IA dentro de la aplicación y luego simplemente dejarlo dentro del flujo de trabajo.
Adobe
¿Cuánto costará el video de Adobe Firefly?
Sin embargo, para usar el modelo de video Firefly de Adobe, deberá pagar. Adobe ofrece acceso temprano en dos planes. El plan estándar de Firefly de $ 9.99 ofrece a los usuarios 2,000 créditos de video por mes o hasta 20 videos de cinco segundos de 1080p. Firefly Pro permite a los usuarios crear 70 videos 1090p de cinco segundos a través de 7,000 créditos de video/audio por mes también. Adobe dice un plan premium de Firefly para aquellos «que buscan generar contenido de video de forma regular», dice Adobe, pero no se ha anunciado el precio.
Los planes suenan un poco confusos al principio, pero esencialmente está utilizando los créditos para «comprar» los videos, según un representante de Adobe a quien le pedí que aclarara los planes. Además de simplemente crear el video, los usuarios también podrán editar videos: proporcionando filtros, elaboración de rutas para que la cámara cree tomas de movimiento y más. Los creativos también pueden bloquear las primeras y las últimas imágenes del clip para facilitar las transiciones y ajustar el color para mantener la consistencia con los otros clips en la escena, dice Adobe. No parece que esas características costarán créditos.
No está claro dónde se dibujará la línea entre ediciones y re-renderizadores, lo que costará créditos.
«Digamos que solicité una escena con un grupo de caballos que compiten alrededor de una pista de carreras desde la perspectiva de alguien parado en el cuadro de la pista», le pregunté a un representante de Adobe por correo electrónico. “Entonces decidí que eso no funcionaba, y quería una toma de arriba con la cámara que se movía de la cabeza al cuadro. ¿Se considera eso una edición o un renderizado completamente diferente?
«Esto se consideraría un nuevo render y usaría créditos, ya que requeriría generaciones adicionales», respondió el representante de Adobe.
Adobe
Sin embargo, Adobe no generará audio a través de AI. En cambio, Adobe ofrece tomar audio pregrabado y traducirlo en 20 idiomas. Adobe promete que sus traducciones mantendrán una «voz auténtica», con voz, tono, cadencia y coincidencia acústica.
El video generado por IA es mucho más intensivo computacionalmente que las imágenes fijas generadas por IA, por lo que tiene sentido que Adobe cobre más. Adobe ya usa un sistema de crédito para imágenes de IA, y Firefly solo asigna 25 créditos de generación de imágenes a los usuarios que se registran en la versión gratuita de las aplicaciones de Adobe. Con el modelo de video, Adobe aún no ha permitido a los usuarios probar el modelo de video Firefly con un nivel gratuito.
Lo que no está claro es si los usuarios «gastarán» cualquier crédito disponible, o si solo se utilizarán para comprar el tiempo de creación de videos.
Adobe
Adobe tiene competencia aquí. Crear video generado por IA a través de servicios en la nube es posible con servicios como Sora, Pika Labs, Pistay más. Servicios como Invideo.ai también ofrecen ayudar a crear segmentos de video completos desde cero, utilizando clips generados por IA (así como imágenes de stock) y un script generado por IA.
También es posible crear video de IA en su propia PC local, apenas, parece. Mochi, Según la documentación, requiere 60 GB de VRAM para generar videos de 480p desde su PC. Eso es más que los 32GB de VRAM en una edición del fundador de Nvidia GeForce 5090. Otras ofertas competitivas no parecen ser mucho mejores.
Los modelos locales de video de IA parecen tener dificultades para crear un video clip a partir de un mensaje de texto en lugar de una imagen de referencia. El modelo Firefly de Adobe hace ambas cosas. Correr Un generador de IA como difusión estable en su PC Parece bastante realista para las imágenes fijas generadas por IA, pero el video de IA puede verse obligado a usar la nube para esta generación de PC.
Adobe ofrece ese tipo de potencia con su servicio en la nube. A la larga, la conveniencia puede ser el verdadero punto de venta. Si bien el servicio de Firefly de Adobe proporciona un enfoque de acaparamiento para el arte de IA, es la integración fácil y ajustada en Photoshop lo que lo hace especialmente útil. Esperaría lo mismo de Premiere Pro y el nuevo modelo de video de Adobe.
Esta historia se actualizó a las 9:25 am del 12 de febrero.
