Adobe ha lanzado su generador de IA para transformar texto e imágenes en video para uso público. La herramienta, llamada Generate Video, está ahora en beta pública, tras una fase de acceso anticipado limitado realizada el año pasado. Los usuarios pueden acceder a la herramienta beta a través de la renovada aplicación web Firefly, que también introduce nuevas funciones de generación de imágenes, traducción y niveles de suscripción para créditos de IA diseñados para creadores. Lanzado en octubre, Adobe presentó por primera vez herramientas basadas en su IA generativa Firefly Video Model, comenzando con la versión beta de la herramienta Generative Extend para Premiere Pro, destinada a extender metraje de video al principio o al final. La presentación de hoy de la herramienta Generate Video llega más de dos meses después de la revelación de Sora de OpenAI. Esta nueva herramienta incorpora mejoras menores desde su vista previa en septiembre. La herramienta Generate Video cuenta con dos componentes principales: Texto a Video y Imagen a Video. La función Texto a Video permite a los usuarios crear videos a partir de descripciones de texto, mientras que la función Imagen a Video permite a los usuarios incluir una imagen de referencia para informar sus prompts de video. La herramienta proporciona diversas opciones para refinar la salida, incluidos ajustes para estilo, ángulo de cámara, movimiento y distancia de toma. Los videos se producen en resolución 1080p a 24 fotogramas por segundo, una mejora significativa respecto a la calidad original de 720p. Tanto los procesos de Texto a Video como de Imagen a Video tardan 90 segundos o más en generar clips, que pueden durar hasta cinco segundos —más cortos que los clips de 20 segundos ofrecidos por Sora. Adobe también está trabajando en un "modelo de ideación" más rápido y de menor resolución y en una versión futura en 4K, que se espera que se lance pronto. La aplicación web Firefly, que aloja muchas de las herramientas de IA generativa de Adobe, ha recibido una renovación de diseño y ahora se integra a la perfección con aplicaciones de Creative Cloud como Photoshop, Premiere Pro y Express, optimizando el movimiento y la edición de activos generados por IA.

Cabe destacar que Firefly está entrenado con contenido de dominio público y licenciado, lo que lo hace conforme para su uso comercial. Adobe comercializa la herramienta Generate Video como "lista para producción", atrayendo a cineastas que buscan incorporar contenido generado por IA sin infringir las leyes de derechos de autor. A medida que Adobe ingresa a un paisaje competitivo en el sector de video IA, enfrenta desafíos de competidores como Sora, que se lanzó recientemente, y Google, que está probando en beta su modelo de video IA de próxima generación Veo, visto como una mejora sobre la oferta existente de OpenAI basada en demos iniciales. Empresas como ByteDance y Pika Labs también han presentado nuevas herramientas de video IA generativa. Si bien la principal fortaleza de Adobe radica en la aplicabilidad comercial de Firefly, debe seguir mejorando la calidad y las características disponibles en comparación con su competencia. Además, la aplicación web Firefly ahora ofrece dos herramientas más en beta pública, aunque requieren pago. Escena a Imagen permite a los usuarios crear referencias personalizadas para imágenes generadas por IA utilizando funcionalidades integradas de 3D y bocetos, derivadas del experimento anterior "Project Scenic" anunciado en octubre. La herramienta Traducir Audio y Video permite a los usuarios traducir y doblar audio a más de 20 idiomas mientras se conserva la voz del orador original. Adobe está implementando dos nuevos planes de suscripción para Firefly que proporcionan créditos para utilizar sus modelos. El plan Firefly Standard comienza en $9. 99 al mes, ofreciendo 2, 000 créditos de video/audio para hasta 20 generaciones de video de cinco segundos en 1080p. El más caro plan Firefly Pro está disponible desde $29. 99 por 7, 000 créditos, permitiendo hasta 70 generaciones de video de cinco segundos en 1080p. Un beneficio significativo de ambos planes es que ofrecen acceso ilimitado a las capacidades de imagen y vectorización de Firefly.