Adobe te invita a "adoptar la tecnología" con el nuevo generador de videos de Firefly.

Adobe ha introducido capacidades de generación de video en su plataforma Firefly AI justo antes de su evento Adobe MAX. Desde hoy, los usuarios pueden experimentar por primera vez con el generador de video de Firefly en el sitio web de Adobe, o probar la nueva función Generative Extend, que utiliza inteligencia artificial, en la aplicación beta de Premiere Pro. En el sitio de Firefly, se pueden utilizar modelos de texto a video o de imagen a video, ambos capaces de producir clips de hasta cinco segundos de video generado por IA. El acceso a esta versión beta en la web es gratuito, aunque probablemente tenga límites en cuanto a uso.

La empresa ha entrenado a Firefly para crear contenido animado y medios foto-realistas, dependiendo de las especificaciones de las instrucciones. Además, Firefly puede generar videos que incluyan texto, un aspecto en el que los generadores de imágenes por IA han tenido dificultades. La aplicación web de Firefly cuenta con configuraciones para ajustar panoramas de cámara, la intensidad del movimiento, el ángulo y el tamaño de las tomas. Por su parte, en la aplicación beta de Premiere Pro, los usuarios pueden explorar la función Generative Extend, que permite extender clips de video hasta dos segundos, generando un latido adicional en una escena y continuando el movimiento de la cámara y de los sujetos. El audio de fondo también será extendido, lo que representa el primer vistazo público al modelo de audio por IA en el que Adobe ha estado trabajando.

En pruebas previas al lanzamiento, la función Generative Extend de Firefly mostró resultados más impresionantes en comparación con el modelo de texto a video, destacando por su practicidad. Aunque los modelos de texto a video y de imagen a video no parecen tener el mismo nivel de calidad que las ofertas de competidores como Runway y OpenAI, Adobe ha orientado su enfoque hacia las funciones de edición de IA en lugar de la generación de videos, lo que busca satisfacer a su base de usuarios.

Es crucial que las características de IA de Adobe mantengan un equilibrio delicado con su audiencia creativa, ya que la compañía aspira a liderar en un mercado saturado de nuevas startups y tecnologías avanzadas en IA. Sin embargo, muchos creativos se sienten preocupados por la posibilidad de que estas herramientas desplacen su trabajo tradicional. En respuesta, la función Generative Extend utiliza la IA para resolver problemas existentes en la edición de video en lugar de crear nuevos clips desde cero.

Adobe ha tomado medidas para ser consciente de las preocupaciones de los creativos, compensando a fotógrafos y artistas con $3 por cada minuto de video que contribuyen para entrenar su modelo Firefly AI. No obstante, sigue habiendo recelo hacia el uso de herramientas de IA. En defensa de estas tecnologías, se señala que la demanda de contenido personalizado e individualizado en las empresas está en crecimiento, promoviendo que los creadores aprovechen estas herramientas para aumentar su productividad sin comprometer su pasión por la creatividad.

Firefly también tendrá un sistema para insertar automáticamente marcas de agua en la metadata de los videos generados, indicando que son producciones de IA. A pesar de esto, los videos no mostrarán etiquetas visibles que los identifiquen como tales de forma clara para el público. Adobe ha diseñado Firefly para generar medios considerados "comercialmente seguros", es decir, evitando la creación de contenidos que incluyan elementos como drogas, violencia, figuras políticas o materiales protegidos por derechos de autor. Con el acceso libre a este modelo de video, será interesante observar su desempeño en la práctica.