En Resumen
- Adobe anunció una expansión significativa de su plataforma de inteligencia artificial generativa Firefly, introduciendo capacidades de creación y edición de video.
- La expansión de video a la herramienta Firefly se integrará con el software de edición de video Premiere Pro, agilizando tareas editoriales comunes.
- El Modelo de Video Firefly puede generar metraje B-roll a partir de indicaciones de texto, produciendo clips de alta calidad en menos de dos minutos.
Adobe anunció una expansión significativa de su plataforma de inteligencia artificial generativa Firefly, introduciendo capacidades de creación y edición de video programadas para su lanzamiento más adelante este año. El nuevo Modelo de Video Firefly posiciona a Adobe para competir directamente con los actores emergentes en el espacio de video generativo, como Sora de OpenAI.
Listo para debutar en forma beta, la expansión de video a la herramienta Firefly se integrará con el software de edición de video insignia de Adobe, Premiere Pro. Esta integración tiene como objetivo agilizar tareas editoriales comunes y ampliar las posibilidades creativas para los profesionales del video.
El modelo cuenta con varias características destacadas, incluida la capacidad de generar metraje B-roll a partir de indicaciones de texto, con Adobe afirmando que se pueden producir clips de alta calidad en menos de dos minutos. Esta capacidad refleja la generación de video pura ofrecida por plataformas como Sora, Kling o Dream Machine.
Otra nueva herramienta llamada Generative Extend, permite a los editores alargar clips existentes, suavizando transiciones y ajustando el tiempo para que se alineen perfectamente con las señales de audio. Además, la IA puede abordar los espacios en blanco en la línea de tiempo del video, ayudando a resolver problemas de continuidad en la edición al conectar contextualmente dos clips dentro de la misma línea de tiempo, una característica que distingue a Adobe de sus competidores.
El Modelo de Video Firefly también incorpora la capacidad de eliminar elementos no deseados de las imágenes, similar al relleno consciente del contenido de Photoshop. Adobe afirma que su tecnología de IA generativa edita cada fotograma y mantiene la consistencia a lo largo de la línea de tiempo, convirtiendo un proceso típicamente lento y manual en uno más rápido y automatizado.
Además, el modelo puede producir elementos atmosféricos como fuego, humo y agua, mejorando así las opciones de composición de video. Si bien no es revolucionaria, esta capacidad agrega flexibilidad a la suite de edición de video de Adobe. Además, al igual que otras herramientas de video generativo existentes, Firefly admite varios movimientos y ángulos de cámara.
Las muestras compartidas en el anuncio muestran un modelo bastante potente, capaz de comprender el contexto y proporcionar generaciones coherentes.
Finalmente, Adobe enfatiza que Firefly es "comercialmente seguro" —entrenado exclusivamente con contenido con licencia, mitigando posibles preocupaciones de derechos de autor. Esta puede ser una movida estratégica, considerando que la incursión de Adobe en la IA generativa ha sido problemática—por decirlo suavemente.
Cuando la empresa lanzó por primera vez funciones de inteligencia artificial en Photoshop, las reacciones fueron algo mixtas, con algunos creativos viendo potencial y otros siendo más escépticos. Pero luego Adobe metió la pata en grande. Un cambio de licencia parecía dar luz verde a Adobe para usar los datos de los clientes, y se desató el caos.
Los creadores de contenido, desde estrellas de YouTube hasta analistas de la industria, alzaron sus voces contra la empresa—incluso recomendando abandonar el paquete en favor de competidores menos populares.
Esos competidores olían la sangre en el agua. El CEO de Procreate no anduvo con rodeos, declarando que "odiaba malditamente la IA" y jurando que la tecnología nunca llegaría a su aplicación. Affinity se lanzó y aseguró a sus usuarios que tampoco habría IA generativa en su suite de productos.
To clarify, we are not developing any generative AI tech and are against anything which undermines human talent or tramples on artists' IP. Any ML/AI features will be workflow focused. We are 100% a champion of human creativity and always will be. https://t.co/16jq9FM9gy
— Affinity (@affinitybyserif) November 9, 2023
Adobe se apresuró a solucionar las cosas, ajustando sus términos de servicio, pero el daño ya estaba hecho. Su reputación sufrió, especialmente, dada la creciente oposición al uso de la inteligencia artificial en círculos creativos.
A pesar de la pesadilla de relaciones públicas, Adobe se mantiene firme en su visión pro-IA. Hace solo unas semanas, la compañía presentó Magic Fixup, una técnica que aplica capacidades de edición de imágenes más sofisticadas que los editores de imágenes normales después de ser entrenada con videos en lugar de imágenes estáticas.
La compañía ha abierto una lista de espera para el beta del Firefly Video Model, aunque aún no se han anunciado fechas específicas de lanzamiento.