Adobe ha lanzado el última versión de Firefly que ahora se apoya en gran medida en la IA para casi todas las facetas de la postproducción de imágenes y videos. La aplicación actualizada ahora puede usar IA para generar narraciones, música, imágenes y videoclips, e incluso te ayuda a generar ideas y armar clips. A muchos creadores puede resultarles desagradable depender de la IA para casi todos los aspectos de la producción, pero Adobe la llama “una herramienta para la creatividad humana, no un reemplazo”.

Firefly ha sido principalmente una herramienta de generación de contenido hasta ahora, pero Adobe ahora ha introducido el editor de video Firefly en una versión beta privada. Es un editor de línea de tiempo multipista basado en web, similar a Adobe Premiere Pro, que le permite generar, organizar, recortar y organizar clips, con herramientas para agregar voces en off, bandas sonoras y títulos. Puede organizar el contenido existente de Firefly o generar contenido nuevo dentro del editor (con ajustes preestablecidos como animación con plastilina, anime y 2D) y combinarlo con los medios capturados. Todo eso se puede editar con “precisión cuadro por cuadro o mediante una transcripción incorporada”, dijo Adobe.

Además del video, Firefly elimina la necesidad de que los humanos también hagan voces en off y música. El nuevo Generate Soundtrack (beta pública) de Adobe es un generador de música con IA basado en Firefly Audio Model que te permite seleccionar un estilo o crear uno que coincida con cualquier clip que subas. Luego lo sincroniza y lo sincroniza con precisión con ese metraje.

Mientras tanto, Generate Speech hace lo mismo con las voces en off. Le permite elegir entre el modelo de voz de Firefly y uno de ElevenLabs, lo que le permite generar “voces realistas en varios idiomas y ajustar la emoción, el ritmo y el énfasis para una entrega natural y expresiva”.

Adobe

Adobe también está ampliando el acceso a su Herramienta de producción creativa Fire!y directamente en la aplicación Fire!y como una versión beta privada para empezar. Es un completo sistema de edición de imágenes por lotes impulsado por IA que permite a los creadores juntar clips, reemplazar fondos automáticamente, aplicar una gradación de color uniforme y recortar a través de una interfaz sin código.

Luego están Fire!y Boards, una “superficie de ideación impulsada por IA” para generar ideas sobre nuevos conceptos. Una función llamada “Rotar objeto” te ayuda a convertir imágenes 2D en 3D para que puedas colocar objetos y personas en diferentes poses y rotarlos hacia nuevas perspectivas. Otros dos, la exportación de PDF y la descarga masiva de imágenes, aceleran el proceso de compartir conceptos visuales entre proyectos.

Finalmente, Solicitar edición (disponible ahora en Firefly) es una interfaz de edición conversacional que le permite usar el lenguaje cotidiano para describir las ediciones que desea realizar en una imagen, de la misma manera que usaría herramientas de conversión de texto a imagen como Midjourney para crear nuevas imágenes. Está disponible con la última IA Fire!y Image Model 5 de Adobe, junto con modelos asociados de Black Forest Labs, Google y OpenAI.

Ahora que la IA de Firefly es capaz de manejar todos los aspectos de la producción, es posible que se pregunte si esto resultará en una ola de “deficiencias” de IA imposibles de ver que aparecerán en YouTube y en otros lugares. La respuesta es “probablemente”, pero no necesariamente será barato. Las suscripciones independientes a Firefly cuestan $ 10 al mes para el plan básico (20 videos de cinco segundos), $ 20 al mes para el plan Pro (40 videos de cinco segundos) y $ 199 para el plan Premium (videos ilimitados). Sin embargo, Adobe ofrece generación de imágenes y videos gratuita (con algunas restricciones) para todos los clientes de Firefly y Creative Cloud Pro hasta el 1 de diciembre. Todas las nuevas herramientas ahora están disponibles como parte de la actualización, en versión beta pública o en versión beta privada como se mencionó anteriormente.

Fuente