Ahora puedes generar vídeos con IA directamente en Premiere Pro
Firefly ahora puede generar vídeos a partir de imágenes y mensajes de texto, así como ampliar clips existentes, anunció Adobe el lunes . La nueva función se está implementando actualmente para los suscriptores de Premiere Pro.
La función de generación de video hace su debut en una serie de herramientas nuevas para Premiere Pro y la aplicación web Firefly. Generative Extend de PP, por ejemplo, puede agregar hasta dos segundos de metraje de IA agregado al principio o al final de un clip, así como realizar ajustes a mitad de la toma en la posición de la cámara, el seguimiento e incluso los propios sujetos fotografiados.
El vídeo generado está disponible en resolución de 720p o 1080p a 24 fotogramas por segundo (fps). La herramienta también puede ampliar los efectos de sonido y el ruido ambiental del clip hasta 10 segundos, aunque no puede hacer lo mismo con los diálogos hablados o las partituras musicales.
La aplicación web Firefly está recibiendo dos nuevas herramientas de inteligencia artificial propias : las herramientas de texto a video e imagen a video se están implementando en una versión beta pública limitada, y puede solicitar la lista de espera aquí . Hacen lo que parecen hacer. Text-to-Video genera clips cortos en una variedad de estilos artísticos y permite a los creadores ajustar de forma iterativa el vídeo de salida utilizando los controles de la cámara de la aplicación web.
De manera similar, Image-to-Video utiliza un mensaje de texto e imágenes de referencia para acercar el modelo a lo que el creador tiene en mente, en menos iteraciones. Ambas funciones web tardan alrededor de un minuto y medio en generar vídeos de hasta cinco segundos de duración con una resolución de 720p y 24 fps.
Si bien ninguna de estas nuevas características de generación de video es particularmente innovadora ( Runway's Gen-3 , Meta's Movie Gen y el próximoSora de OpenAI cuentan con características y funcionalidades casi idénticas), Firefly ofrece a sus usuarios una ventaja sobre otros modelos en el sentido de que sus resultados son "comercialmente". seguro."
Adobe entrenó su modelo Firefly en imágenes de Adobe Stock, contenido con licencia abierta y contenido de dominio público, lo que significa que no es probable que sus resultados generados desencadenen ningún reclamo por infracción de derechos de autor. Ojalá se pudiera decir lo mismo de sus rivales Runway , Meta y Nvidia .