Estás leyendo la publicación: Conozca video inpainting: edición basada en texto con Stable Diffusion y Neural Atlases
La inteligencia artificial está cambiando la cara de la edición de video. Las nuevas herramientas impulsadas por IA están haciendo posible que los editores de video trabajen de manera más rápida e inteligente. Una de las aplicaciones más prometedoras de la IA en la edición de video es la edición automática de video. Aquí es donde el sistema de IA analiza las secuencias de video y realiza las ediciones correspondientes. Esto puede suponer un gran ahorro de tiempo para los editores de vídeo, que a menudo tienen que revisar horas de metraje para encontrar las mejores tomas.
La simbiosis de dos modelos de IA, Neural Atlases y Stable Diffusion, condujo a la creación de nuevo software para editores de video que le permite editar y cambiar objetos en el video con indicaciones de texto. Es notable cómo las nuevas herramientas, como el botón “hacer bonito”, que antes solo eran imaginables, ahora se crean a partir de varios trajes de IA.
Proporciona una técnica para agregar texto a fotos y videos naturales para alterar su apariencia. El objetivo es agregar nuevas imágenes a la escena (como humo o fuego) o alterar la apariencia de las cosas existentes (como la textura del objeto) de una manera semánticamente significativa, dada una imagen o video de entrada y una señal de texto de destino. Este enfoque utiliza un modelo CLIP preentrenado externamente para calcular la pérdida mientras entrena al generador utilizando una colección interna de muestras de entrenamiento producidas a partir de una sola entrada (una imagen o video y un mensaje de texto de destino). El concepto principal es producir una capa modificable (color y transparencia) sobre la entrada original en lugar de generar directamente un resultado editado.
Este es sin duda el último día para los videocompositores; echa un vistazo a la descripción. Aquí, no solo crean contenido nuevo usando máscaras, sino que también lo componen de manera hábil y transparente.
Para este método no es necesario un generador previamente entrenado ni máscaras de edición proporcionadas por el usuario. Como resultado, puede realizar modificaciones semánticas dirigidas a videos de alta resolución y fotografías naturales de una variedad de objetos y escenarios.
Más ejemplos de video se proporcionan a continuación:
Con esta nueva herramienta, los editores de video tienen innumerables opciones creativas para hacer videos únicos. Todas estas nuevas herramientas impulsadas por IA hacen que la edición de video sea más fácil y eficiente. A medida que la IA continúa desarrollándose, podemos esperar ver herramientas de edición de video aún más nuevas y emocionantes en el futuro.
Leer más:
