El campo de la IA ha experimentado un gran cambio con la introducción de CogVideoX-5B. Este modelo de IA, desarrollado por investigadores de la Universidad de Tsinghua y Zhipu AI, podría cambiar la forma en que se crean los videos y el panorama de los contenidos digitales. ¿Qué es CogVideoX-5B y por qué es tan popular?
CogVideoX-5B es diferente porque es accesible y tiene capacidades impresionantes. Este modelo puede crear videos de alta calidad de hasta seis segundos de duración a partir de texto simple. Esto tiene grandes implicaciones. El modelo es de código abierto, por lo que los desarrolladores de todo el mundo pueden usarlo. Esto hace que sea más fácil para todos crear videos.
CogVideoX-5B https://t.co/e3bNKp3adp
Un gatito blanco y esponjoso, con una cinta rosa atada alrededor del cuello, juega en un cojín junto a una ventana iluminada por el sol; su suave pelaje brilla a la luz. La escena comienza a cierta distancia y se acerca gradualmente a medida que el gatito bate un pequeño… foto.twitter.com/1x1y3mqFA6
— 布留川英一 / Hidekazu Furukawa (@ npaka123) 28 de agosto de 2024
¿Qué hace que funcione dentro del CogVideoX-5B?
El modelo CogVideoX-5B tiene 5 mil millones de parámetrosEl modelo puede producir vídeos en Resolución 720×480 y 8 cuadros por segundoEste modelo no es el mejor, pero sigue siendo bueno, especialmente Porque es de código abierto.
El éxito del CogVideoX-5B se debe a varias innovaciones técnicas. El modelo utiliza un codificador automático variacional 3D (VAE) para comprimir los datos de vídeo, lo que facilita la generación de resultados de alta calidadTambién utiliza un “transformador experto” con LayerNorm adaptativo, que permite al modelo interpretar el texto con mayor matiz, lo que da como resultado videos más precisos y coherentes.
La decisión de lanzar CogVideoX-5B como código abierto es un gran paso para la IA. Los investigadores de la Universidad de Tsinghua y Zhipu AI han hecho públicos su código y los pesos de los modelos, lo que facilita que otros utilicen la tecnología avanzada de generación de vídeo. Esto significa que los desarrolladores ahora pueden experimentar con contenido de vídeo generado por IA. Este enfoque de código abierto podría dar lugar a nuevas herramientas y aplicaciones en muchas industrias.
¡Creado por CogVideoX-5B! foto.twitter.com/Y22zcg8fBA
— F-AI (@faiAI0) 28 de agosto de 2024
CogVideoX-5B: ¿Cómo se compara y quién lo fabricó?
El CogVideoX-5B no es el primer modelo de texto a vídeo, pero está demostrando ser uno de los más influyentes. Superó a competidores como VideoCrafter-2.0 y OpenSora. Esto se debe a las nuevas técnicas utilizadas por los desarrolladores. Investigadores de la Universidad de Tsinghua y Zhipu AI han creado una herramienta que podría cambiar la forma en que se produce y se consume el contenido digital.
Cómo empezar a utilizar CogVideoX-5B
Puede utilizar y experimentar con el modelo CogVideoX-5B de forma gratuita. A continuación, le ofrecemos una sencilla guía para empezar:
- Visita el repositorio de GitHub:El código y los pesos del modelo de CogVideoX-5B están en GitHub. Descárguelos a su computadora.
- Configura tu entorno:Asegúrese de tener las herramientas adecuadas para ejecutar el modelo. Esto puede incluir versiones específicas de Python y bibliotecas como PyTorch.
- Ejecutar el modelo:Ingrese mensajes de texto y genere videos utilizando las instrucciones del repositorio.
- Experimentar e innovar:Una vez que conozca los conceptos básicos, pruebe diferentes indicaciones de texto para ver qué puede hacer el modelo.
CogVideoX-5B (txt2vid) se ha agregado al complemento gratuito de Blender, Pallaidium: #b3d imagen.twitter.com/ynBupL2TKT
— tintwotin (@tintwotin) 27 de agosto de 2024
Cómo probar CogVideoX-5B en línea
Si no desea descargar CogVideoX-5B, puede probarlo en línea a través de Hugging Face. Aquí encontrará una guía sobre cómo utilizar la demostración:
- Visita la página de demostración:Vaya al espacio de abrazamiento facial CogVideoX-5B.
- Ingrese el texto que desea solicitar: En el cuadro “Indicación”, describe el vídeo que quieres generar. No superes las 200 palabras para obtener mejores resultados.
- Mejora tu mensaje (opcional):Haga clic en “Mejorar mensaje” para pulir su entrada y sobrescribir el mensaje original.
- Establecer una semilla de inferencia (opcional):Para controlar la aleatoriedad de la generación de video, ingrese un número positivo en el cuadro “Inferencia inicial”. Si prefiere una semilla aleatoria, deje el valor como
-1.
- Habilitar funciones adicionales (opcional):
- Súper resolución:Seleccione esta casilla para ampliar el vídeo de 720×480 a 1440×960.
- Interpolación de cuadros:Habilite esta opción para mejorar la salida de video aumentando los cuadros por segundo (de 8 FPS a 16 FPS).
- Genera tu video:Cuando hayas terminado, haz clic en “Generar video”. La modelo creará un video corto basado en tu mensaje.
- Revisar el video:Una vez generado, obtenga una vista previa del video en la página. Ajuste los datos de entrada e intente nuevamente para obtener el resultado deseado.
CogVideoX-5B y productos similares
CogVideoX-5B es otro modelo de IA que está cambiando las posibilidades de creación de contenido digital. Otros modelos destacados son las herramientas de generación de vídeo de Runway, Luma AI, VideoCrafter2 y Pika Labs. Cada modelo tiene sus puntos fuertes, pero la nueva IA es de código abierto, lo que facilita su uso y permite que más personas contribuyan a su desarrollo.
Esta empresa es un importante paso adelante en el campo de los vídeos generados con inteligencia artificial. Su enfoque de código abierto facilita su uso por parte de todo el mundo y ayuda a que siga mejorando. A medida que más personas empiecen a utilizarla, la creación de vídeos se volverá más diversa, dinámica y accesible.
Crédito de la imagen destacada: CogVideoX
Source: Cómo CogVideoX-5B está listo para revolucionar la creación de videos para siempre
