Gen-1: AI genera nuevos videos a partir de los existentes mediante la combinación de indicaciones e imágenes
En Resumen
Gen-1 es una red neuronal que puede generar nuevos videos a partir de los existentes al combinar indicaciones e imágenes.
También podría usarse para crear videos completamente nuevos desde cero.
La capacidad de generar nuevos videos a partir de los existentes tiene varias aplicaciones potenciales.
RunWayML, una startup de inteligencia artificial, ha anunciado un nuevo producto llamado Gen-1, una red neuronal que puede generar nuevos videos a partir de los existentes mediante la combinación de indicaciones e imágenes. Durante años, las redes neuronales se han limitado a la tarea de transferencia de estilo, que es el proceso de tomar una imagen y aplicarle el estilo de otra imagen. Así es como conseguimos esos trippy videos de transferencia de estilo de aprendizaje profundo donde, por ejemplo, se representa un paisaje al estilo de La noche estrellada de Van Gogh.
Ahora, con Gen-1, las redes neuronales pueden hacer más que solo transferir estilos. Puede generar nuevos videos desde cero, utilizando indicaciones e imágenes como entrada. Esto abre una nueva gama de posibilidades para Vídeos creados por IA. En este momento, los videos generados por Gen-1 son cortos y simples. Pero a medida que se desarrolla la tecnología, podemos esperar ver más complejos y videos realistas generados por IA.
| Post recomendado: La salud reproductiva de los hombres mejora al ver videos para adultos en realidad virtual |
¿Qué es Gen-1?
Las sólidas herramientas de creación y edición de imágenes se desbloquean mediante la guía de texto. modelos de difusión generativa. Si bien estos se han aplicado a la creación de videos, los métodos actuales para editar el contenido de material ya existente mientras se mantiene su estructura exigen un reentrenamiento costoso para cada entrada o dependen de la propagación riesgosa de alteraciones de imagen entre fotogramas.
Los desarrolladores describen un modelo para la difusión de video guiada por la estructura y el contenido, que altera las películas en función de las descripciones escritas o visuales del resultado deseado. Debido a un desacoplamiento insuficiente, surgen conflictos entre las modificaciones de contenido proporcionadas por el usuario y las representaciones de la estructura. Demuestran que la estructura y la integridad del contenido pueden controlarse mediante el entrenamiento en estimaciones monoculares de profundidad con varios niveles de detalle.
Sintetice videos nuevos de manera realista y consistente aplicando la composición y el estilo de una imagen o mensaje de texto a la estructura de su video fuente. Es como filmar algo nuevo sin filmar nada.
Transferir el estilo de una imagen o mensaje a cada cuadro de un video puede ser una excelente manera de unificar su proyecto, darle un tema visual general y crear coherencia.
Mediante el uso de software y diseño creativo, las maquetas se pueden transformar en representaciones interactivas y estéticamente agradables que dan vida a la visión del usuario.
Con las funciones de edición de video, es fácil aislar partes de un video y mejorarlas con indicaciones de texto.
Aplicar una imagen de entrada o puntual Los renderizados sin textura pueden mejorar enormemente su realismo, dando vida a los modelos 3D.
Runway Research se dedica a construir sistemas de IA multimodales que permitan nuevas formas de creatividad. Gen-1 representa otro de nuestros pasos fundamentales en esta misión. Si eres un creativo que busca experimentar con el futuro de la narración, solicita acceso a continuación.
Gen-1 también se puede usar para crear videos completamente nuevos desde cero. Se puede utilizar para una serie de propósitos, incluida la creación de nuevas versiones de películas existentes o la creación de películas nuevas por completo. Esta noticia seguramente emocionará a los cineastas y otros creativos que siempre están buscando nuevas formas de ampliar los límites de su arte. Con Gen-1, ahora tienen una nueva y poderosa herramienta a su disposición.
La habilidad para generar nuevos videos de los existentes tiene una serie de aplicaciones potenciales. Por ejemplo, podría usarse para crear nuevas versiones de contenido de video existente, por lo que podría usarse para crear versiones alternativas de escenas o tomas que pueden ser demasiado costosas o logísticamente difíciles de filmar.
Puede solicitar el uso del modelo mientras está en pruebas beta esta página.
Lea más sobre la IA:
Observación
En línea con la Directrices del Proyecto Confianza, tenga en cuenta que la información proporcionada en esta página no pretende ser ni debe interpretarse como asesoramiento legal, fiscal, de inversión, financiero o de cualquier otro tipo. Es importante invertir sólo lo que pueda permitirse perder y buscar asesoramiento financiero independiente si tiene alguna duda. Para mayor información sugerimos consultar los términos y condiciones así como las páginas de ayuda y soporte proporcionadas por el emisor o anunciante. MetaversePost se compromete a brindar informes precisos e imparciales, pero las condiciones del mercado están sujetas a cambios sin previo aviso.
Sobre el Autor
Damir es el líder del equipo, gerente de producto y editor en Metaverse Post, que cubre temas como AI/ML, AGI, LLM, Metaverse y Web3-campos relacionados. Sus artículos atraen una audiencia masiva de más de un millón de usuarios cada mes. Parece ser un experto con 10 años de experiencia en SEO y marketing digital. Damir ha sido mencionado en Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto y otras publicaciones. Viaja entre los Emiratos Árabes Unidos, Turquía, Rusia y la CEI como nómada digital. Damir obtuvo una licenciatura en física, que él cree que le ha dado las habilidades de pensamiento crítico necesarias para tener éxito en el panorama siempre cambiante de Internet.
Más artículos
Damir es el líder del equipo, gerente de producto y editor en Metaverse Post, que cubre temas como AI/ML, AGI, LLM, Metaverse y Web3-campos relacionados. Sus artículos atraen una audiencia masiva de más de un millón de usuarios cada mes. Parece ser un experto con 10 años de experiencia en SEO y marketing digital. Damir ha sido mencionado en Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto y otras publicaciones. Viaja entre los Emiratos Árabes Unidos, Turquía, Rusia y la CEI como nómada digital. Damir obtuvo una licenciatura en física, que él cree que le ha dado las habilidades de pensamiento crítico necesarias para tener éxito en el panorama siempre cambiante de Internet.
