Звіт про новини Технологія
08 Лютого, 2023

Gen-1: штучний інтелект створює нові відео з уже наявних, поєднуючи підказки та зображення

Коротко

Gen-1 — це нейронна мережа, яка може генерувати нові відео з наявних шляхом об’єднання підказки та зображення.

Його також можна використовувати для створення абсолютно нових відео з нуля.

Можливість генерувати нові відеоролики з наявних має низку потенційних застосувань.

RunWayML, стартап зі штучного інтелекту, оголосила новий продукт під назвою Gen-1, нейронна мережа, яка може генерувати нові відео з наявних, поєднуючи підказки та зображення. Протягом багатьох років нейронні мережі обмежувалися завданням передачі стилю, тобто процесом отримання зображення та застосуванням до нього стилю іншого зображення. Ось як ми отримуємо відео в стилі глибокого навчання, де, наприклад, пейзаж зображений у стилі «Зоряної ночі» Ван Гога.

Gen-1: штучний інтелект створює нові відео з уже існуючих, комбінуючи підказки та зображення
@Midjourney / Той дивний привид

Тепер, з Gen-1, нейронні мережі можуть робити більше, ніж просто передавати стиль. Він може створювати нові відео з нуля, використовуючи підказки та зображення як вхідні дані. Це відкриває цілий ряд нових можливостей для Відео, створені ШІ. Наразі відео, згенеровані Gen-1, короткі та прості. Але з розвитком технології ми можемо очікувати появи більш складних і складних реалістичні відео, створені ШІ.

Рекомендований пост: Репродуктивне здоров'я чоловіків покращується завдяки перегляду відео для дорослих у віртуальній реальності

Що таке Gen-1?

Потужні інструменти для створення та редагування зображень розблоковані завдяки текстовим підказкам моделі генеративної дифузії. Хоча вони були застосовані для створення відео, існуючі методи редагування вмісту вже існуючого матеріалу, зберігаючи його структуру, вимагають дорогого перепідготовки для кожного входу або залежать від ризикованого поширення змін зображення між кадрами.

Розробники описують модель розповсюдження відео, керованого структурою та вмістом, яка змінює фільми на основі письмових або візуальних описів бажаного результату. Через недостатнє відокремлення виникають конфлікти між наданими користувачем модифікаціями вмісту та представленнями структури. Вони демонструють, що структуру та цілісність вмісту можна контролювати шляхом навчання оцінкам глибини монокуляра з різними рівнями деталізації.

Синтезуйте нові відео в реалістичній та послідовній манері, застосовуючи композицію та стиль зображення чи текстової підказки до структури вихідного відео. Це як знімати щось нове, нічого не знімаючи.

Синтез нового відео за допомогою цього методу дає змогу кінематографістам швидко створювати контент економічно ефективним способом
Синтез нового відео за допомогою цього методу дає змогу кінематографістам швидко створювати контент економічно ефективним способом

Перенесення стилю зображення або підказки до кожного кадру відео може стати чудовим способом уніфікувати ваш проект, надати йому загальну візуальну тему та створити послідовність.

За допомогою програмного забезпечення та креативного дизайну макети можна перетворити на естетично привабливі та інтерактивні візуалізації, які втілюють у життя бачення користувача.

Макети дозволяють дизайнерам візуалізувати свої ідеї та створювати відчутні результати, які можна представити для перегляду
Макети дозволяють дизайнерам візуалізувати свої ідеї та створювати відчутні результати, які можна представити для перегляду

Завдяки функціям редагування відео легко виокремити частини відео та покращити їх за допомогою текстових підказок.

Застосування вхідного зображення або підказка нетекстурованих візуалізацій може значно покращити їх реалістичність, оживляючи 3D-моделі.

Runway Research присвячена створенню мультимодальних систем штучного інтелекту, які дозволяють нові форми творчості. Gen-1 являє собою ще один наш ключовий крок вперед у цій місії. Якщо ви творча людина, яка хоче експериментувати з майбутнім оповідання, подайте запит на доступ нижче.

Gen-1 також можна використовувати для створення абсолютно нових відео з нуля. Його можна використовувати для багатьох цілей, зокрема для створення нових версій існуючих фільмів або створення нових фільмів взагалі. Ці новини обов’язково схвилюють кінематографістів та інших творчих людей, які завжди шукають нові способи розширити межі свого мистецтва. Завдяки Gen-1 вони тепер мають у своєму розпорядженні новий потужний інструмент.

Здатність до створювати нові відео з існуючих має ряд потенційних застосувань. Наприклад, його можна використовувати для створення нових версій існуючого відеовмісту, тому його можна використовувати для створення альтернативних версій сцен або кадрів, які можуть бути занадто дорогими або складними з точки зору логістики.

Ви можете подати заявку на використання моделі під час її бета-тестування тут.

Докладніше про ШІ:

відмова

Відповідно до Правила проекту Trust, будь ласка, зверніть увагу, що інформація, надана на цій сторінці, не призначена і не повинна тлумачитися як юридична, податкова, інвестиційна, фінансова або будь-яка інша форма консультації. Важливо інвестувати лише те, що ви можете дозволити собі втратити, і звернутися за незалежною фінансовою порадою, якщо у вас виникнуть сумніви. Щоб отримати додаткову інформацію, ми пропонуємо звернутися до положень та умов, а також до сторінок довідки та підтримки, наданих емітентом або рекламодавцем. MetaversePost прагне до точного, неупередженого звітування, але ринкові умови можуть змінюватися без попередження.

про автора

Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється. 

інші статті
Дамір Ялалов
Дамір Ялалов

Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється. 

Hot Stories
Приєднуйтеся до нашої розсилки.
Останні новини

Від Ripple до The Big Green DAO: як криптовалютні проекти сприяють благодійності

Давайте розглянемо ініціативи, які використовують потенціал цифрових валют для благодійних цілей.

Дізнайтеся більше

AlphaFold 3, Med-Gemini та інші: як AI трансформує охорону здоров’я у 2024 році

ШІ проявляється різними способами в охороні здоров’я, від виявлення нових генетичних кореляцій до розширення можливостей роботизованих хірургічних систем...

Дізнайтеся більше
Приєднуйтесь до нашої спільноти інноваційних технологій
Детальніше
Читати далі
Токенізовані RWA долають розрив між ними DeFi і TradFi
Думка Топ списки Business ринки Софтвер Технологія
Токенізовані RWA долають розрив між ними DeFi і TradFi
24 Червня, 2024.
Поточний рівень корекції біткойна все ще нижче середнього, каже криптоаналітик Rekt Capital
ринки Звіт про новини Технологія
Поточний рівень корекції біткойна все ще нижче середнього, каже криптоаналітик Rekt Capital
24 Червня, 2024.
Код індексатора протоколу SRC з відкритим вихідним кодом основних розробників, включаючи стандарти маркерів SRC-20, SRC-721 і SRC-101
Звіт про новини Софтвер Технологія
Код індексатора протоколу SRC з відкритим вихідним кодом основних розробників, включаючи стандарти маркерів SRC-20, SRC-721 і SRC-101
24 Червня, 2024.
Зліт і падіння рекламних амбіцій Oracle: мрія про 2 мільярди доларів руйнується
Думка Business Стиль життя ринки Технологія
Зліт і падіння рекламних амбіцій Oracle: мрія про 2 мільярди доларів руйнується
24 Червня, 2024.
CRYPTOMERIA LABS PTE. LTD.