Як створити анімацію для зміни зображення за допомогою ControlNet
Завдяки попередньому експерименту проводитиd, у нас була ідея використовувати ControlNet для морфінгу. Лише тоді ми перейшли на використання моделі deep2img, яка може створювати зображення з карти глибини, а не з ControlNet. І ControlNet може функціонувати не тільки в глибині. Це повідомлення має більше інформації про техніку.
Я коротко розповім вам про процедуру. Параметр шумозаглушення, який впливає на кількість кроків під час генерації, доступний для нас, якщо ми створюємо зображення в img2img. Наприклад, якщо кроки = 30 і сила шумозаглушення = 0.5, залишиться лише 15 кроків для створення. Це міркування можна застосувати до анімації морфу. Ви можете трансформувати будь-яке зображення; портрети не єдині, які можна зробити.
Зробіть оригінальний знімок. Активуйте ControlNet, залишаючи поле зображення порожнім. Виберіть початкове значення -1 для створення випадкових тестів; кількість партій впливає на їх кількість. Ви можете експериментувати з параметрами наведення, вагою отриманої карти та режимом ControlNet. Якщо вам подобається генерація, перетягніть її мишею до img2img, а потім повторіть процес, шукаючи зображення, яким зрештою стане друге зображення. У міру завершення кожного зображення постає питання, як створити анімацію. (Для початку пам’ятайте, що потрібно встановити кількість пакетів на 1, щоб уникнути створення додаткових фотографій.)
Зараз ми скористаємося цікавим рішенням, але про його недоліки я розповім пізніше.
Буде використано графік XYZ; ви повинні вибрати його зі списку сценаріїв. Це дозволить нам створити не тільки остаточне зображення, але й перехід від вихідного зображення.
Значення X ми вставляємо в рядок, який читає:
0.0.296.0.39.0.459.0.515.0.563.0.606.0.644.0.68.0.713.0.743.0.772.0.799.0.825.0.85.0.874.0.897.0.919.0.94.0.961.
Це означає, що коли почнеться генерація, ми отримаємо 21 картинку, а не одну (кількість значень, розділених комами). Чому тут цей рядок? Наприклад, може виглядати по-різному.
Цей формат спрощує розуміння: ви запитуєте 20 зображень від автоматизованої системи та просите її продемонструвати, як усунення шуму вплине на результат для значень у діапазоні від 0 до 1. Недоліком другого варіанту є те, що він призводить до лінійної зміни значень , через характеристики усунення шуму це не виглядає реалістичним морфінгом. Близькі до нуля числа майже не впливають на результат. і на рівнях більше 0.5, він починає впливати дуже помітно.
В результаті перший рядок є кривою типу х,4, або х, підвищеним на 0.4. На зображенні контрастують пряма, лінійна функція та вигнута, яка забезпечує точніші результати. Для створення такої нитки можна використовувати блендер.
Ви повинні вибрати кількість кадрів для переходу перед створенням лінії. Його можна редагувати в налаштуваннях проекту.
Ви повинні виконати кілька кроків, щоб отримати лінію. Спочатку поекспериментуйте з формою кривої. Для цього виберіть «Видалити ключові кадри» в контекстному меню параметра анімації.
Ось формула для отримання кривої; параметр став синім, вказуючи на те, що в ньому працює драйвер.
Ви можете повозитися зі значенням тут. 4. Але не опускайтеся занадто низько. frame/21 позначає зсув значення від 0 до 1 у кадрі 0 до кадру 21. Залишаються лише значення від 1 до 20 кадрів.
Тим не менш, ключі не є водієм. Спочатку їх необхідно підготувати. Щоб виконати це, клацніть «Об’єкт» > «Анімація» > «Запекти дію» у тривимірному вікні, а потім натисніть «ОК».
Однак це вплине на всі можливі ключі об'єкта, і їх слід видалити. Виділіть все, крім першого рядка, і натисніть X на клавіатурі (миша повинна знаходитися під списком).
А тепер, щоб отримати рядок у лівій частині екрану, натисніть на відтворення та відкрийте вікно консолі.
Отримав рядок, який можна скопіювати.
Тепер, щоб створити анімацію, вам потрібно виконати цей процес окремо для кожної позиції зображення, створеної на початку, а потім зібрати її в анімацію в якомусь відеоредакторі.
Так, процес ще не автоматизований, але ви можете повністю налаштувати все під себе. Ви можете змінити модель генерації та модель і режим ControlNet, увімкнути або вимкнути попередню обробку чи будь-що інше, що забажаєте. Головне, не втратити хороші результати, а потім повторити все правильно, щоб створити анімацію.
Недоліки технології — для переходу не потрібно закладати багато роботи. Вище ми писали, що шумозаглушення впливає на кількість кроків. Може виявитися, що на виході буде дубльоване зображення, оскільки кілька значень усунення шумів будуть в межах однакової кількості кроків. Їх кількість можна спостерігати в автоматичному пульті.
Цю технологію можна використовувати в поєднанні з уповільнювачами інтерполятора, тобто надсиланням анімації для завершення відсутніх кадрів; це забезпечить більш плавні зміни.
Читайте більше пов’язаних статей:
відмова
Відповідно до Правила проекту Trust, будь ласка, зверніть увагу, що інформація, надана на цій сторінці, не призначена і не повинна тлумачитися як юридична, податкова, інвестиційна, фінансова або будь-яка інша форма консультації. Важливо інвестувати лише те, що ви можете дозволити собі втратити, і звернутися за незалежною фінансовою порадою, якщо у вас виникнуть сумніви. Щоб отримати додаткову інформацію, ми пропонуємо звернутися до положень та умов, а також до сторінок довідки та підтримки, наданих емітентом або рекламодавцем. MetaversePost прагне до точного, неупередженого звітування, але ринкові умови можуть змінюватися без попередження.
про автора
Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється.
інші статті
Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється.
