AI Wiki
Març 06, 2023

Com generar animació de morphing d'imatges amb ControlNet

A causa d'un experiment anterior conduird, teníem la idea d'utilitzar ControlNet per al morphing. Només llavors vam canviar a utilitzar el model depth2img, que pot crear una imatge a partir d'un mapa de profunditat, en lloc de ControlNet. I ControlNet pot funcionar no només en profunditat. Aquesta publicació té més informació sobre la tècnica.

Com generar animació de morphing d'imatges amb ControlNet

Us faré un breu resum del procediment. L'opció de força de reducció de soroll, que afecta el nombre de passos durant la generació, està disponible si generem una imatge a img2img. Per exemple, amb passos = 30 i força de soroll = 0.5, només quedaran 15 passos per crear. Aquest raonament es pot aplicar per animar el morf. Podeu transformar qualsevol imatge; els retrats no són els únics que es poden fer.

Fes la foto original. Activeu ControlNet mentre deixeu el quadre d'imatge en blanc. Trieu la llavor que sigui -1 per generar proves aleatòries; el recompte de lots influeix en la seva quantitat. Podeu experimentar amb els paràmetres de guia, el pes de la targeta rebuda i el mode ControlNet. Si us agrada la generació, arrossegueu-la amb el ratolí fins a img2img i després repetiu el procés, buscant la imatge que acabarà esdevenint la segona imatge. A mesura que es completa cada imatge, sorgeix la qüestió de com crear una animació. (Per començar, recordeu establir el recompte de lots a 1 per evitar crear fotos addicionals.)

Utilitzarem una solució intrigant ara mateix, però més endavant parlaré dels seus defectes.

S'utilitzarà la trama XYZ; l'has de triar a la llista de Scripts. Ens permetrà crear no només la imatge final, sinó també la transició des de la imatge d'origen.

Els valors X els posem a la línia que diu:

0.0.296.0.39.0.459.0.515.0.563.0.606.0.644.0.68.0.713.0.743.0.772.0.799.0.825.0.85.0.874.0.897.0.919.0.94.0.961.

Això vol dir que quan comenci la generació, rebrem 21 imatges en comptes de només una (el nombre de valors separats per comes). Per què hi ha aquesta línia? Per exemple, pot aparèixer de manera diferent.

Aquest format fa que sigui més fàcil d'entendre: sol·liciteu 20 imatges de l'automatitzat i li demaneu que demostri com afectarà el reducció de soroll en el resultat per a valors que van de 0 a 1. L'inconvenient de la segona opció és que provoca un canvi lineal en els valors. , a causa de les característiques del denoise, no sembla ser un morphing realista. Els nombres propers a zero gairebé no tenen cap efecte en el resultat. i en nivells superiors a 0.5, , comença a influir molt notablement.

Com a resultat, la primera línia és una corba del tipus x.4, o x augmentada en 0.4. Una funció recta i lineal i una corba, que produiran una sortida més precisa, es contrasten a la imatge. Podeu utilitzar una batedora per crear una cadena d'aquest tipus.

Heu de triar la quantitat de fotogrames per a la transició abans de crear la vostra línia. Es pot editar a la configuració del projecte.

Heu de realitzar diversos passos per obtenir una línia. Primer, experimenta amb la forma de la corba. Per aconseguir-ho, seleccioneu "Suprimeix fotogrames clau" al menú contextual del paràmetre d'animació.

Aquí teniu la fórmula per obtenir la corba; el paràmetre es va tornar blau, indicant que el conductor hi està operant.

Podeu jugar amb el valor aquí. 4. Però, evita anar massa baix. frame/21 denota un canvi de valor de 0 a 1 al fotograma 0 al fotograma 21. Només queden valors entre 1 i 20 fotogrames.

No obstant això, les claus no són el conductor. Primer s'han de preparar. Per fer-ho, feu clic a Objecte > Animació > Acció de cocció a la finestra 3D i, a continuació, feu clic a D'acord.

Tanmateix, això afectarà totes les claus possibles de l'objecte i s'haurien de suprimir. Seleccioneu-ho tot excepte la primera línia i premeu X al teclat (el ratolí hauria d'estar situat sota la llista).

I ara, per obtenir la línia del costat esquerre de la pantalla, feu clic a jugar i obriu la finestra de la consola.

Teniu una cadena que es pot copiar.

Ara, per fer l'animació, heu de fer aquest procés per separat per a cada posició de la imatge que es va fer al principi i després muntar-la en animació en algun editor de vídeo.

Sí, el procés encara no està automatitzat, però podeu personalitzar-ho tot per vosaltres mateixos. Podeu canviar el model de generació i el model i el mode de ControlNet, activar o desactivar el preprocés o qualsevol altra cosa que vulgueu. El més important és no perdre bons resultats i després repetir-ho tot correctament per crear animació.

Desavantatges de la tecnologia: no hauríeu de posar moltes bases per a la transició. Hem escrit més amunt que el soroll afecta el nombre de passos. Pot resultar que la sortida duplicarà les imatges, ja que diversos valors de reducció de soroll estaran dins del mateix nombre de passos. El seu nombre es pot observar a la consola automàtica.

Aquesta tecnologia es pot utilitzar conjuntament amb retardadors d'interpolació, és a dir, enviant l'animació per completar els fotogrames que falten; això donarà canvis més suaus.

Font original

Llegeix més articles relacionats:

etiquetes:

renúncia

En línia amb la Directrius del projecte Trust, si us plau, tingueu en compte que la informació proporcionada en aquesta pàgina no pretén ni s'ha d'interpretar com a assessorament legal, fiscal, d'inversió, financer o de cap altra forma. És important invertir només el que et pots permetre perdre i buscar assessorament financer independent si tens dubtes. Per obtenir més informació, us suggerim que feu referència als termes i condicions, així com a les pàgines d'ajuda i assistència proporcionades per l'emissor o l'anunciant. MetaversePost es compromet a fer informes precisos i imparcials, però les condicions del mercat estan subjectes a canvis sense previ avís.

About The Autor

Damir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet. 

més articles
Damir Yalalov
Damir Yalalov

Damir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet. 

L'apetit institucional creix cap als ETF de Bitcoin enmig de la volatilitat

Les divulgacions a través de les presentacions 13F revelen inversors institucionals notables que s'estan incursionant en els ETF de Bitcoin, subratllant una acceptació creixent de...

saber Més

Arriba el dia de la sentència: el destí de CZ està en equilibri mentre el tribunal nord-americà considera la petició del DOJ

Changpeng Zhao està a punt d'enfrontar-se avui a la sentència en un tribunal dels Estats Units a Seattle.

saber Més
Uneix-te a la nostra comunitat tecnològica innovadora
Més...
Llegeix més
Med-Gemini de Google està disposat a donar un avantatge a GPT-4 Amb el seu rendiment superior en salut
AI Wiki Notícies Software Tecnologia
Med-Gemini de Google està disposat a donar un avantatge a GPT-4 Amb el seu rendiment superior en salut
Pot 2, 2024
El renaixement de l'IA en el desenvolupament de jocs el 2024
AI Wiki Metaversa Wiki Educació mercats Software Tecnologia
El renaixement de l'IA en el desenvolupament de jocs el 2024
Pot 1, 2024
Possibles reptes d'integrar la IA als contractes intel·ligents alhora que equilibra la innovació i la seguretat
AI Wiki Seguretat Wiki Software Històries i ressenyes Tecnologia
Possibles reptes d'integrar la IA als contractes intel·ligents alhora que equilibra la innovació i la seguretat
Abril 29, 2024
Les monedes d'IA que fan onades al món criptogràfic: rendiment, casos d'ús i què passa
AI Wiki Cripto Wiki Històries i ressenyes Tecnologia
Les monedes d'IA que fan onades al món criptogràfic: rendiment, casos d'ús i què passa
Abril 26, 2024
CRYPTOMERIA LABS PTE. LTD.