Ulat sa Balita
Nobyembre 10, 2022

Meet video inpainting: text-driven na pag-edit gamit ang Stable Diffusion at Neural Atlases

Sa madaling sabi

Ang AI ay humahantong sa mga bagong tool sa pag-edit ng video para sa mga editor ng video – narito kung paano

Binabago ng artificial intelligence ang mukha ng pag-edit ng video. Ginagawang posible ng mga bagong tool na pinapagana ng AI ang mga video editor na gumana nang mas mabilis at mas matalino. Ang isa sa mga pinaka-promising na application ng AI sa pag-edit ng video ay ang awtomatikong pag-edit ng video. Dito sinusuri ng AI system ang footage ng video at gumagawa ng mga pag-edit nang naaayon. Ito ay maaaring maging isang malaking time-saver para sa video mga editor, na kadalasang kailangang dumaan sa mga oras ng footage upang mahanap ang pinakamahusay na mga kuha.

Meet video inpainting: text-driven na pag-edit sa pamamagitan ng Neural Atlases at Stable Diffusion

Symbiosis ng dalawang modelo ng AI, Neural Atlases at Stable Diffusion, na humantong sa paglikha ng bagong software para sa mga video editor na hinahayaan kang mag-edit at magpalit ng mga bagay sa video gamit ang mga text prompt. Kapansin-pansin kung paano nilikha ang mga bagong tool — tulad ng button na “gumawa ng maganda” — na dati ay naiisip lamang mula sa iba't ibang AI suit.

Nagbibigay ito ng pamamaraan para sa pagdaragdag ng teksto sa mga natural na nagaganap na mga larawan at video upang baguhin ang kanilang hitsura. Ang layunin ay magdagdag ng mga bagong visual sa eksena (tulad ng usok o apoy) o baguhin ang hitsura ng mga umiiral na bagay (tulad ng texture ng bagay) sa isang makabuluhang paraan, na binigyan ng input na imahe o video at isang target na text cue. Ang ganitong diskarte ay gumagamit ng isang panlabas na pre-trained na modelo ng CLIP upang kalkulahin ang pagkawala habang sinasanay ang generator gamit ang isang panloob na koleksyon ng mga sample ng pagsasanay na ginawa mula sa isang input (isang larawan o video at isang target na text prompt). Ang pangunahing konsepto ay upang makabuo ng isang nababagong layer (kulay at transparency) sa ibabaw ng orihinal na input sa halip na direktang bumuo ng isang na-edit na kinalabasan.

Walang alinlangan na ito ang huling araw para sa mga kompositor ng video; tingnan ang paglalarawan. Dito, hindi lamang sila lumikha ng sariwang nilalaman gamit ang mga maskara ngunit mahusay din at malinaw na binubuo ito.

Ni isang pre-trained na generator o mga maskara sa pag-edit na ibinigay ng gumagamit ay hindi kinakailangan para sa pamamaraang ito. Bilang resulta, maaari itong gumawa ng mga naka-target na semantic na pagbabago sa mataas na resolution video at natural na mga larawan ng iba't ibang bagay at senaryo.

Higit pang mga halimbawa ng video ang ibinigay sa ibaba:

Gamit ang bagong tool na ito, ang mga video editor ay may hindi mabilang na mga creative na opsyon para sa paggawa ng mga natatanging video. Lahat ng mga bagong tool na ito na pinapagana ng AI ay ginagawang mas madali at mas mahusay ang pag-edit ng video. Habang patuloy na umuunlad ang AI, maaari nating asahan na makakita ng higit pang bago at kapana-panabik na mga tool sa pag-edit ng video sa hinaharap.

Magbasa nang higit pa:

Pagtanggi sa pananagutan

Sa linya na may Mga alituntunin ng Trust Project, pakitandaan na ang impormasyong ibinigay sa pahinang ito ay hindi nilayon at hindi dapat bigyang-kahulugan bilang legal, buwis, pamumuhunan, pananalapi, o anumang iba pang paraan ng payo. Mahalagang mamuhunan lamang kung ano ang maaari mong mawala at humingi ng independiyenteng payo sa pananalapi kung mayroon kang anumang mga pagdududa. Para sa karagdagang impormasyon, iminumungkahi naming sumangguni sa mga tuntunin at kundisyon pati na rin sa mga pahina ng tulong at suporta na ibinigay ng nagbigay o advertiser. MetaversePost ay nakatuon sa tumpak, walang pinapanigan na pag-uulat, ngunit ang mga kondisyon ng merkado ay maaaring magbago nang walang abiso.

Tungkol sa Ang May-akda

Si Damir ang pinuno ng pangkat, tagapamahala ng produkto, at editor sa Metaverse Post, sumasaklaw sa mga paksa gaya ng AI/ML, AGI, LLMs, Metaverse, at Web3-mga kaugnay na larangan. Ang kanyang mga artikulo ay umaakit ng napakalaking madla na mahigit sa isang milyong user bawat buwan. Mukhang isa siyang eksperto na may 10 taong karanasan sa SEO at digital marketing. Nabanggit si Damir sa Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, at iba pang publikasyon. Naglalakbay siya sa pagitan ng UAE, Turkey, Russia, at ng CIS bilang digital nomad. Nakamit ni Damir ang bachelor's degree sa physics, na pinaniniwalaan niyang nagbigay sa kanya ng mga kritikal na kasanayan sa pag-iisip na kailangan para maging matagumpay sa pabago-bagong tanawin ng internet. 

Mas marami pang artikulo
Damir Yalalov
Damir Yalalov

Si Damir ang pinuno ng pangkat, tagapamahala ng produkto, at editor sa Metaverse Post, sumasaklaw sa mga paksa gaya ng AI/ML, AGI, LLMs, Metaverse, at Web3-mga kaugnay na larangan. Ang kanyang mga artikulo ay umaakit ng napakalaking madla na mahigit sa isang milyong user bawat buwan. Mukhang isa siyang eksperto na may 10 taong karanasan sa SEO at digital marketing. Nabanggit si Damir sa Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, at iba pang publikasyon. Naglalakbay siya sa pagitan ng UAE, Turkey, Russia, at ng CIS bilang digital nomad. Nakamit ni Damir ang bachelor's degree sa physics, na pinaniniwalaan niyang nagbigay sa kanya ng mga kritikal na kasanayan sa pag-iisip na kailangan para maging matagumpay sa pabago-bagong tanawin ng internet. 

Hot Stories
Sumali sa Aming Newsletter.
Pinakabagong Balita

Ang Institutional Appetite ay Lumalaki Patungo sa Bitcoin ETFs Sa gitna ng Volatility

Ang mga pagsisiwalat sa pamamagitan ng 13F filing ay nagpapakita ng mga kilalang institusyonal na mamumuhunan na nakikipag-ugnayan sa mga Bitcoin ETF, na binibigyang-diin ang lumalaking pagtanggap ng ...

Malaman Higit Pa

Dumating na ang Araw ng Pagsentensiya: Ang Kapalaran ni CZ ay Nagbabalanse habang Isinasaalang-alang ng Korte ng US ang Panawagan ng DOJ

Si Changpeng Zhao ay handang harapin ang sentensiya sa korte ng US sa Seattle ngayon.

Malaman Higit Pa
Sumali sa Aming Innovative Tech Community
Magbasa Pa
Magbasa nang higit pa
Ipinakilala ng Morph ang Holesky Testnet Nito Sa Optimistic na zkEVM Integration, Bridge Mechanism at Decentralized Sequencer Network Features
Ulat sa Balita Teknolohiya
Ipinakilala ng Morph ang Holesky Testnet Nito Sa Optimistic na zkEVM Integration, Bridge Mechanism at Decentralized Sequencer Network Features
Mayo 6, 2024
Ang Robinhood Crypto ay Nakatanggap ng Wells Notice Mula sa Securities And Exchange Commission Tungkol sa Di-umano'y Mga Paglabag sa Securities
markets Ulat sa Balita Teknolohiya
Ang Robinhood Crypto ay Nakatanggap ng Wells Notice Mula sa Securities And Exchange Commission Tungkol sa Di-umano'y Mga Paglabag sa Securities
Mayo 6, 2024
Ini-deploy ang QuickSwap Sa X Layer Mainnet At Pinapalawak ang Polygon CDK Network Gamit ang Citadel Launch
Ulat sa Balita Teknolohiya
Ini-deploy ang QuickSwap Sa X Layer Mainnet At Pinapalawak ang Polygon CDK Network Gamit ang Citadel Launch 
Mayo 6, 2024
Pinasimulan ng Layer 2 Network Linea ang ZERO Token Claiming For ZeroLend Airdrop Mga Gumagamit At Namumuhunan
markets Ulat sa Balita Teknolohiya
Pinasimulan ng Layer 2 Network Linea ang ZERO Token Claiming For ZeroLend Airdrop Mga Gumagamit At Namumuhunan
Mayo 6, 2024
CRYPTOMERIA LABS PTE. LTD.