Gen-1: AI Menghasilkan Video Baru Dari Yang Sudah Ada dengan Menggabungkan Petunjuk dan Gambar
Singkatnya
Gen-1 adalah jaringan saraf yang dapat menghasilkan video baru dari yang sudah ada dengan menggabungkan petunjuk dan gambar.
Itu juga dapat digunakan untuk membuat video yang sama sekali baru dari awal.
Kemampuan untuk menghasilkan video baru dari yang sudah ada memiliki sejumlah aplikasi potensial.
RunWayML, startup kecerdasan buatan, telah mengumumkan produk baru bernama Gen-1, jaringan saraf yang dapat menghasilkan video baru dari yang sudah ada dengan menggabungkan perintah dan gambar. Selama bertahun-tahun, jaringan saraf terbatas pada tugas transfer gaya, yaitu proses mengambil gambar dan menerapkan gaya gambar lain ke dalamnya. Beginilah cara kami mendapatkan video transfer gaya pembelajaran mendalam trippy di mana, misalnya, lanskap ditampilkan dalam gaya Malam Berbintang karya Van Gogh.
Sekarang, dengan Gen-1, jaringan saraf dapat melakukan lebih dari sekadar transfer gaya. Itu dapat menghasilkan video baru dari awal, menggunakan petunjuk dan gambar sebagai masukan. Ini membuka berbagai kemungkinan baru untuk video buatan AI. Saat ini, video yang dihasilkan Gen-1 pendek dan sederhana. Namun seiring perkembangan teknologi, kita dapat berharap untuk melihat lebih kompleks dan video realistis yang dihasilkan oleh AI.
| Postingan yang direkomendasikan: Kesehatan reproduksi pria ditingkatkan dengan menonton video dewasa dalam realitas virtual |
Apa itu Gen-1?
Alat pembuatan dan pengeditan gambar yang kuat dibuka dengan panduan teks model difusi generatif. Meskipun ini telah diterapkan pada pembuatan video, metode saat ini untuk mengedit konten dari materi yang sudah ada sambil mempertahankan strukturnya memerlukan pelatihan ulang yang mahal untuk setiap input atau bergantung pada penyebaran berisiko dari perubahan gambar antar bingkai.
Pengembang mendeskripsikan model untuk difusi video yang dipandu struktur dan konten, yang mengubah film berdasarkan deskripsi tertulis atau visual dari hasil yang diinginkan. Karena pemisahan yang tidak memadai, konflik antara modifikasi konten yang disediakan pengguna dan representasi struktur muncul. Mereka menunjukkan bahwa integritas struktur dan konten dapat dikendalikan dengan pelatihan estimasi kedalaman bermata dengan berbagai tingkat detail.
Sintesis video baru dengan cara yang realistis dan konsisten dengan menerapkan komposisi dan gaya gambar atau perintah teks ke struktur video sumber Anda. Ini seperti memfilmkan sesuatu yang baru tanpa benar-benar memfilmkan apa pun.
Mentransfer gaya gambar atau perintah ke setiap bingkai video dapat menjadi cara yang bagus untuk menyatukan proyek Anda, memberikannya tema visual menyeluruh, dan menciptakan konsistensi.
Melalui penggunaan perangkat lunak dan desain kreatif, maket dapat diubah menjadi render yang menyenangkan secara estetika dan interaktif yang menghidupkan visi pengguna.
Dengan fitur pengeditan video, mudah untuk mengisolasi bagian video dan menyempurnakannya dengan perintah teks.
Menerapkan gambar masukan atau cepat hingga render yang tidak bertekstur dapat meningkatkan realismenya secara signifikan, menjadikan model 3D menjadi hidup.
Runway Research didedikasikan untuk membangun sistem AI multimodal yang memungkinkan bentuk kreativitas baru. Gen-1 mewakili satu lagi langkah penting kami ke depan dalam misi ini. Jika Anda seorang kreatif yang ingin bereksperimen dengan masa depan mendongeng, mintalah akses di bawah.
Gen-1 juga dapat digunakan untuk membuat video yang benar-benar baru dari awal. Ini dapat digunakan untuk beberapa tujuan, termasuk membuat versi baru dari film yang ada atau membuat film baru sama sekali. Berita ini pasti akan menggairahkan pembuat film dan kreatif lainnya yang selalu mencari cara baru untuk mendorong batas seni mereka. Dengan Gen-1, mereka sekarang memiliki alat canggih baru yang dapat mereka gunakan.
Kemampuan untuk menghasilkan video baru dari yang sudah ada memiliki sejumlah aplikasi potensial. Misalnya, ini dapat digunakan untuk membuat versi baru dari konten video yang ada, sehingga dapat digunakan untuk membuat versi alternatif dari adegan atau bidikan yang mungkin terlalu mahal atau secara logistik sulit untuk dibuat filmnya.
Anda dapat mengajukan permohonan untuk menggunakan model saat sedang dalam pengujian beta di sini.
Baca lebih lanjut tentang AI:
Penolakan tanggung jawab
Sejalan dengan Percayai pedoman Proyek, harap dicatat bahwa informasi yang diberikan pada halaman ini tidak dimaksudkan untuk dan tidak boleh ditafsirkan sebagai nasihat hukum, pajak, investasi, keuangan, atau bentuk nasihat lainnya. Penting untuk hanya menginvestasikan jumlah yang mampu Anda tanggung kerugiannya dan mencari nasihat keuangan independen jika Anda ragu. Untuk informasi lebih lanjut, kami menyarankan untuk merujuk pada syarat dan ketentuan serta halaman bantuan dan dukungan yang disediakan oleh penerbit atau pengiklan. MetaversePost berkomitmen terhadap pelaporan yang akurat dan tidak memihak, namun kondisi pasar dapat berubah tanpa pemberitahuan.
Tentang Penulis
Damir adalah pemimpin tim, manajer produk, dan editor di Metaverse Post, mencakup topik seperti AI/ML, AGI, LLM, Metaverse, dan Web3-bidang terkait. Artikelnya menarik lebih dari satu juta pengguna setiap bulan. Dia tampaknya ahli dengan pengalaman 10 tahun dalam SEO dan pemasaran digital. Damir telah disebutkan dalam Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, dan publikasi lainnya. Dia melakukan perjalanan antara UEA, Turki, Rusia, dan CIS sebagai pengembara digital. Damir memperoleh gelar sarjana dalam bidang fisika, yang menurutnya telah memberinya keterampilan berpikir kritis yang diperlukan untuk berhasil dalam lanskap internet yang selalu berubah.
lebih artikel
Damir adalah pemimpin tim, manajer produk, dan editor di Metaverse Post, mencakup topik seperti AI/ML, AGI, LLM, Metaverse, dan Web3-bidang terkait. Artikelnya menarik lebih dari satu juta pengguna setiap bulan. Dia tampaknya ahli dengan pengalaman 10 tahun dalam SEO dan pemasaran digital. Damir telah disebutkan dalam Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, dan publikasi lainnya. Dia melakukan perjalanan antara UEA, Turki, Rusia, dan CIS sebagai pengembara digital. Damir memperoleh gelar sarjana dalam bidang fisika, yang menurutnya telah memberinya keterampilan berpikir kritis yang diperlukan untuk berhasil dalam lanskap internet yang selalu berubah.
