Gen-1: AI generuje nowe filmy z istniejących, łącząc podpowiedzi i obrazy
W skrócie
Gen-1 to sieć neuronowa, która może generować nowe filmy z istniejących poprzez łączenie monity i obrazy.
Może być również używany do tworzenia zupełnie nowych filmów od podstaw.
Możliwość generowania nowych filmów z istniejących ma wiele potencjalnych zastosowań.
RunWayML, startup zajmujący się sztuczną inteligencją, ogłosił nowy produkt o nazwie Gen-1, sieć neuronowa, która może generować nowe filmy z istniejących, łącząc podpowiedzi i obrazy. Przez lata sieci neuronowe ograniczały się do zadania przenoszenia stylu, czyli procesu robienia zdjęcia i nadawania mu stylu innego obrazu. W ten sposób uzyskujemy te niezwykłe filmy transferowe w stylu głębokiego uczenia się, w których na przykład krajobraz jest renderowany w stylu Gwiaździstej nocy Van Gogha.
Teraz, dzięki Gen-1, sieci neuronowe mogą zrobić więcej niż tylko transfer stylów. Może generować nowe filmy od podstaw, używając monitów i obrazów jako danych wejściowych. Otwiera to zupełnie nowe możliwości dla Filmy stworzone przez sztuczną inteligencję. W tej chwili filmy generowane przez Gen-1 są krótkie i proste. Ale wraz z rozwojem technologii możemy spodziewać się bardziej złożonych i realistyczne filmy generowane przez sztuczną inteligencję.
| Polecany post: Zdrowie reprodukcyjne mężczyzn poprawia się dzięki oglądaniu filmów dla dorosłych w wirtualnej rzeczywistości |
Co to jest Gen-1?
Silne narzędzia do tworzenia i edycji obrazów są odblokowywane przez tekst generatywne modele dyfuzji. Chociaż zostały one zastosowane do tworzenia filmów wideo, obecne metody edycji zawartości już istniejącego materiału przy zachowaniu jego struktury wymagają kosztownego ponownego szkolenia dla każdego wejścia lub zależą od ryzykownej propagacji zmian obrazu między klatkami.
Deweloperzy opisują model rozpowszechniania wideo kierowanego strukturą i treścią, który zmienia filmy na podstawie pisemnych lub wizualnych opisów pożądanego rezultatu. Z powodu niewystarczającego oddzielenia powstają konflikty między modyfikacjami treści dostarczonymi przez użytkowników a reprezentacjami struktury. Pokazują one, że integralność struktury i treści może być kontrolowana poprzez trening jednoocznych szacunków głębokości z różnymi poziomami szczegółowości.
Syntezuj nowe filmy w realistyczny i spójny sposób, stosując kompozycję i styl obrazu lub zachęty tekstowej do struktury źródłowego wideo. To tak, jakby kręcić coś nowego, nie kręcąc właściwie niczego.
Przeniesienie stylu obrazu lub monitu do każdej klatki filmu może być świetnym sposobem na ujednolicenie projektu, nadanie mu nadrzędnego motywu wizualnego i zapewnienie spójności.
Dzięki zastosowaniu oprogramowania i kreatywnemu projektowi makiety można przekształcić w estetyczne i interaktywne rendery, które ożywią wizję użytkownika.
Dzięki funkcjom edycji wideo łatwo jest wyodrębnić fragmenty filmu i ulepszyć je za pomocą monitów tekstowych.
Stosowanie obrazu wejściowego lub podpowiedź renderowania bez tekstury mogą znacznie poprawić ich realizm, ożywiając modele 3D.
Runway Research zajmuje się budowaniem multimodalnych systemów AI, które umożliwiają nowe formy kreatywności. Gen-1 to kolejny z naszych kluczowych kroków naprzód w tej misji. Jeśli jesteś twórcą i chcesz eksperymentować z przyszłością opowiadania historii, poproś o dostęp poniżej.
Gen-1 może być również używany do tworzenia zupełnie nowych filmów od podstaw. Może być używany do wielu celów, w tym do tworzenia nowych wersji istniejących filmów lub tworzenia zupełnie nowych filmów. Ta wiadomość z pewnością zainteresuje filmowców i innych twórców, którzy zawsze szukają nowych sposobów na przesuwanie granic swojej sztuki. Dzięki Gen-1 mają teraz do dyspozycji nowe, potężne narzędzie.
Zdolność do generować nowe filmy z istniejących ma szereg potencjalnych zastosowań. Można go na przykład wykorzystać do tworzenia nowych wersji istniejących treści wideo, a więc do tworzenia alternatywnych wersji scen lub ujęć, które mogą być zbyt drogie lub trudne logistycznie do sfilmowania.
Możesz ubiegać się o korzystanie z modelu, gdy jest on w fazie testów beta tutaj.
Przeczytaj więcej o sztucznej inteligencji:
Odpowiedzialność
Zgodnie z Zaufaj wytycznym projektu, należy pamiętać, że informacje zawarte na tej stronie nie mają na celu i nie powinny być interpretowane jako porady prawne, podatkowe, inwestycyjne, finansowe lub jakiekolwiek inne formy porad. Ważne jest, aby inwestować tylko tyle, na utratę czego możesz sobie pozwolić, a w przypadku jakichkolwiek wątpliwości zasięgnąć niezależnej porady finansowej. Aby uzyskać więcej informacji, sugerujemy zapoznać się z warunkami oraz stronami pomocy i wsparcia udostępnianymi przez wydawcę lub reklamodawcę. MetaversePost zobowiązuje się do sporządzania dokładnych i bezstronnych raportów, jednakże warunki rynkowe mogą ulec zmianie bez powiadomienia.
O autorze
Damir jest liderem zespołu, menedżerem produktu i redaktorem w Metaverse Post, obejmujący takie tematy, jak AI/ML, AGI, LLM, Metaverse i Web3-pokrewne pola. Jego artykuły przyciągają każdego miesiąca ogromną publiczność, liczącą ponad milion użytkowników. Wydaje się być ekspertem z 10-letnim doświadczeniem w SEO i marketingu cyfrowym. Damir został wspomniany w Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i inne publikacje. Jako cyfrowy koczownik podróżuje między ZEA, Turcją, Rosją i WNP. Damir uzyskał tytuł licencjata z fizyki, co jego zdaniem dało mu umiejętności krytycznego myślenia potrzebne do odniesienia sukcesu w ciągle zmieniającym się środowisku internetowym.
Więcej artykułów
Damir jest liderem zespołu, menedżerem produktu i redaktorem w Metaverse Post, obejmujący takie tematy, jak AI/ML, AGI, LLM, Metaverse i Web3-pokrewne pola. Jego artykuły przyciągają każdego miesiąca ogromną publiczność, liczącą ponad milion użytkowników. Wydaje się być ekspertem z 10-letnim doświadczeniem w SEO i marketingu cyfrowym. Damir został wspomniany w Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i inne publikacje. Jako cyfrowy koczownik podróżuje między ZEA, Turcją, Rosją i WNP. Damir uzyskał tytuł licencjata z fizyki, co jego zdaniem dało mu umiejętności krytycznego myślenia potrzebne do odniesienia sukcesu w ciągle zmieniającym się środowisku internetowym.
