NVIDIA je predstavila neuronsku mrežu za generiranje videa prema opisu
Miscelanea / / April 20, 2023
Ako želite gledati kako Imperial stormtrooper usisava plažu.
Tvrtka NVIDIA najavio novi VideoLDM AI model koji stvara kratke videozapise na temelju teksta. Razvijen je u suradnji s istraživačima sa Sveučilišta Cornell.
VideoLDM uzima u obzir do 4,1 milijardu parametara, od kojih je 2,7 milijardi uvježbano na videu. Generirani isječci mogu biti do 2048×1280 piksela u 24 sličice i imati trajanje do 4,7 sekundi.
Neuronska mreža je sposobna stvoriti i jednostavne scene s nekoliko riječi u zahtjevu i nešto složenije. Nekoliko primjera:
- Vatromet.
- Jurišnik usisava plažu.
- Putnik šeta sam maglovitom šumom na zalasku sunca.
Više primjera je uključeno web stranica projekta.
Ova NVIDIA neuronska mreža još nije u javnoj domeni. Predstavljen je kao istraživački rad u okviru Konferencije o strojnom vidu i prepoznavanju uzoraka.
Programeri su primijetili impresivan i brz napredak u učenju, ali nisu govorili o mogućoj budućnosti neuronske mreže. Ipak, možemo pretpostaviti da ćemo uskoro dobiti punopravni video analog sredina putovanja.
Pročitajte također🧐
- 10 usluga neuronske mreže za stvaranje videa
- 7 alata neuronske mreže za poboljšanje kvalitete videa
- Runway lansira novi model neuronske mreže za stvaranje videa iz tekstualnog opisa