NVIDIA a introdus o rețea neuronală pentru generarea de videoclipuri după descriere
Miscelaneu / / April 20, 2023
Dacă ai vrut să urmărești un Stormtrooper Imperial care trece cu aspiratorul pe plajă.
Compania NVIDIA a anunţat un nou model VideoLDM AI care creează videoclipuri scurte bazate pe text. A fost dezvoltat în colaborare cu cercetătorii de la Universitatea Cornell.
VideoLDM ia în considerare până la 4,1 miliarde de parametri, dintre care 2,7 miliarde sunt antrenați pe video. Clipurile generate pot avea până la 2048×1280 pixeli la 24 de cadre și au o durată de până la 4,7 secunde.
Rețeaua neuronală este capabilă să creeze atât scene simple cu câteva cuvinte în cerere, cât și ceva mai complex. Câteva exemple:
- Focuri de artificii.
- Un Stormtrooper aspiră plaja.
- Un călător se plimbă singur într-o pădure cețoasă la apus.
Mai multe exemple sunt disponibile site-ul proiectului.
Această rețea neuronală NVIDIA nu este încă în domeniul public. A fost prezentată ca o lucrare de cercetare în cadrul Conferinței privind viziunea artificială și recunoașterea modelelor.
Dezvoltatorii au remarcat progrese impresionante și rapide în învățare, dar nu au vorbit despre posibilul viitor al rețelei neuronale. Cu toate acestea, putem presupune că în curând vom obține un video analog cu drepturi depline
mijlocul călătoriei.Citeste si🧐
- 10 servicii de rețea neuronală pentru crearea video
- 7 instrumente de rețea neuronală pentru a îmbunătăți calitatea video
- Runway lansează un nou model de rețea neuronală pentru crearea videoclipurilor dintr-o descriere text