Go-with-the-Flow: il nuovo paradigma per il controllo dei video generati dall’AI | Giochi nuovi gratis download | Online games for PC | Play free games online without downloading | Turtles AI

Un innovativo modello AI, chiamato "Go-with-the-Flow", migliora la generazione di video con il controllo intuitivo del movimento di oggetti e telecamere attraverso semplici operazioni di taglia e trascina, senza aumentare il carico computazionale.

Punti chiave:

• Controllo intuitivo: manipolazione diretta del movimento con semplici interazioni grafiche.
• Versatilità: applicazione del trasferimento del movimento tra video e creazione di scene 3D.
• Efficienza tecnica: utilizzo di "rumore distorto" senza incrementare i tempi di calcolo.
• Accesso open source: codice disponibile su GitHub e Hugging Face per approfondimenti.

Il panorama dell’AI per la generazione di video compie un ulteriore passo in avanti grazie a "Go-with-the-Flow", un modello sviluppato congiuntamente da ricercatori di Netflix, Eyeline Studios, Stony Brook University, University of Maryland e Stanford University. Questo strumento consente di animare oggetti e gestire i movimenti della telecamera in modo semplice e intuitivo, trasformando il complesso processo di animazione in un’operazione accessibile anche a chi non ha competenze tecniche avanzate. La caratteristica principale del sistema risiede nella possibilità di controllare il movimento all’interno di una scena selezionando gli oggetti desiderati e definendo la loro traiettoria con un’operazione di trascinamento del mouse, un approccio simile a quello impiegato nei moderni software di editing video.

L’innovazione tecnica alla base di questo modello si basa sull’introduzione del "rumore distorto", che sostituisce il tradizionale rumore gaussiano utilizzato nei modelli di diffusione standard. Tale soluzione consente di ottenere un’animazione fluida e realistica senza aumentare il carico computazionale. Un’altra funzionalità interessante è il trasferimento del movimento, che permette di catturare i pattern di movimento da un video sorgente e applicarli a un video generato, offrendo un controllo creativo senza precedenti. Oltre alla gestione diretta del movimento, il modello supporta la generazione di scene 3D utilizzando unicamente segnali di movimento forniti come input testuali. Ad esempio, può ricreare animazioni di giradischi sfruttando i movimenti della telecamera generati tramite rendering tridimensionale.

Nonostante i progressi tecnologici, i risultati mostrano ancora segni di instabilità, soprattutto quando si tratta di persone e animali, in cui gli arti possono apparire confusi o sovrapposti. Tuttavia, la semplicità del processo, unita alla potenza di elaborazione e alla possibilità di personalizzazione del livello di controllo tramite la funzione di "degradazione del rumore", rende "Go-with-the-Flow" una risorsa fondamentale per la creazione di contenuti digitali.

Il codice del progetto è disponibile pubblicamente su piattaforme come GitHub e Hugging Face, aprendo le porte a ulteriori sviluppi e applicazioni. Sebbene Netflix non abbia confermato un coinvolgimento diretto nella realizzazione del modello, la partecipazione di due suoi ricercatori alimenta le speculazioni su un possibile interesse della piattaforma di streaming nell’adozione di tecnologie di AI per nuovi scenari creativi, come la generazione di contenuti video o videogiochi.

Con l’introduzione di "Go-with-the-Flow", il controllo della generazione video si evolve verso una nuova dimensione, dimostrando quanto la sinergia tra innovazione tecnologica e semplicità d’uso possa ridefinire il futuro della produzione audiovisiva.