La nuova fotocamera virtuale di Stability AI trasforma qualsiasi foto in uno straordinario video 3D e sono rimasto colpito dalla qualità.

Da anni i video basati sull'intelligenza artificiale aggiungono movimento e vita a testi e immagini, ma ora stanno letteralmente aggiungendo una nuova dimensione trasformando le immagini 2D in video 3D. Questa tecnologia rappresenta un'aggiunta qualitativa al campo dell'intelligenza artificiale generativa per i video.

Il nuovo strumento Stable Virtual Camera dell'azienda è progettato per elaborare anche una singola immagine e trasformarla in un video animato multiprospettico, il che significa che è possibile ruotare il video e visualizzarlo da qualsiasi angolazione. Questo strumento semplifica la creazione di contenuti video 3D innovativi.

Questo concetto non è del tutto nuovo, poiché le telecamere virtuali sono da tempo un elemento fondamentale nel cinema e nell'animazione, consentendo ai creatori di navigare e manipolare scene digitali. Ma Stability AI prende questo concetto e vi aggiunge una forte dose di intelligenza artificiale generativa. Il risultato è che, invece di richiedere una ricostruzione dettagliata della scena 3D o impostazioni della telecamera calibrate con precisione, Stable Virtual Camera consente agli utenti di creare un movimento 3D fluido e con profondità accurata anche da una singola immagine, il tutto con il minimo sforzo.

Ciò che distingue questo strumento dagli altri strumenti di generazione video basati sull'intelligenza artificiale è il fatto che non procede a tentoni nelle animazioni e non si basa su enormi set di dati o sulla ricostruzione fotogramma per fotogramma. Stable Virtual Camera utilizza un processo di propagazione multi-vista per generare nuove angolazioni basate sull'immagine fornita, in modo che il risultato assomigli a un modello che potrebbe realmente esistere nel mondo reale. Questo approccio aumenta il realismo dei video risultanti.

Lo strumento consente agli utenti di controllare i percorsi della telecamera con precisione cinematografica, scegliendo tra azioni come zoom, orbita o persino un percorso a spirale. Il video risultante può essere in formato verticale per dispositivi mobili o widescreen. La fotocamera predefinita può elaborare solo un'immagine, ma può gestirne fino a 32.

Stability AI ha reso disponibile il modello con licenza non commerciale per scopi di ricerca. Ciò significa che se hai qualche competenza tecnica puoi provarlo scaricando il codice da GitHub. Essendo open source, come solitamente è Stability AI, significa anche che la comunità degli sviluppatori di intelligenza artificiale può migliorare ed espandere le capacità della telecamera virtuale senza dover sostenere alcun costo per l'azienda.

IA 3D

Naturalmente, nessun modello di intelligenza artificiale è perfetto e Stability AI è sincero nel sottolineare che i difetti sono ancora in fase di elaborazione. Se speri di creare persone e animali realistici, o materiali con texture particolarmente disordinate (come l'acqua), potresti ottenere qualcosa degno di un film horror a basso budget.

Non sorprenderti se vedi video realizzati con questo strumento che mostrano prospettive che si muovono in modo strano sugli oggetti o che presentano spostamenti di prospettiva che producono effetti tremolanti e spettrali. Resta da vedere se questo strumento verrà ampiamente adottato o se sarà solo l'ennesimo strumento di intelligenza artificiale trascurato dai registi di nicchia.

Per non parlare della concorrenza che deve affrontare con strumenti di intelligenza artificiale come Sora, Pika, Runway, Pollo di OpenAI e Dream Machine di Luma Labs. Stable Virtual Camera dovrà dimostrare il suo valore nel mondo reale della produzione cinematografica per andare oltre l'ennesimo divertente video dimostrativo.