Luma AI, una società sostenuta da a16z specializzata in video AI e modelli 3D, rilasciato Ray3 Modify, un nuovo modello che consente agli utenti di modificare filmati esistenti utilizzando immagini di riferimento dei personaggi preservando la performance originale. Gli utenti forniscono fotogrammi iniziali e finali per generare filmati di transizione, affrontando le sfide di conservazione per gli studi creativi. Ray3 Modify affronta i problemi relativi al mantenimento delle prestazioni umane durante l’editing basato sull’intelligenza artificiale o la generazione di effetti. Il modello aderisce strettamente al metraggio in ingresso, consentendo agli studi di impiegare attori umani in produzioni creative o di marca. Mantiene in particolare il movimento, il tempismo, la linea degli occhi e la consegna emotiva originali dell’attore mentre trasforma la scena. Gli utenti inseriscono un riferimento al personaggio per alterare l’aspetto dell’attore umano nel personaggio specificato all’interno del filmato. Questo processo preserva dettagli come costumi, somiglianza e identità durante l’intera ripresa. Tali funzionalità garantiscono elementi visivi coerenti tra le sequenze senza riprese aggiuntive. I creatori forniscono anche fotogrammi di riferimento iniziale e finale per produrre segmenti video con Ray3 Modify. Questa funzione aiuta a dirigere transizioni fluide o a specificare movimenti e comportamenti dei personaggi. La continuità tra le scene rimane intatta, supportando strutture narrative complesse nei progetti video. Amit Jain, co-fondatore e CEO di Luma AI, ha dichiarato: “I modelli video generativi sono incredibilmente espressivi ma anche difficili da controllare. Oggi siamo entusiasti di presentare Ray3 Modify che fonde il mondo reale con l’espressività dell’intelligenza artificiale, dando al contempo il pieno controllo ai creativi. Ciò significa che i team creativi possono catturare performance con una fotocamera e quindi modificarle immediatamente per essere in qualsiasi luogo immaginabile, cambiare costumi o persino tornare indietro e riprendere la scena con l’intelligenza artificiale, senza ricreare le riprese fisiche”. https://www.youtube.com/watch?v=4s-wRxtSKC0 Il modello si integra direttamente nella piattaforma Dream Machine di Luma, rendendola immediatamente accessibile agli utenti. Luma si posiziona contro concorrenti tra cui Runway e Kling nello spazio di generazione di video AI. La società ha introdotto le prime funzionalità di modifica video nel giugno 2025. Questa versione fa seguito a un round di finanziamento da 900 milioni di dollari annunciato a novembre, guidato da Humain, una società di intelligenza artificiale di proprietà del Fondo di investimento pubblico dell’Arabia Saudita. Gli investitori esistenti a16z, Amplify Partners e Matrix Partners si sono uniti al round, fornendo un capitale sostanziale per l’espansione. https://static.cdn-luma.com/files/sanity/c9df5066-d549-4793-9dbb-fdff8ae16fba.mp4
Video: Luma
Luma prevede di costruire un cluster AI da 2 GW in Arabia Saudita in collaborazione con Humain. Questa iniziativa infrastrutturale supporta la scalabilità delle risorse computazionali per operazioni avanzate di modellazione video e 3D con intelligenza artificiale.
