• Dagospia

    "IA", SI GIRA! - GOOGLE HA PRESENTATO "LUMIERE", UN NUOVO MODELLO DI INTELLIGENZA ARTIFICIALE CAPACE DI CREARE VIDEO PARTENDO DA UNA FOTO O DA UN'ISTRUZIONE TESTUALE - A DIFFERENZA DEGLI ALTRI PROGRAMMI SIMILI CHE SONO GIÀ IN CIRCOLAZIONE, QUELLO DI "BIG G" RIESCE A CREARE IL FILMATO IN UN UNICO PASSAGGIO, RIDUCENDO AL MINIMO LE IMPERFEZIONI E INCONGRUENZE TRA UNA SEQUENZA E UN'ALTRA...


     
    Guarda la fotogallery

    google lumiere google lumiere

    (ANSA) - Google, insieme al Weizmann Institute of Science e all'Università di Tel Aviv, ha sviluppato un nuovo modello di intelligenza artificiale per la creazione di video a partire da foto e istruzioni testuali. Si chiama Lumiere, un chiaro omaggio ai fratelli francesi inventori della macchina da presa e del proiettore cinematografico. La novità di Lumiere IA, dal punto di vista tecnologico, è nella qualità con cui il software riesce a ricreare lo spostamento dei soggetti all'interno del filmato.

     

    google lumiere google lumiere

    Programmi come Stable Diffusion spesso mostrano imperfezioni dovute alla difficoltà di mantenere una certa coerenza nel rendere animate immagini statiche. A tal proposito, Google ha sviluppato un'architettura chiamata "Space-Time U-Net", una rete spazio-temporale, che genera tutto il video in un unico passaggio, senza creare cioè delle sequenze intermedie, che presenterebbero possibili incoerenze con le azioni precedenti e quelle successive. Il grosso del lavoro è svolto dall'intelligenza artificiale generativa che sceglie il movimento migliore dopo averne analizzati diversi, basandosi sul vasto database a cui hanno accesso i modelli di Big G, per restituire un video plausibile.

    google lumiere google lumiere

     

    Un esempio è quando inseriamo in Lumiere la foto di un peluche chiedendo al programma di farlo camminare da un punto A al punto B. Creando un'unica sequenza spazio-temporale, l'IA genera un filmato in cui ogni attività è strettamente legata l'un l'altra, con sintonia maggiore. Il modello video di Lumiere è stato addestrato su un set di dati di 30 milioni di video, insieme alle relative didascalie di testo. Al momento non è un software aperto al pubblico ma solo un progetto sperimentale di ricerca.

    google lumiere google lumiere

    Guarda la fotogallery


    ultimi Dagoreport