{"id":9446,"date":"2024-01-24T09:26:57","date_gmt":"2024-01-24T09:26:57","guid":{"rendered":"https:\/\/dailyai.com\/?p=9446"},"modified":"2024-01-24T12:56:28","modified_gmt":"2024-01-24T12:56:28","slug":"google-unveils-lumiere-a-text-to-video-diffusion-model","status":"publish","type":"post","link":"https:\/\/dailyai.com\/it\/2024\/01\/google-unveils-lumiere-a-text-to-video-diffusion-model\/","title":{"rendered":"Google presenta Lumiere, un modello di diffusione da testo a video"},"content":{"rendered":"

Google Research ha presentato Lumiere, un modello di diffusione da testo a video che crea video straordinariamente realistici a partire da messaggi di testo o immagini.<\/strong><\/p>\n

Le immagini fisse generate da strumenti come Viaggio intermedio<\/a> o DALL-E sono incredibili, ma il text-to-video (TTV) \u00e8 comprensibilmente rimasto indietro e finora \u00e8 stato molto meno impressionante.<\/p>\n

I modelli TTV come quelli di Pika Labs o Stable Video Diffusion hanno fatto molta strada negli ultimi 12 mesi, ma il realismo e la continuit\u00e0 del movimento sono ancora un po' goffi.<\/p>\n

Lumiere rappresenta un grande passo avanti nel settore TTV grazie a un approccio innovativo alla generazione di video coerenti dal punto di vista spaziale e temporale. In altre parole, l'obiettivo \u00e8 che le scene in ogni fotogramma rimangano visivamente coerenti e che i movimenti siano fluidi.<\/p>\n

Cosa pu\u00f2 fare Lumiere?<\/h2>\n

Lumiere dispone di una serie di funzionalit\u00e0 di generazione video, tra cui le seguenti:<\/p>\n

    \n
  • Da testo a video<\/strong> - Inserendo una richiesta di testo, Lumiere genera un videoclip di 5 secondi composto da 80 fotogrammi a 16 fotogrammi al secondo.<\/li>\n
  • Da immagine a video<\/strong> - Lumiere prende come spunto un'immagine e la trasforma in un video.<\/li>\n
  • Generazione stilizzata<\/strong> - \u00c8 possibile utilizzare un'immagine come riferimento di stile. Lumiere utilizza una richiesta di testo per generare un video nello stile dell'immagine di riferimento.<\/li>\n
  • Stilizzazione video<\/strong> - Lumiere pu\u00f2 modificare un video sorgente per adattarlo a una richiesta di testo stilistica.<\/li>\n
  • Cinemagraphs<\/strong> - Selezionando una regione in un'immagine fissa, Lumiere animer\u00e0 quella parte dell'immagine.<\/li>\n
  • Video inpainting<\/strong> - Lumiere pu\u00f2 prendere una scena video mascherata e dipingerla per completare il video. Pu\u00f2 anche modificare il video sorgente rimuovendo o sostituendo elementi nella scena.<\/li>\n<\/ul>\n

    Il video qui sotto mostra alcuni degli impressionanti video che Lumiere pu\u00f2 generare.<\/p>\n