Adobe gav en förhandsvisning av experimentella generativa AI-verktyg för redigering av video och ljud på sin Adobe Max-konferens.
Adobe använder sina "Sneaks"-presentationer för att visa upp den senaste tekniken som deras ingenjörer arbetar med och det ser ut som om generativ AI är på väg att förändra videoredigering på ett stort sätt.
Firefly Image 2 och Project Stardust var Adobe Max huvudnummer för att använda generativ AI för att redigera bilder, men fram till nu har det inte funnits liknande verktyg för video.
Project Fast Fill gör det möjligt för en redigerare att lägga till eller ta bort element i videoscener lika enkelt som att redigera en stillbild. Funktionen drivs av Adobe Firefly. En användare kan redigera en enda bildruta med hjälp av enkla textmeddelanden, och sedan fortsätter Project Fast Fill redigeringen genom resten av bildrutorna.
Ett exempel som Adobe visade var hur lätt det var att ta bort människor som gick i bakgrunden av en scen.
Och efter redigeringen, här är resultatet:
I det andra exemplet valdes ett område på en mans skjorta och när man sedan skrev in textmeddelandet "slips" genererades fyra bilder av mannen med slips. Om man valde ett av alternativen visade videon nu mannen med slips.
Så här ser resultatet ut när det har genererats:
Föreställ dig hur mycket tid och pengar detta kommer att spara i produktion och redigering.
Om en scen förstörs av att någon går in i bilden behöver man inte göra en ny tagning. Om regissören bestämmer sig för att han inte gillar kläderna som en skådespelare har på sig under tagningen, behöver man inte byta garderob och göra en ny tagning.
Den Smygande presentation innehöll också några andra kraftfulla videoredigeringsfunktioner.
Project Scene Change gör det möjligt för en videoredigerare att ta två videor som filmats från olika vinklar och skapa en sammansatt scen med synkroniserade kamerarörelser.
Project Dub Dub Dub använder AI för att automatisera dubbningsprocessen, som är en kostnads- och arbetsintensiv process. Funktionen skapar automatiskt översatt ljud på alla språk som stöds samtidigt som talarens röst bevaras.
Önskar du att du kunde se din gamla favoritfilm i bättre upplösning? Project Res Up använder diffusionsbaserad uppsamplingsteknik för att konvertera en lågupplöst video till en högupplöst.
Kolla in hur bra det här fungerar.
Om du någonsin har försökt redigera även en enkel video för YouTube vet du hur mycket tid det kan ta. AI-videoredigeringsverktyg som kräver lite mer än textmeddelanden kommer att vara en spelväxlare.
Om Hollywood så småningom kommer överens med skådespelare och författare får vi hoppas att dessa verktyg hjälper oss att se våra favoritserier lite tidigare.
