Adobe presenterte en forhåndsvisning av eksperimentelle generative AI-verktøy for redigering av video og lyd på Adobe Max-konferansen.
Adobe bruker sine "Sneaks"-presentasjoner til å vise frem den nyeste teknologien som ingeniørene jobber med, og det ser ut til at generativ AI er i ferd med å endre videoredigering i stor stil.
Firefly Image 2 og Project Stardust var Adobe Max overskrifter for bruk av generativ kunstig intelligens til å redigere bilder, men frem til nå har det ikke eksistert lignende verktøy for video.
Med Project Fast Fill kan redaktøren legge til eller fjerne elementer i videoscener like enkelt som å redigere et stillbilde. Funksjonen drives av Adobe Firefly. Brukeren kan redigere en enkelt frame ved hjelp av enkle tekstmeldinger, og Project Fast Fill viderefører deretter redigeringen i resten av frames.
Adobe demonstrerte et eksempel på hvor enkelt det var å fjerne personer som gikk i bakgrunnen av en scene.
Og her er resultatet etter redigeringen:
I det andre eksempelet ble et område på en manns skjorte valgt, og ved å skrive inn tekstmeldingen "slips" ble det generert fire bilder av mannen med slips. Ved å velge ett av alternativene viste videoen nå mannen med slips.
Her er resultatet når det er generert:
Tenk deg hvor mye tid og penger dette vil spare i produksjon og redigering.
Hvis en scene blir ødelagt av at noen går inn i bildet, er det ikke nødvendig å gjøre en ny tagning. Hvis regissøren bestemmer seg for at han ikke liker klærne en skuespiller har på seg i en scene, er det ikke nødvendig med et klesbytte og en ny innspilling.
Den Snikpresentasjon har også et par andre kraftige videoredigeringsfunksjoner.
Med Project Scene Change kan en videoredigerer ta to videoer som er filmet fra forskjellige vinkler, og lage en sammensatt scene med synkroniserte kamerabevegelser.
Project Dub Dub Dub bruker kunstig intelligens til å automatisere dubbingprosessen, som er en kostnads- og arbeidsintensiv prosess. Funksjonen lager automatisk oversatt lyd på alle språk som støttes, samtidig som stemmen til den som snakker, bevares.
Skulle du ønske at du kunne se den gamle favorittfilmen din i bedre oppløsning? Project Res Up bruker diffusjonsbasert oppsamplingsteknologi for å konvertere en lavoppløst video til en høyoppløst.
Se hvor godt dette fungerer.
Hvis du noen gang har prøvd å redigere selv en enkel video for YouTube, vet du hvor mye tid det kan ta. AI-videoredigeringsverktøy som krever lite mer enn tekstmeldinger, vil være en game changer.
Hvis Hollywood til slutt får til en avtale med skuespillere og forfattere, la oss håpe at disse verktøyene hjelper oss med å få se favorittseriene våre litt raskere.
