Adobe gav en forhåndsvisning af eksperimentelle generative AI-værktøjer til redigering af video og lyd på sin Adobe Max-konference.
Adobe bruger sine "Sneaks"-præsentationer til at fremvise den nyeste teknologi, som ingeniørerne arbejder på, og det ser ud til, at generativ AI er ved at ændre videoredigering i stor stil.
Firefly Image 2 og Project Stardust var Adobe Max-overskrifter for at bruge generativ AI til at redigere billeder, men indtil nu har der ikke været lignende værktøjer til video.
Project Fast Fill gør det muligt for en redaktør at tilføje eller fjerne elementer til videoscener lige så let som at redigere et stillbillede. Funktionen drives af Adobe Firefly. En bruger kan redigere en enkelt frame ved hjælp af enkle tekstprompter, og derefter vil Project Fast Fill føre redigeringen videre til resten af frames.
Et eksempel, Adobe demonstrerede, viste, hvor nemt det var at fjerne mennesker, der gik i baggrunden af en scene.
Og her er resultatet efter redigeringen:
I det andet eksempel blev et område på en mands skjorte valgt, og da man indtastede teksten "slips", blev der genereret fire billeder af manden med slips. Når man valgte en af mulighederne, viste videoen nu manden med slips.
Her er resultatet, når det er genereret:
Forestil dig, hvor meget tid og penge det vil spare i produktion og redigering.
Hvis en scene bliver ødelagt af, at nogen går ind i billedet, er der ingen grund til at lave en ny optagelse. Hvis instruktøren beslutter, at han ikke kan lide det tøj, en skuespiller har på i optagelsen, er der ingen grund til at skifte garderobe og lave en ny optagelse.
Den Smugkig på præsentationen indeholdt også et par andre kraftfulde videoredigeringsfunktioner.
Project Scene Change gør det muligt for en videoredigerer at tage to videoer, der er optaget fra forskellige vinkler, og skabe en sammensat scene med synkroniseret kamerabevægelse.
Project Dub Dub Dub bruger AI til at automatisere eftersynkroniseringsprocessen, som er en omkostnings- og arbejdskrævende proces. Funktionen skaber automatisk oversat lyd på alle understøttede sprog og bevarer samtidig talerens stemme.
Ville du ønske, at du kunne se din gamle yndlingsfilm i bedre opløsning? Project Res Up bruger diffusionsbaseret upsampling-teknologi til at konvertere en video med lav opløsning til en med høj opløsning.
Se, hvor godt det fungerer.
Hvis du nogensinde har prøvet at redigere selv en simpel video til YouTube, ved du, hvor meget tid det kan tage. AI-videoredigeringsværktøjer, der ikke kræver meget mere end tekstbeskeder, vil være en game changer.
Hvis Hollywood i sidste ende får en aftale med skuespillere og forfattere, så lad os håbe, at disse værktøjer hjælper os med at se vores yndlingsserier lidt hurtigere.
