Hvad Runways Gen-2 tekst-til-video AI kan gøre

I mange år havde skabere brug for et videokamera til at fortælle deres historier. Takket være udviklingen inden for kunstig intelligens behøver du kun din fantasi. Og med generativ AI er historiefortællingsmulighederne uendelige.

Runway giver dig flere måder at fortælle din historie på med lanceringen af ​​Gen-2, dens tekst-til-video AI-model. Fortsæt med at læse for at lære mere om Runway's Gen-2 og hvad den kan.

Runway lancerer sin Gen-2 tekst-til-video AI-model

I februar 2023, Runway lancerede Gen-1, en AI-model, der bruger effekter til at skabe nye videoer fra eksisterende. Blot et par uger senere – den 20. marts 2023 – blev Runway officielt annonceret Gen-2.

Runway's Gen-2 er et skridt op fra Gen-1. Det er en generativ AI-løsning, der giver brugerne mulighed for at skabe drømmende videoer ud fra ord, billeder og deres egne videoer. Med Gen-2 forbedrer Runway sine tilpasningsmuligheder og producerer videoer med højere kvalitet. Men den største forskel er, at brugere kan oprette videoer fra bunden – du behøver ikke et referencebillede eller en kildevideo.

Generativ AI er ikke et nyt koncept. Så meget imponerende kunstværk er blevet skabt ved hjælp af bedste gratis AI-tekst-til-kunst-generatorer. Modellen vinder indpas, efterhånden som flere mennesker sætter sig ind i den og deler deres arbejde på sociale medier. Et hurtigt blik på Runways Twitter-konto vil vise dig, hvor begejstrede folk er for at dele de mesterværker, de har skabt ved hjælp af deres produkter.

Hvad kan Gen-2 gøre?

Indholdsskabelse og AI-værktøjer bliver ved med at blive bedre for hvert år, der går. Når du slår de to sammen, føder du uendelige muligheder. Det er præcis, hvad Runways Gen-2 gør, med vægt på at lave film.

Gen-2 har forskellige tilstande, der hjælper med at sætte gang i din film – herunder er de tre første.

• Tekst-til-video: Forestil dig en scene, og bring den til live ved at beskrive den med tekst.
• Tekst og billede til video: Gør et referencebillede til en smuk film. Tænk på dig selv som instruktør, billedet som dit motiv eller skuespilleren og Gen-2 som kameramanden. Gen-2 vil behandle skuddet præcis, som du instruerer det til.
• Billede til video: Upload et referencebillede for at lave en video inspireret af det. Denne tilstand fungerer på samme måde som websteder, der gør billeder til GIF'er, men bedre, fordi du kan puste liv i gamle billeder og gøre så meget mere.

Stilisering tilstand giver dig mulighed for at være stunt-dobbelten i din egen film eller bruge eksisterende koreografi til at informere om bevægelserne i din næste musikvideo. I stedet for at bruge tekst til at beskrive den bevægelse, du vil oversætte, skal du bruge en prompt eller et billede for at få mere præcise resultater.

Inspiration er overalt. Storyboarding giver dig mulighed for at frigøre det sande potentiale i mockups ved at omdanne dem til stiliserede videoer.

Du vil ikke altid oprette videoer fra bunden. Nogle gange vil du måske ændre et par ting i en eksisterende video. Maskering tilstand giver dig mulighed for at isolere og redigere specifikke elementer for bedre at tilpasse videoen til dine mål, f.eks. at ændre en andens hårfarve.

Når du arbejder med et lavt budget, kan du oprette realistiske videoer ved hjælp af eksisterende almindelige. Tilføj grønt, vand og meget mere med Gen-2's Render mode. Endelig, Tilpasning tilstand – opret mere nøjagtige resultater ved hjælp af prompter for at tilpasse din model.

Kunstig intelligens bliver konstant forbedret

Glem animation – generativ AI er den gave, der bliver ved med at give. Ingen kunne have forestillet sig, at du ville være i stand til at skabe film fra ingenting kun ved hjælp af din computer. Hvis den seneste udvikling er noget at gå efter, ser fremtiden lys ud for medierne, AI og indholdsskabelsesrum.