Runway AI Gen-2: Tekst til video AI er reel nu-Dataconomy, Runway S Gen-2 Text-to-Video Tool, der nu er tilgængelig for alle gratis | Toms hardware
B) .
Hvad kan bane AI Gen-2 gøre for dig? . Hvad er mulighederne for dette, der først kommer til at tænke på?
EN) Gå en tur i skoven og optage den video.
Find og køb en video, der ligner den.
C) Brug af generative AI -værktøjer til at kombinere andre billeder til en lignende video.
Selvom det tager nogen tid og teknisk viden, kan alle ovenstående løsninger tilfredsstille din anmodning. Men hvad nu hvis vi fortæller dig, at en “D -mulighed”, der sparer dig for alt dette hårde arbejde, tilføjes meget snart til listen? . Denne nye model giver dig mulighed for kun at oprette videoer med ord.
?
Den anden generation af Runway’s AI-software, simpelthen med titlen Runway AI Gen-2, er en stor forbedring i forhold til den første generation. Runway AI Gen-2 kan lave fulde videoer bare fra tekstbeskrivelser, mens den ældre version kun kunne generere nye videoer ved at bruge data fra eksisterende. Siden sidste september har firmaet arbejdet med denne innovative model, og de er nu glade for at afsløre, at det er den første tekst-til-video AI-model, der er tilgængelig for offentligheden.
Virksomheden hævder, at dens nye tilgang giver brugerne mulighed for realistisk og konsekvent at syntetisere nye videoer ved enten at bruge kompositionen og stilen på et billede eller tekstprompt for at anvende til strukturen af en kildevideo (en funktion til stede i Gen-1) eller ved at bruge Kun tekst beder.
Gen-1 fokuserede på at ændre forudgående video, så brugerne kan fodre i et rystende smartphone-klip eller en rå 3D-animation og derefter anvende en AI-genereret overlay. Runway AI Gen-2 er en stor forbedring i forhold til Gen-1, da det kombinerer de to generationers bedste kvaliteter, hvilket giver den mulighed for at anvende sammensætningen og stilen på et billede eller tekstprompt til strukturen i en kildevideo for at generere en helt ny video.
Hvad det har opnået er virkelig bemærkelsesværdigt: det kan nu generere splinternyt videomateriale fra tekstbeskrivelser alene. . .
”Dybe neurale netværk til billed- og videosyntese bliver stadig mere præcis, realistisk og kontrollerbar. Om et par år er vi gået fra slørede billeder med lav opløsning til både meget realistiske og æstetiske billeder, der giver mulighed for stigning i syntetiske medier.”
-Runway AI
Runway AI Gen-2-funktioner
Hvad angår de nye funktioner, har Gen-2 tre yderligere tilstande:
- Mode 1 (tekst til video): Opret videoer på enhver måde, du kan tænke på fra bunden af kun en tekstprompt.
- Mode 2 (tekst + billede til video): Generer en video baseret på et kørebillede og en tekstprompt.
- Mode 3 – Billede til video: Generer en video ved hjælp af bare et kørebillede.
Desuden overføres de tilstande, der blev introduceret i landingsbanen AI-gen-1, til Runway AI Gen-2, såsom:
- Brug ethvert billede eller prompt æstetik til at informere, hvordan din video gengives i hver eneste ramme.
- Mode 5 (Storyboard): Opret færdige, stylede og bevægelige gengivelser fra mockups.
- Mode 6 (maske): Isolering af emner.
- Mode 7 (Render): .
- Sæt Gen-1 for at arbejde for dig ved at finpusse modellen for bedre nøjagtighed.
Nedenfor kan du finde en video, som Runway AI forklarer Gen-2’s funktioner.
Runway Gen-2 ser ud til at være mere optaget af at oprette videoer fra bunden, skønt adskillige kvalifikationer skal kvalificere denne dom. Der er en alvorlig mangel på tilgængelighed, og de demovideoer, som landingsbanen har frigivet, er korte, rystende og slet ikke fotorealistiske.
”Du kan generere en biljagt, men nogle gange flyver bilerne måske væk.”
-Runway-medstifter og administrerende direktør Cris Valenzuela
Lær hvordan du bruger Microsoft 365 copilot og let master ord, excel og mere
Sådan bruges Runway Gen-2 tekst-til-video AI?
De, der ønsker, at produktet kan have problemer med at få det for nu. .
Denne del opdateres, når Runway Gen-2 er offentliggjort offentligt.
Dens begrænsede udgivelse er det mest publicerede eksempel på tekst-til-video-generation til dato uden for et kontrolleret miljø. Alphabet Inc. Datterselskab Google og Meta Platforms Inc. Virksomheden demonstrerede begge tekst-til-video-arbejde sidste år ved hjælp af eksempler som en bamsevasketter og en sejlbåd på en sø. Stadig har hverken afsløret intentioner om at tage arbejdet ud over forskningsfasen.
Runway Gen-2 udgivelsesdato
En officiel talsmand for Runway, Kelsey Rondenet, fortalte The Verge, at firmaet vil “give bred adgang i de kommende uger.”
Tjek den officielle side eller læs papiret for mere information.
Billede høflighed: Landingsbane
AI 101
Er du ny på AI? Du kan stadig komme på AI -toget! . Du er velkommen til at bruge dem. At lære at bruge AI er en spilskifter!
Andre AI -værktøjer, vi har gennemgået
Næsten hver dag dukker et nyt værktøj, model eller funktion op og ændrer vores liv, som GPT-4, og vi har allerede gennemgået nogle af de bedste:
Vil du lære at bruge chatgpt effektivt? Vi har nogle tip og tricks til dig uden at skifte til ChatGpt Plus! . .
-
- REFACE APP
- Lensa AI
- Meitu ai Art
- Stabil diffusion
- Dall-e 2
- Google Muse AI
- ARTBREEDER AI
- Midjourney
- Dreambooth AI
- Wombo Dream
- Tome ai
- Interiør AI
- Nightcafe AI
- Qq forskellig dimension mig
- Tilfældige ansigtsgeneratorer
- Visual Chatgpt
. ? Fortsæt med at læse og finde ud af det.
Vil du have flere værktøjer? Tjek de bedste gratis AI -kunstgeneratorer.
Runway’s kraftfulde Gen-2 tekst-til-video-værktøj nu tilgængeligt for alle gratis
Værktøjet opretter 4-sekunders MP4-videoer baseret på dine kommandoer.
For et par uger siden rapporterede vi på Runway Gen-2, et online tekst-til-video-værktøj, der genererer 4-sekunders klip baseret på dine prompter. Indtil nu har den gratis service kun været tilgængelig i en lukket beta, der opererede via en række private kanaler på Runway’s Discord Server. I dag er Gen-2 dog tilgængelig for alle, og du kan bruge det via virksomhedens websted i stedet for uenighed.
For at bruge Runway Gen-2 skal du oprette en gratis konto og på Runway’s websted og derefter navigere til app.Runwayml.com/ai-tools/gen-2 for værktøjet (eller klik på linket i dit kontrolpanel der). Virksomheden har haft sit Gen-1-værktøj, der ændrer eksisterende videoer for at få dem til at se anderledes ud (Eks: at omdanne folk til lermation), der er tilgængelig for alle i flere måneder, men Gen-2 tager enkel tekst-anmodninger som “robot drikker en øl” og forvandler dem til klip.
Som vi bemærkede i vores tidligere historie om Gen-2, har videoklipene overhovedet ingen lyd, og de har ofte meget begrænset bevægelse. Selvom du kan downloade klippene i MP4 -format, ligner de ofte mere animerede GIF’er. Til visningsformål konverterede jeg alle de klip, der er indlejret i denne artikel til GIF’er, hvilket har fået farverne til at gøre, men det ser ud til at have nogen indflydelse på deres glathed.
Du kan også uploade et foto og derefter give Gen-2 en prompt, der fortæller det at bruge dette billede som inspiration. Jeg uploadede et hovedskud af mig selv og spurgte det viser “denne fyr, der drikker en øl.”
Personen i videoen ligner ganske lidt-han er en middelaldrende, skaldet hvid fyr med et salt-og-peber-skæg og glødende grønne briller-men han drikker ikke rigtig en øl; Det er ikke helt klart, hvad han skulle klæbe i munden.
Når du har indtastet din prompt (og muligvis foto), klikker du på knappen Generer, og værktøjet fortæller dig, hvis du er i køen for, at din anmodning skal behandles. . I mine test tog det altid mindre end et minut imellem, da jeg gik ind i min hurtig, og da videoen blev afsluttet. Dette er i overensstemmelse med det, jeg oplevede, når jeg brugte beta-versionen af Gen-2, undtagen i dette tilfælde ville jeg sende min anmodning til en Discord-bot, der ikke udviste en fremskridtsprocent, men i stedet ville bare sende mig tilbage videoen tilbage Efter et minut eller deromkring.
Når videoen er færdig, vil du se den på skærmen, og du kan afspille den lige der eller klikke på en knap for at downloade den som en MP4-fil. Det gemmes også i afsnittet Aktiver på din konto.
I modsætning til med beta-versionen af Gen-2 ser det ud til, at der er en grænse for, hvor mange videoer du kan generere gratis. Min gratis konto viste en grænse på 60 sekunders video, der på 4 sekunder pr. Klip, udgør 15 klip.
Hvis du bruger dine kreditter, eller du vil have ekstra funktioner, såsom en opskaleret (højere opløsning) eller videoer, der ikke indeholder Runway’s vandmærke, skal du betale for en standardkonto, der er $ 15 om måneden eller $ 144 om året, når du betales på én gang. For den pris får du 125 sekunders video pr. Måned og kan betale ekstra for mere.
Siden jeg fik adgang til den private beta for et par uger siden, har jeg brugt meget tid på at spille med Gen-2. Jeg er imponeret over, hvor gode mange af klippene er, men det er meget inkonsekvent, og folk kan se ud som om de kommer lige fra den uhyggelige dal, med mærkelige udtryk i deres øjne eller misforhapen kropsdele.
For bedre eller værre er værktøjet temmelig dårligt til at genskabe specifikke tegn. . .
Du kan også glemme at bede om noget, der involverer et firmalogo. .
Imidlertid er en ting, som Runway Gen-2 er virkelig god til, at generere billeder af robotter, der drikker alkoholholdige drikkevarer eller gør andre “bar” ting. Hver gang jeg bad det om robotter, der drikker eller ryger eller danser eller hælder øl eller vasker deres hænder i mænds værelse i en bar, fik jeg temmelig anstændigt output. Jeg fik endda gode klip af robotter, der gjorde standup -komedie eller lounge -sang. At bede om robotter, der spiller billard eller foosball eller dart en bar, var mere en blandet taske.
Andre succesområder, jeg fandt, inkluderer familier,.
På trods af begrænsningerne i Runway Gen-2 har vi set en række meget kreative mennesker gøre dem til længere film ved at sy mange klip sammen. Det mest berømte eksempel på en Runway Gen-2-film er måske Pepperoni Hugspot Commercial Pizza Commercial, lavet af en skaber, der går under navnet Pizza senere. .
. .
Hvis du vil prøve Runway Gen-2 og se, hvad du kan oprette med det, er alt hvad du skal gøre, at gå til Runwayml.com og tilmeld dig en gratis konto.
Bliv på forkant
Deltag i eksperterne, der læser Toms hardware til det indvendige spor på entusiast PC Tech News – og har i over 25 år. .
Ved at indsende dine oplysninger accepterer du vilkår og betingelser og privatlivspolitik og er 16 år eller derover.
Avram Piltch er Toms hardwares chefredaktør. Når han ikke spiller med de nyeste gadgets på arbejdet eller tager på VR -hjelme på messer, finder du ham rodfæstet hans telefon, adskiller sin pc eller kodende plugins. .