GauGAN2 er et værktøj til at skabe AI-genererede fotorealistiske landskaber. Udviklet af NVIDIA og tilgængelig som en webdemo, GauGAN2 lader dig finjustere billedet, så meget du vil, ved at bruge en blanding af skitsering og tekstinput til at guide AI-systemet.
Med lidt tid kan du forfine billedet ved at tilføje eller fjerne detaljer, indtil det er helt rigtigt. De billeder, det kan producere, ser ofte realistiske ud, men et forkert streg, og billederne kan begynde at ligne fantasy-kunstværker snarere end virkelige landskaber.
Her er hvad du behøver at vide om NVIDIAs GauGAN2.
Hvad er NVIDIAs GauGAN2?
GauGAN2 er en kunstig kunstgenerator med et unikt redigeringsvindue. Udviklet af forskningsafdelingen af NVIDIA, det samme firma, der laver GPU'er, er det tilgængeligt for alle at bruge via en webdemo.
Det ligner på en måde ved hjælp af Dall-E 2
, en AI tekst-til-billede-generator, hvor du kan skrive sætninger som "solen går ned over ørkenen", og AI-systemet vil skabe et billede baseret på den beskrivelse. Det er dog ikke alt, du kan gøre med GauGAN2; der er flere måder, du kan fortsætte med at redigere billedet på.En mulighed er at bruge segmenteringskortet til at se en oversigt over objekter på billedet. Ved at bruge disse oplysninger kan du ændre formen på ting som f.eks. en bjergkæde ved at omtegne dens grænser eller slette elementer helt.
Du kan også bruge blyantværktøjet til for eksempel at tegne en cirkel, som kan gengives som en sol. Det samme gælder for at tegne nogle få toppe i baggrunden, som kan blive en bjergkæde, især hvis du kombinerer det med tekstinput, der beskriver scenen.
Efter at have prøvet NVIDIAs GauGAN2, vil du måske lære hvordan man bruger NVIDIAs Canvas-app, som er bygget på samme teknologi. Det er en gratis app rettet mod kunstnere og kreative, men den virker kun ved at bruge en af NVIDIAs RTX GPU'er.
Hvordan virker GauGAN2?
Bag kulisserne blev GauGAN2 bygget ved hjælp af generative adversarial networks (GAN). Faktisk er dens navn et spil om den franske post-impressionistiske kunstner Paul Gauguin og GANs.
Grunden til, at den kan generere billeder, der overbevisende ligner rigtige landskaber, er, at den i løbet af dens træningsperiode blev fodret med 10 millioner landskabsbilleder af høj kvalitet. Den computerkraft, der kræves for at træne modellen, kom fra NVIDIA Selene-supercomputeren, en af verdens mest kraftfulde supercomputere.
GAN'er finder anvendelse i mange applikationer, inklusive masser af AI tekst-til-kunst generatorer. Den vigtigste forskel med GauGAN2 er evnen til at ændre det AI-genererede billede i en dedikeret editor ved at bruge værktøjer som pen, fyld og pensel til at foretage ændringer.
Grænsefladen er minimal, men ikke ligefrem brugervenlig, og dens retro-look kan minde dig om de tidlige dage med Microsoft paint, i modsætning til banebrydende software. Hvis kontrollerne ikke virker indlysende i starten, kan du køre en hurtig tutorial eller se en videogennemgang; bare klik på knapperne i øverste højre hjørne af siden.
Hvilken kunst kan GauGAN2 producere?
Målet med GauGAN2 er at skabe fotorealistiske billeder af landskaber som bjerge, søer og strande.
Der er et bibliotek af etiketter, du kan vælge imellem, når du skitserer, som hjælper yderligere med at mærke skitse-inputtet, så AI-generatoren kan gengive et billede, der er passende. Disse omfatter ting som tåge, bakke, sten, sne og vand, for at nævne nogle få.
Det er dog ikke svært for tingene at gå galt, og du er lige så tilbøjelig til at producere absurde og surrealistiske billeder. Tag blot blyantværktøjet og tegn et par mærkelige former, og GauGAN vil spytte noget ud, der ligner mere et eksperimentelt kunstværk end noget genkendeligt.
Indtastning af nonsens-sætninger i tekstboksen kan også give mærkelige output. Nogle gange behøver du ikke engang gå så langt; blot at bede om et bjerglandskab frembragte, hvad der ligner en mærkelig kombination af sne og pels.
I begge tilfælde kan nogle kunstnere finde et værktøj som dette nyttigt. Det kan bruges til at fremskynde processen med storyboarding eller som en hurtig måde at skabe konceptkunst til et spil eller en video.
Selvom denne demo er langt fra at være et poleret produkt klar til brug, viser den et interessant potentiale.
GauGAN2: En hybrid AI-kunstgenerator
GauGAN2 slutter sig til samlingen af AI-billedgeneratorer, der omdanner tekst til billeder. I modsætning til andre applikationer kan du dog redigere billedet i etaper ved at bruge skitser og tekst som input, og finjustere AI-billedet, som du vil.
Hvis det bruges rigtigt, kan GauGAN2 producere ret overbevisende fotorealistiske billeder af naturen, som kan være nyttige for kunstnere, der har brug for at udfylde et storyboard eller hurtigt producere konceptkunst. Det er dog alt for nemt til, at tingene bliver bizarre, og et par vildfarne pennestrøg kan føre til nogle interessante resultater.