Lume Pad 2: AI-drevet 3D-tablet er fantastisk og underligt

Lume Pad 2-beskrivelsen lyder som om nogen har kastet en masse buzzwords sammen: det er en AI-drevet 3D-tablet!

Men hvad betyder det overhovedet? Hvad angår AI, har den både on-device AI til at analysere fotos og videoer og derefter konvertere dem til 3D, såvel som generativ cloud AI til at skabe 3D-scener fra tekstprompter. Og 3D-delen? Det er også sandt: Det er en 3D-skærm uden briller. Faktisk, ægte 3D, med et unikt billede, der stråler til hvert øje.

Dette er Lume Pad 2 fra et firma kaldet Leia (ja, ligesom Star Wars-prinsessen). Det er det mest unikke og fascinerende, jeg har set længe, ​​men jeg er ikke overbevist om, at det har et marked ud over en håndfuld specialiserede industrier.

3D-skærm uden briller

I hjertet af enheden er en unik proprietær skærmteknologi ("Light Field"), der muliggør en enkelt fremviser for at se understøttede applikationer i en ægte 3D-visning uden yderligere briller eller en headset. Præcis hvordan det virker er ikke afsløret, men det er sandsynligvis en variation af linseformede linser - den slags man ville få i kornpakker som barn. Når du flyttede scenen rundt, ville det gennemskinnelige prisme på forsiden rette en anden del af baggrundsbilledet til dine øjne, hvilket giver det udseende af, at scenen var ved at ændre sig. Lume Pad 2 vil vise to billeder til enhver tid, men det specielle skærmlag kombineret med dobbelte frontvendte kameraer til hoved- og øjensporing vil sikre, at hvert øje kun ser ét. Når din hjerne kombinerer dem, kan du se en 3D-scene.

Det kan være ret magisk at se personligt ("Whhhaaaaaaat", udbrød min søn, "Far det kommer ud af skærmen. Hvad? Hvordan? Hvad?!")

Oven i købet er Lume Pad 2 en Android-tablet, pakket fuld af brugerdefineret software, der giver dig mulighed for at tage 3D-billeder og videoer eller bruge AI til at transformere eksisterende videoer til 3D.

Hardwaren

Lume Pad 2 har en 12,4-tommer IPS-skærm, der kører ved 120Hz opdatering og 2560 x 1600 pixels, med en pixeltæthed på 244 PPI og et 16:10-forhold. Men når du er i 3D-tilstand, er det sikkert at antage, at opløsningen er halveret.

Hvis vi glemmer alle de smarte 3D-ting et øjeblik, og jeg bare skulle vurdere dette som en Android-tablet, ville jeg blive mest imponeret. Det er et lækkert solidt metalchassis, føles godt at røre ved, og der er en behagelig haptisk feedback, når du skriver. Det valgfrie etui klikker magnetisk på og muliggør nogle få læsevinkler.

Android 12-grænsefladen er hurtig, og bortset fra den forudinstallerede software er det en standard Google Android-tablet, hvor der ikke er lavet for meget specialarbejde.

Kort sagt: det er en dejlig tablet – helt sikkert en af ​​de bedste Android-tablets, jeg har spillet med endnu. Du kan dog glemme at bruge det udendørs; med en maksimal lysstyrke på 450 nits i 2D-tilstand og 300 nits i 3D, er dette kun til indendørs brug.

Du finder også to 16 MP-kameraer på bagsiden, hvormed du kan tage 3D-billeder og videoer direkte på enheden. I modsætning til de fleste 3D-kameraer er de ikke adskilt, som menneskelige øjne ville være. De fleste kameraer beregnet til at optage en 3D-effekt for menneskelige øjne har linser med en afstand på ca. 63 mm fra hinanden - det samme som det gennemsnitlige menneske - hvilket sikrer, at en nøjagtig 3D-effekt vil blive opfattet til det tilsigtede seer. Men med Lume Pad 2 er der noget trolddom på enheden, der ekstrapolerer dybden i realtid.

Tabletten drives af Qualcomm Snapdragon 888-chipsæt med 8 GB RAM og 128 GB UFS 3.1-lagerplads. Du kan udvide via en microSD-slot med kort op til 2 TB, hvilket du gerne vil gøre hurtigt, hvis du planlægger at gøre god brug af det kamera eller afspille dine egne medier offline.

Softwaren

Ud over den magiske brillefri 3D-skærm kommer den reelle værdi af Lume Pad 2 fra den indbyggede brugerdefinerede software.

LeiaPlayer er en alt-i-én mediefremviser til din egen 3D-kamerarulle og en flot samling af eksempelbilleder. Derudover skal du trykke over til fanen Leia Link, og du vil være i stand til at få adgang til indhold, du har uploadet fra en almindelig smartphone med Leia Link-appen, som deres software så på magisk vis kan forvandle sig til 3D. Det virker for det meste, men kun på scener var dybden tydelig. Jeg forsøgte med et familiebillede af at sidde i nogle gokarts, og dybden var helt forkert. Leia Player kan afspille VR180 og side-by-side (SBS) formaterede videoer, selvom du ofte skal specificere. Jeg prøvede at se en SBS-formateret video, og for at være ærlig var dybden meget svag, og der var ingen lyd. Jeg tror, ​​der var codec-problemer. LeiaPlayer er bestemt ikke på samme niveau som VLC, når det kommer til tilfældige codecs, så det var lidt af en fiasko. Selvom det havde lyd, ville jeg ikke have generet. Jeg tror, ​​at et VR-headset til halv pris ville gøre et langt bedre stykke arbejde.

LeiaPix er en social netværksapp til deling og visning af andres 3D-billeder. Bor i et specifikt hashtag eller emne, og du vil opdage, at indholdet er sparsomt, men det er en enkel måde at se tilfældige 3D-billeder på. Kvaliteten varierer, så det er muligt, at disse er taget med den ældre version af Lume Pad.

LeiaChat giver dig mulighed for at chatte i 3D med andre Lume Pad 2-brugere, i 3D, for når standard Zoom-opkald bare ikke klipper det længere. Begge ender har selvfølgelig brug for en Lume Pad.

LeiaDream er en generativ 3D-kunstapp. Jeg antager, at det er en tilpasset version af StableDiffusion, men den kunne være fuldstændig proprietær. Uanset hvad, giver det dig mulighed for at skrive en tekstprompt og få et tilpasset 3D-billede. Det er ikke i nærheden af ​​Midjourney niveau af realisme, og som en cloud-tjeneste kommer din konto med nok til, at der kan genereres omkring 250 billeder - derefter skal du købe flere kreditter.

LeiaViewer er en 3D-modelfremviser med en håndfuld medfølgende modeller, og integration med Sketchfab, hvis du vil have flere eller se dine egne kreationer (selvom kun et standard Sketchfab e-mail-login understøttes, ikke hvis du tilmeldte dig via en social udbyder). Dette er formentlig den mest overbevisende brugssag for Lume Pad 2, hvor 3D-modeller åbenbart passer godt til den brillerløse skærmteknologi. Du kan vippe, rotere, zoome osv. samt kontrollere dybden af ​​3D-effekten.

LeiaTube er en YouTube- og Vimeo-seer. Åbn det, og du vil se et udvalg af indhold, selvom selv det oprindelige SBS 3D-formaterede indhold skal køres gennem AI-konverteringsalgoritmen. Du kan også dele en video fra standard YouTube-appen direkte hertil, og den vil automatisk konvertere den til visning i 3D. Jeg prøvede det med en af ​​mine egne anmeldelser, og for at være ærlig var det ikke så fantastisk. Effekten var ikke nær så udtalt, og den var heller ikke så præcis, som jeg håbede; der var helt sikkert nogle fejl her og der, med uklare kanter omkring genstande, hvor det kunne fortælle, hvad dybden skulle være.

Det er mange indbyggede apps, og der er også en Leia App Store. Det er dog lidt sparsomt, med måske fire kampe i alt. Realistisk set, medmindre det er en førstepartstitel fra Leia Inc, er det usandsynligt, at du får mange udviklere med på et så lille marked. Du kan ikke bare tage eksisterende spil og gøre dem 3D. De to gratis spildemoer, der var forudinstalleret på vores enhed, var fascinerende demoer, men i sidste ende kunne de ikke holde min opmærksomhed i mere end fem minutter hver.

Selvom der er mange indbyggede apps, skal du ikke forvente, at andet understøtter 3D-funktionaliteten. Du kan for eksempel ikke åbne VLC og afspille en SBS-kodet film, og Call of Duty vil heller ikke pludselig få en tredje dimension. For at gøre brug af den unikke 3D-teknologi skal en app understøtte Leia SDK. Den kører med glæde andre Android-apps, men de vises kun i almindelig 2D.

Hvordan er dybdeeffekten?

Jeg var skeptisk over for skærmteknologi uden briller, der kommer ind i denne anmeldelse, men den kan være ganske fantastisk under de rigtige forhold. Selvom det er umuligt at vise på video, er det, jeg kan tale om, den subjektive kvalitet af 3D-effekten og skærmen generelt.

For det første varierer graden af ​​dybdeeffekt betydeligt efter app og den type indhold, du ser.

Den bedste effekt vil opnås fra 3D-renderede objekter. For eksempel, hvis du åbner LeiaViewer 3D-appen og tjekker den inkluderede cyberpunk-by (inklusive animerede biler) zoomer du rundt), vil du opdage, at det højeste spir ser ud til at springe ud næsten 6 tommer fra overfladen af tablet. Det utrolige.

Dette gælder også for spildemoerne, og det er i Dungeon-spillet, at head-tracking-funktionerne også tydeligt kan ses. Ikke alene kommer fangehullets vægge til live i herlig 3D, men hvis du vipper tabletten eller bevæger dig rundt, vil du se tidligere skjulte vinkler. Det er en unik oplevelse, som jeg kun nogensinde har haft i VR.

Når det kommer til billeder eller video, er effekten dog ikke nær så udtalt – i det omfang, at jeg ikke ville gide at se 3D-film om dette; det er bare ikke overbevisende i forhold til at gøre det samme i virtuel VR-biograf. Dette kunne bare være en "realismefaktor". Gengivet 3D-indhold vil altid se mere imponerende ud end en rigtig scene, fordi sidstnævnte er noget, vi er så vant til i det virkelige liv.

Sporing og visuel kvalitet

Generelt set, så længe jeg ikke var for meget af en stump vinkel, virkede ansigts- og øjensporingen fint. Jeg oplevede ikke mange fejl, hvor det ville snappe tilbage til 2D-kun-tilstand, undtagen da min søn besluttede at stikke sit ansigt ind og se, hvad balladen handlede om. Det kan ikke spore mere end én person på samme tid, og det tager nogle gange et sekund eller to at indse, at der er en ny seer. Så snapper alt på magisk vis ind i 3D-visning.

Skærmen er dog langt fra perfekt; to point forringer den samlede oplevelse.

For det første er der en lille skærmdør-type prikket mesh på tværs af skærmen. Det er formentlig en del af det linseformede lag, der adskiller billedet for hvert øje. Dette er mest indlysende, når det er snappet ind i 3D-tilstand. Selvom tablet-hardwaren ellers er meget flot og lydhør som en generisk Android-tablet, kan skærmkvaliteten frustrere.

For det andet er der også et ret åbenlyst spøgelsesproblem. Dette betyder, at hvert øje kan se det billede, der er bestemt til det andet øje, omend meget svagt. I eksemplet ovenfor er efterbilledet på bagsiden af ​​vingerne også til stede, når det ses i 3D, ikke kun et resultat af optagelser.

Dette er ikke så meget en kritik af denne særlige tablet som en fejl i den underliggende teknologi, og den er heller ikke unik for skærme uden briller. Hvis du nogensinde har set passive 3D-film (dem, der involverer et spinkelt par briller), har de også en tendens til at have en del spøgelser. Det er fordi det er næsten umuligt at kulminere lyset perfekt i en bestemt retning. Du kan få det godt nok til at få 3D-effekten, men hvis du holder pause og kritisk undersøger billedet, vil du se spøgelser. Dette er mere indlysende for lysere genstande på en mørk baggrund. Kun aktive 3D-skærme (dem, der kræver tungere LCD-briller med et batteri i) kan helt eliminer spøgelsesbilleder, da de er alternerende billeder og fuldstændigt blokerer udsynet for et øje hver tid.

Er dette den ultimative 3D-skærm? Ingen.

Lume Pad 2 er virkelig ret magisk at se. Det er et teknologisk vidunder, og jeg ville ønske, jeg havde en bedre måde at vise dig dette på, men ligesom VR er det noget, du skal opleve selv.

Men jeg ved, hvad du tænker: det her er et modefænomen. Jeg var en stor fortaler for 3D-tv og projektorer indtil for ti år siden. Jeg brugte endda meget af min universitetstid på at spille Unreal Tournament 2K med de originale Nvidia 3D-briller og en enorm Silicon Graphic CRT-skærm. Men udgivelserne af 3D-film er stort set tørret ud (fire indtil videre i år, ser det ud til), og folk har indså, at det at skulle bære specielle briller for at se en film var besværligt for ofte dårligere resultater end uden.

Selvfølgelig er skønheden ved Lume Pad 2, at den fungerer uden briller - og den virker bare (omend kun for en enkelt seer).

Det faktum, at det har et indbygget AI-system til at konvertere ikke-3D-indhold, og en måde at producere 3D-fotos og -film på selve enheden, tror jeg giver den ben. Selvom verden holdt op med at lave 3D-indhold i morgen, og internettet kollapsede, kunne du stadig producere og vise dine egne kreationer fra denne ene enhed. Leia har virkelig prøvet at producere overbevisende indhold med et tilpasset socialt netværk kun til Lume Pad brugere, og de forstår, at du ikke bare kan have en utrolig teknologi – du skal bruge apps og indhold til at gå med det. Det er meget opmuntrende.

Men at forstå et problem og at kunne løse det er to forskellige ting.

Den største begrænsning ved Lume Pad 2 er, at der ikke er nogen måde at bruge den som generisk 3D-skærm for nogen inputkilde. Hvis den havde en HDMI i port eller dongle og kunne afspille enhver SBS-formateret input i 3D-tilstand, ville det gøre det til et øjeblikkeligt køb for et meget større marked. For eksempel Goovis G3 Max persona biografheadset, som vi anmeldte i sidste uge, kan netop det. Den tager enhver USB-C- eller HDMI-indgang - uanset om det er en 3D Blu-ray-afspiller eller en generisk medieafspiller, der kører VLC med noget SBS formaterede filer, eller YouTube, eller endda et pc-spil med noget software, der udsender 3D-spil i et side-by-side-format – og det er bare arbejder.

Med Lume Pad 2 skal alt, hvad du vil bruge i 3D, programmeres specifikt med Leia SDK. Det fungerer ikke engang med Android-apps, der er designet til Google VR.

Hvis der ikke er nogen app til det, så er det det. Og ærligt talt er det heller ikke så nemt at få dit eget indhold ind på denne enhed. Android File Transfer-appen på Mac er skitseagtig på de bedste tidspunkter, så jeg var nødt til at installere en tilfældig Android-app med en forfærdelig grænseflade bare for at browse over netværket. Det var en elendig oplevelse at kopiere en fil.

Jeg tror, ​​at den virkelige niche for dette produkt vil være med 3D-modellering; eller rettere sagt, se de 3D-modeller, du har produceret andre steder og uploadet til Sketchfab. Det kan dog være et meget nichepublikum. Det er utroligt overbevisende at se dit 3D-objektdesign komme til live, og med gengivet 3D-objekter er den dybde, du kan få, utrolig god. Og for den håndfuld mennesker, der stadig elsker stereofotografering: du kommer til at elske dette.

For alle andre er jeg ikke så sikker. Jeg kan se, hvordan Leia forsøger at gøre det overbevisende med 3D-ifier AI af enhver YouTube-video og kameraet på bagsiden til at lave dine egne 3D-billeder. Men for disse funktioner fungerer det ikke så godt. Ligesom jeg ikke tror, ​​nogen vil optage familieøjeblikke ved hjælp af Apple Vision Pro's frontvendte 3D-kamera, kan jeg ikke se dig slæbe en $1000-tablet rundt for at tage billeder eller videoer. Så min største bekymring er simpelthen, at der ikke er et marked for denne enhed; i det mindste ikke en stor nok til at overbevise udviklere om, at det er værd at tilføje Leia SDK-understøttelse til deres apps.

Selvom det næppe er et endeligt datapunkt, har subredditen til Lume Pad - som måske er det første sted, jeg ville springe over for at finde nye apps, tips og indholdsforslag - i alt 105 medlemmer.

Hardwaren er utrolig, og softwaren prøver så hårdt på at finde et rigtigt formål, og jeg tror bare ikke, det rammer helt. Alligevel bliver det måske med tiden. Men hvis du har den tidligere Lume Pad og allerede nyder, hvad du kan gøre med den, er Lume Pad 2 på alle måder en utrolig opgradering. Få det - du vil elske det.