„Gracia“ judančius visiškai tūrinius vaizdus dabar galima transliuoti, įskaitant mišrią „Quest 3“ realybę, nereikia atsisiųsti programos ar turinio, o netrukus pasirodys „Apple Vision Pro“ programa.
„Gracia“ pirmą kartą buvo paleista 2024 m. kaip „Quest“ programa, skirta žiūrėti statiškus fotorealistinius objektus, o ypač PC VR programa. juda fotorealistiškos scenos, kitaip apibūdintos kaip tūrinis vaizdo įrašas.
Ir, kad būtų aišku, tai ne tik paprastas paralaksas, kokį gautumėte iš stereoskopinio 3D vaizdo, nei ribotos perspektyvos sintetinis gylis, kaip „Apple visionOS 26“ erdvinės scenos. „Gracia“ žengia daug toliau, siūlydama visiškai tūrinį turinį, kurį galite fiziškai vaikščioti VR arba savo kambaryje naudodami mišrią realybę.
„Gracia“ judančios tūrinės scenos dabar 3 ir „Pico 4“ užduotyse
„Gracia“ judančios tūrinės scenos, dinamiški Gauso žymekliai dabar pasiekiami atskirose „Quest 3“ ir „Pico 4“ ausinėse.
Kaip ir beveik visose nuostabiose 3D rekonstrukcijos pažangose per pastaruosius kelerius metus, Gracia sukurta technologija yra Gauso dėmės – milijonai pusiau permatomų spalvotų dėmių (Gauso dėmių) sutalpinamos į 3D erdvę, kad savavališki požiūrio taškai būtų realiai atvaizduojami realiuoju laiku. Judančios žymės dažnai vadinamos 4DGS, keturmatėmis Gauso žymomis, o ketvirtasis matmuo yra laikas.
2024 m. pabaigoje „Gracia“ jau buvo paleidusi atskiras programas, skirtas „Quest 3“ ir „Pico 4“, panaikindama reikalavimą asmeniniam kompiuteriui ir tam tikra kokybė. Tačiau didžiausia šio atskiro srauto problema buvo poreikis atsisiųsti kiekvieną sceną, todėl jums reikia stovėti su ausinėmis ir stebėti kelių gigabaitų failą, kuris patenka į jūsų įrenginį. Tuo metu naudojant įmonės technologiją srautiniam perdavimui būtų reikėję 2,4 gigabito interneto ryšio, ką turi tik maža dalis žmonių, o dauguma atskirų ausinių net negali patikimai veikti belaidžiu ryšiu.
Tai sužlugdė „Gracia“ įkūrimo ambicijas tapti „tikrosios apimties turinio YouTube“ (nors dabar bendrovė nuo to pasitraukė), nes jei „YouTube“ prieš paleidžiant kiekvieną vaizdo įrašą reikėtų atsisiųsti kelių gigabaitų, tai tiesiog nebūtų perspektyvi paslauga. Taigi atskira ausinių programa daugiausia dėmesio skyrė trumpiems 10 sekundžių klipams, o ne ilgesniam turiniui, kuris padėtų naudoti daugiau atvejų.
Atskiros programos paleidimo metu „Gracia“ pranešė „UploadVR“, kad ji stengiasi patobulinti jos glaudinimą. Dabar, praėjus pusantrų metų, startuolis pasiekė šį aukštą tikslą.
„Gracia“ transliacija naudojant „Apple Vision Pro“.
Šių metų kovą „Gracia“ pristatė pirmą kartą pasaulyje: galimybę srautiniu būdu transliuoti tam tikras 4DGS scenas, nereikia diegti programos arba atsisiųsti visą sceną. Ir jums net nereikia atsisiųsti programos; Naujasis „Gracia“ technologijų paketas veikia visiškai WebXR, o tai reiškia, kad galite tiesiog pereiti į gracia.ai/store savo „Quest 3“ žiniatinklio naršyklėje ir per kelias sekundes savo svetainėje tūriniu būdu atvaizduoti atlikėją.
„Apple Vision Pro“, kadangi „Apple“ vis dar neleidžia „WebXR“ programoms naudoti perėjimo kaip fono, vaizdų matysite juodoje tuščioje vietoje. Siekdama tai apeiti ir leisti „Vision Pro“ savininkams rodyti nuotraukas savo svetainėje, „Gracia“ kuria „Apple Vision Pro“ programą, kuri šiuo metu bandoma ir kuri turėtų pasirodyti gana greitai.
Kinijos 4DV AI išleido 6DoF Volumetric Video WebXR demonstraciją
Kinijos 4DV AI išleido WebXR demonstracinę versiją, skirtą 6DoF tūriniams vaizdo įrašams, sukurtiems iš 20 kameros rodinių, ir jūs galite tai išbandyti savo VR ausinėse dabar.
Kiek mes žinome, šiandien pasaulyje nėra nieko panašaus į Gracia transliaciją. Kinijos 4DV pernai WebXR rodė judančias scenas, tačiau jos truko tik 10 sekundžių ir buvo iš anksto atsisiųstos. „Gracia“ vėl pirmauja, kai reikia pateikti judančius tūrinius vaizdus VR.
Startuolis teigia, kad tai pasiekė sukūręs pagrindinių kadrų ir judesio kaitos deltų siuntimo techniką, užkoduodamas tik tas, kurios fiksavimo dalys keičiasi laikui bėgant, o ne siunčiant visą kiekvieno kadro sceną. Iš esmės „Gracia“ taiko vaizdo kodeko stiliaus metodą Gauso žymėjimui. Ji taip pat naudoja naują WebGPU grafikos API jūsų naršyklėje, kad pasiektų maksimalų įmanomą našumą, konkuruodama su vietinėmis programėlėmis, kad būtų pašalintas pats sudėtingiausias bet kurios vartotojų programos veiksmas, pirmiausia tas pradinis atsisiuntimo reikalavimas. Dėl suspaudimo srautas yra įmanomas; „WebGPU“ leidžia pakankamai greitai pateikti srautu perduodamus žymes naršyklėje.
Tai ne tik leidžia beveik akimirksniu transliuoti tūrinius fiksavimus, bet ir tai reiškia, kad fiksuojamose nuotraukose nėra griežto failo dydžio ribos, teoriškai tai palaiko naudojimo atvejus, pavyzdžiui, ištisus koncertus.
Norint transliuoti „Gracia“ judančias tūrines scenas santykinai aukšta kokybe, 120 000 žymų viename kadre, jums reikės nuolatinio 75 Mbps ryšio. Prieš dešimtmetį tai būtų ne tik pradžia, bet 2026 m. maždaug 90 % namų išsivysčiusiose šalyse šiuo metu turi pakankamai greitą internetą.
Vis dėlto kai kurie to nedaro, o kartais ausinės bus per toli nuo maršruto parinktuvo arba tinkle, kur kiti įrenginiai naudojasi pralaidumu. Tam „Gracia“ pademonstravo 17 Mbps režimą, siūlantį 15 000 žymų vienam kadrui, tačiau šiuo režimu kokybė gerokai pablogėja.
Gracia srautinio perdavimo glaudinimo lygiai.
Šiuo metu iš „Gracia“ svetainės galima transliuoti tris scenas: 36 sekundžių klipas, kuriame užfiksuotas žmogus, dirbantis ant dviračio rato, 39 sekundžių klipas, kuriame gydytojas apžiūri paciento petį, ir įspūdingiausias – 4 minučių trukmės muzikanto, dainuojančio su gitara, pasirodymas su erdviniu garsu.
„Gracia“ taip pat nori atkreipti dėmesį į tai, kad nors jos užfiksuoti vaizdai puikiai tinka patalpinti jūsų svetainėje naudojant mišrią realybę, juos taip pat galima įdėti į esamą virtualią „Unity“ arba „Unreal“ aplinką, įskaitant VR žaidimus, jei kūrėjas nori tai padaryti.
Gracia nuotraukas galima įdėti į virtualias scenas.
Kad būtų aišku, beje, šiame straipsnyje „srautas“ turiu omenyje turinio žiūrėjimą jo visiškai neatsisiunčiant. „Gracia“ technologija nepalaiko tiesioginės transliacijos. O gaudymo ir apdorojimo reikalavimai čia yra dramblys.
Norint užfiksuoti šias scenas, reikia maždaug 60 su užraktu sinchronizuotų ir genlocked kamerų, už kurias studijos paprastai ima mažiausiai 15 000 USD, o „Gracia“ ima 800 USD už minutę už apdorojimą ir „minimalų mokestį už segmentą“. „iPhone 17 Pro“ „genlock“ palaikymas gali leisti sumažinti ribines fiksavimo išlaidas, tačiau norėdami geriausių rezultatų kūrėjai norės naudoti profesionalius fotoaparatus, tokius kaip „Blackmagic“ ir „Sony“.
Vis dėlto, nepaisant fiksavimo ir apdorojimo reikalavimų, tai, ką Gracia čia padarė, yra nepaprasta. Labiau norėčiau žiūrėti muzikanto ar komiko pasirodymą kaip 6DoF garsumą mano svetainėje arba pageidaujamą VR aplinką, nei 3DoF 180° 3D vaizdo įrašą. Įtariu, kad jei skaitote tai, sutinkate.
Jei turite VR ausines, eikite į gracia.ai/store savo ausinių žiniatinklio naršyklėje arba kompiuterio VR naršyklėje ir išbandykite patys. Ir net jei to nedarote, galite išbandyti plokščiaekranį atvaizdavimą savo naršyklėje, kad gautumėte pagrindinę idėją, nors nejaučiate gylio ir masto.
Kita tūrinių scenų erdvės riba bus technologijos kūrimas, leidžiantis bet kam užfiksuoti tūrines scenas keliais „iPhone“ telefonais ir žymiai sutrumpinti apdorojimo laiką. Kad ir kaip šiandien skambėtų neįmanoma, prieš kelerius metus kilo mintis net transliuoti tokio tipo turinį, o 3D rekonstrukcijos scenos pažangos tempas, panaudojant sparčią AI pažangą, tebėra stulbinantis. „Tikrai didelio turinio „YouTube“ šiandien neįmanoma, bet labai įtariu, kad taip bus iki šio dešimtmečio pabaigos – ir tai gali tapti pagrindiniu XR technologijos panaudojimo pavyzdžiu, kuris paskatins jos pagrindinį naudojimą dėl socialinio turinio sklaidos kanalo platformos, kuri tikrai ja pasinaudoja, privalumų.
Vėl aktyviai rašau apie „UploadVR“, o šis straipsnis yra vienas iš „pasigauti“ straipsnių, kuriuose pranešu apie kai kuriuos įdomius dalykus, kurie pastaraisiais mėnesiais vyko pramonėje. Ir taip, VR atsisiuntimas grįš labai greitai!
