Virtuális valóság okostelefon alkalmazás „Wist”: Változtasd videóidat bejárható 3D emlékekké – Kreatív kép: Xpert.Digital
Az iPhone Pro lehetővé teszi: Az alkalmazás hétköznapi videókat alakít át magával ragadó 3D-élményekké
Térbeli emlékek: A Wist-App segítségével átélheted a múlt pillanatait
Képzeljük el, hogy nem csak egy régi videót nézhetünk meg gyermeke születésnapjáról vagy az utolsó nyaralásunkról, hanem szó szerint belépünk a jelenetbe, és mozogunk benne. Pontosan ezt a lenyűgöző ígéretet teszi a Wist nevű alkalmazás, amely újraértelmezi a múltunk rögzítésének és megtapasztalásának módját. A hétköznapi okostelefon-videókat bejárható, háromdimenziós „térbeli emlékekké” alakítja.
Ezt egy olyan technológia teszi lehetővé, amely már sokak zsebében megtalálható: a jelenlegi iPhone Pro modellek LiDAR szkennere. A fejlett algoritmusokkal, mint például a Gauss-féle fröccsenés, kombinálva a Wist nem csupán egy videót, hanem egy pillanat teljes 3D-s rekonstrukcióját hozza létre. Ezt aztán immerzíven lehet felfedezni olyan vegyes valóságú headsetekkel, mint a Meta Quest 3 vagy az Apple Vision Pro, mintha egy személyes hologramba lépnénk.
De a Wist több mint egy technológiai trükk, és messze túlmutat az Apple natív térbeli videóformátumán. Míg az utóbbi sztereoszkopikus képet ad, a Wist valódi mozgásszabadságot biztosít a felvételen belül. Ez a technológiai ugrás mélyreható kérdések előtt nyitja meg az utat: Mit jelent az emlékezetünk számára, ha nemcsak megfigyelhetjük a múltat, hanem meg is tapasztalhatjuk azt? Milyen terápiás lehetőségek adódnak, és hol leselkednek a nosztalgiafüggőség és a digitális visszaélés veszélyei, ahogyan azt a disztópikus víziók, mint például a "Fekete tükör" ábrázolják?
Ez a cikk mélyen belemerül a térbeli emlékek világába, és megválaszolja a Wisttel kapcsolatos legfontosabb kérdéseket – a technikai alapoktól és érzelmi hatásoktól kezdve az etikai és gazdasági szempontokig. Rávilágít egy olyan technológiára, amely alapvetően megváltoztathatja a múlthoz fűződő viszonyunkat.
Ehhez kapcsolódóan:
Mit jelent a Wist egy mondatban?
A Wist egy okostelefon-alkalmazás, amely a hagyományos videofelvételeket bejárható 3D-s jelenetekké alakítja, lehetővé téve a felhasználók számára, hogy emlékeiket szobát betöltő módon éljék át kiterjesztett és kevert valóságú headsetek, például a Meta Quest 3 vagy az Apple Vision Pro segítségével.
Miért vonz egyetlen alkalmazás ennyi figyelmet?
Mivel a Wist az első kísérlet arra, hogy a mindennapi emlékeket tömegesen valós idejű hologramokká alakítsa anélkül, hogy a felhasználóknak speciális kamerákra vagy drága asztali szoftverekre lenne szükségük.
Mi különbözteti a Wistet a klasszikus 2D-s videóktól vagy a mai térhatású videofelvételektől az iPhone 15 Prón?
Ahelyett, hogy csupán két sztereoszkopikus kameraképet rögzítene, a Wist mélységi adatokat is gyűjt a LiDAR érzékelő segítségével, ezeket kombinálja a pontos eszközpozícióval, és mindent egy rekonstruált pontba vagy Gauss-féle fröccsenő modellbe csomagol, amely lehetővé teszi a néző számára, hogy valódi parallaxismozgást tapasztaljon meg.
Hogyan definiálja Andrew McHugh, a Wist vezérigazgatója a „térbeli memória” kifejezést?
Egy olyan élethelyzet digitális rekonstrukciójaként, amelybe fizikailag beléphetünk és szabadon mozoghatunk, ezáltal kiegészítve a megszokott fotó- vagy videómódokat térbeli koordinátákkal és mélységgel.
Új ez az ötlet?
Az olyan kutatási területek, mint a térbeli memória felmérése a VR-ban, már évek óta léteznek, de eddig nem volt olyan, mindennapi használatra alkalmas fogyasztói alkalmazás, amely automatikusan interaktív 3D-s jelenetekké alakítja a videókat.
Mely Apple eszközök támogatják a Wisthez való rögzítést?
Az Apple eszközök központi szerepet játszanak a Wist-videók rögzítésében, bár csak bizonyos iPhone-modellek támogatják ezt a funkciót. Pontosabban, ezek mind a Pro és Pro Max generációk az iPhone 13-tól kezdődően, amelyek LiDAR szkennerrel vannak felszerelve. Az iPhone 13 Pro a belépő szintű modell a Wist-felvételhez, ezt követi az iPhone 14 Pro a gyorsabb A16 CPU-val. Az iPhone 15 Pro natív térbeli videóképességeket is kínál. Ezzel szemben a standard modellek, mint például az iPhone 15, nem tudnak Wist-videókat rögzíteni, mert hiányzik belőlük a szükséges LiDAR szkenner. A technológia ezért a felső kategóriás Pro modellekre korlátozódik, amelyek rendelkeznek a szükséges érzékelőtechnológiával.
Miért támaszkodik a Wist a LiDAR szkennerre?
A szkenner lézerimpulzusokat bocsát ki, méri azok visszaverődésig tartó útját, és így milliméteres pontosságú mélységtérképeket készít, amelyek elengedhetetlenek a szilárd 3D-s újrajátszáshoz.
A telefon feldolgozási teljesítménye is szerepet játszik?
Igen, mivel az alkalmazás a rekonstrukciós folyamat nagy részét helyben kezeli, ami azt jelenti, hogy A15-től kezdődően A-sorozatú SoC-kre van szükség.
Hogyan néz ki egy tipikus felvételi folyamat?
Az alkalmazás közvetlenül videó módban indul; a felhasználó maximum 40 másodpercig filmez, miközben a LiDAR és a mozgásérzékelők szinkronban gyűjtik az adatokat.
Mi történik a felvétel után?
Az iPhone szegmentálja a videoképkockákat, mélység és pozíció alapján pontfelhőt hoz létre, Gauss-eloszlású fröccsenés segítségével optimalizál, és a nyers adatokat elmenti a későbbi folyamatfrissítésekhez.
Miért fontosak a nyers adatok?
A jövőbeli szoftververziók fejlettebb algoritmusok segítségével képesek lesznek rekonstruálni ugyanazt a jelenetet anélkül, hogy a felhasználónak újra kellene filmeznie.
Hogyan kerül be az ember a memóriába?
iPhone AR módján keresztül, vagy egy dedikált vegyes valóság alkalmazáson keresztül a Quest 3 vagy a Vision Pro készülékekhez, amely a 3D-s jelenetet holografikus gömbként helyezi el a szobában.
Milyen képkockasebességet ér el Wist a Quest 3-ban?
A 400 000 Gauss-görbével készült demóbuildek stabil 72 fps-t produkálnak a lapos VR-szórásos raszterizálónak köszönhetően.
Az Apple Vision Pro ugyanazokat az adatokat használja?
Igen; a Wist USD-Z assetként exportálja a modellt, amelyet a Vision Pro a RealityKit renderelőjében renderel, az Apple pedig a saját, foveated shadingjét adja hozzá.
Mi a Gauss-féle fröccsenés?
Egy olyan módszer, amely minden 3D-s mintát színes anizotrop Gauss-görbeként kódol; a renderelés során ezekből az ellipszoidokból milliókat rasztereznek a képernyőre egy GPU segítségével.
Miért választja a Wist ezt a módszert a klasszikus hálók helyett?
Mivel hatékonyan képes strukturálatlan mélységmintákat feldolgozni, fotorealisztikus, lágy szélű rekonstrukciókat készít, és simábban skálázódik a fejkövetős VR-ben.
Vannak-e nézőpontbeli műtermékek?
Igen. Mivel a forgatás csak egy kameraállásból történik, a hátulnézet hiányzik; a szélek átlátszónak tűnhetnek.
Hogyan minimalizálja az alkalmazás ezeket az akadályokat?
ML-alapú, lyukakat kitöltő diffúziós modelleken, valamint neurális hálózatokon alapuló mélységi szuperfelbontáson keresztül.
Hogyan viszonyul ez az Apple natív térhatású videóihoz?
Az Apple sztereó RGB-t biztosít, de szabad parallaxis nem; a Wist mozgásszabadságot kínál, de távoli szögekből lemond a részletekről.
Milyen pszichológiai tanulmányok léteznek a térbeli memóriával kapcsolatban?
A VR-kutatások azt mutatják, hogy a vegyes valóságú kontextusok intenzívebben indítják el az epizodikus memóriát, mint a 2D-s ingerek.
Lehetnek-e az ilyen emléktereknek terápiás hatásaik?
Igen; a traumakezelés és az idősgondozás területén alkalmazott alkalmazások VR-alapú memória-visszajátszásokat vizsgálnak, és nagyobb felidézési pontosságról és érzelmi rezonanciáról számolnak be.
Hol tárolódnak a jelenetek?
Alapértelmezés szerint az adatok helyben, titkosított iCloud-tárhelyen tárolódnak; a felhőalapú feldolgozás továbbra is opcionális.
Harmadik félnek joga van átalakítani a szobáimat?
Csak akkor, ha a felhasználó megadja az engedélyeket; a Meta-Quest-Policy külön hozzájárulást igényel a térbeli adatok megosztásához.
Milyen kockázatokat látnak az adatvédelmi aktivisták?
Nagy felbontású privát terek visszaélésszerű használata célzásra, deepfake manipulációra vagy társadalmi manipulációra irányuló támadásokra.
Van Wistnek üzleti modellje?
Freemium platform: Ingyenes alapfiók, prémium előfizetés hosszabb klipekhez, felhőalapú renderelési kreditek és többfelhasználós munkamenetek.
Ki fektet be?
Angyalfinanszírozási körök a Szilícium-völgy XR alapjaitól; Andrew McHugh vezérigazgató, aki korábban a Samsung XR design részlegénél dolgozott, iparági kapcsolatokat hoz magával.
Van bármilyen verseny?
Maga az Apple, az Insta360 hardvere és harmadik féltől származó alkalmazások, mint például a Spatialify, amelyek nagyobb felbontást kínálnak a térbeli videókhoz.
Ehhez kapcsolódóan:
Milyen kulturális narratívákat szolgálnak az ilyen alkalmazások?
Az olyan sorozatok, mint a „Black Mirror”, az emlékek visszajátszását Segen és átokként is ábrázolják; Heise Wistet az „Eulogy” című epizódhoz hasonlítja, amelyben a VR-emlékeknek gyógyító hatásuk van.
Függőséggé válhat a nosztalgia?
A kutatók figyelmeztetnek az eszképizmus veszélyére, amikor a tökéletesen rekonstruált múlt beárnyékolja a valódi jelen vonzerejét.
Vannak pozitív víziók?
Az emlékhologramok élénken megőrizhetik a történelmi helyszíneket, a családtörténeteket vagy a kulturális örökséget, és interaktívabbá tehetik az oktatást.
Milyen fényviszonyok az ideálisak?
Természetes, egyenletes fény; nincsenek erős árnyékok, mivel a LiDAR interferál a kóválygó fényekkel.
Milyen hosszú lehet a klip?
Jelenleg 40 másodperc; a hosszabb sorozatok exponenciálisan növelik az adatmennyiséget, és megnehezítik a valós idejű streamelést.
Mely motívumok különösen figyelemre méltóak?
Térben dinamikus jelenetek mélységi rétegződéssel 1 m és 4 m közötti távolságban a kamera előtt, például születésnapok vagy háziállatok mozgása.
Létezik SDK?
A Wist API-hozzáférést tervez a Reconstruction folyamathoz, hogy külső XR-alkalmazásokat lehessen csatlakoztatni.
Hogyan integrálod a Wist jeleneteket az Unity-ba?
USD-Z export és egy Gauss-féle renderelőcsomag használata, amely VR-re optimalizált rendezési algoritmusokat tartalmaz többrétegű hibajelekhez.
Hardveresen gyorsított a 3DGS a mobil chipsetekben?
A Qualcomm szabadalmi ütemtervei Tensor magokat jeleznek Gauss-féle előrejelző jelátvitelhez, lehetővé téve a 90 fps-es vegyes valóságú visszajátszást okostelefon-lapkakészleteken.
Hogyan javíthatnák a jövő iPhone-jai a felvételkészítést?
Pletykák keringenek kettős LiDAR tömbökről, 10 méteres hatótávolsággal és változó pontsűrűséggel, amelyek valós idejű 360°-os szkennelést tesznek lehetővé.
Vajon a mesterséges intelligencia teljesen bezárja a biztonsági réseket?
A diffúziós modellek megközelítik a 0,95-ös fotókonzisztencia-pontszámot a valódi többnézetes szkennelésekhez képest, jelentősen csökkentve az árnyékképeket és a textúra villódzását.
Vajon Wist megváltoztatja a múlthoz fűződő viszonyunkat?
Igen. Amint a személyes történelmet nemcsak látjuk, hanem térben is megtapasztaljuk, az emlékezet és a jelen közötti határ eltolódik – lehetőséget adva az empátiára, és az érzelmi túlterheltség kockázatával járva.
Wist bemutatja, hogy ma már a szórakoztatóelektronikai eszközök is képesek a privát pillanatokat holografikus portálokként feldolgozni. A technológia lenyűgözően hatékony, de etikailag kihívást jelent. Azoknak, akik használják, mérlegelniük kell az emlékek megőrzésének és megosztásának lehetőségeit az adatvédelemmel és a függőséggel kapcsolatos aggályokkal szemben.
Ehhez kapcsolódóan:
- Vajon az ipari okosszemüvegek hamarosan felváltják majd az okostelefonjainkat? Átalakulás a láthatáron – az iparban is – hamarosan érkeznek a mesterséges intelligencia által vezérelt szemüvegek?
- Ügynökségi szakértelem a kiterjesztett valóság területén: Azonosítani azokat az iparágakat és vállalatokat, amelyek a leginkább profitálhatnak az AR marketingből
Globális marketing- és üzletfejlesztési partnere
☑️ Üzleti nyelvünk az angol vagy a német
☑️ ÚJ: Levelezés az anyanyelveden!
Konrad Wolfenstein
Én és a csapatom örömmel állunk rendelkezésére személyes tanácsadóként.
Kapcsolatba léphetsz velem a kapcsolatfelvételi űrlap kitöltésével itt wolfenstein@xpert.digital:, vagy egyszerűen hívj a +49 7348 4088 965 telefonszámon. Az e-mail címem
Alig várom a közös projektünket.
