Publicerad den: 31 mars 2025 / Uppdaterad den: 31 mars 2025 – Författare: Konrad Wolfenstein
AI-transformation i VR-utveckling: Hur Meta framkallar uppslukande 3D-världar från enskilda bilder – Bild: Xpert.Digital
Meta Labs utvecklar banbrytande verktyg för 3D VR-världar
Framtiden för VR-skapande: Verklighetstrogna 3D-världar med ny teknik
Ett forskarteam på Meta Reality Labs i Zürich har presenterat en imponerande teknik som gör det möjligt att generera verklighetstrogna 3D-miljöer för virtual reality-headset från en enda bild. Denna innovation lovar att fundamentalt förändra hur VR-innehåll utvecklas och kan representera ett betydande steg mot att demokratisera skapandet av VR-innehåll. Genom att kombinera olika AI-metoder har forskarna lyckats bryta ner en komplex och tvetydig uppgift i hanterbara delproblem och därmed bana väg för förenklad VR-utveckling.
Lämplig för detta:
Den tekniska innovationen bakom Metas 3D VR-miljögenerator
Tekniken som utvecklats av Meta representerar en ny metod för AI-driven VR-innehållsgenerering. Processen består av flera sekventiella steg som tillsammans skapar en sammanhängande 3D-miljö. Först genereras sammanhängande 360-graderspanorama med hjälp av en förtränad diffusionsmodell. Dessa översätts sedan till den tredje dimensionen med hjälp av en metrisk djupuppskattare.
I nästa fas av processen genereras ett punktmoln från 3D-data. En så kallad inpainting-modell fyller sedan i saknade områden med information från dessa punktmoln, vilket säkerställer visuell konsistens. Slutresultatet är en 3D-miljö renderad med Gaussisk splatting, som kan utforskas i VR inom ett definierat område.
Forskargruppen, som består av Katja Schwarz, Denis Rozumny, Samuel Rota Bulo, Lorenzo Porzi och Peter Kontschieder, förklarar att den centrala insikten i deras arbete är att bryta ner den i sig komplexa och tvetydiga uppgiften att skapa en 3D-miljö från en enda bild till en serie mer hanterbara delproblem, som vart och ett kan lösas med hjälp av befintliga tekniker.
Flexibilitet i indata
En anmärkningsvärd egenskap hos metoden är dess mångsidighet vad gäller indata. Tekniken fungerar inte bara med artificiellt genererade bilder utan även med konventionella fotografier. Dessutom kan även rent textuella beskrivningar av en scen fungera som indata för att generera högkvalitativa 3D-miljöer som är lämpliga för användning i VR-headset.
Potential för att förenkla skapandet av VR-innehåll
Möjligheten att skapa en komplett VR-miljö från en enda bild eller textbeskrivning har långtgående konsekvenser för skapandet av VR-innehåll. Traditionella metoder för att utveckla VR-miljöer kräver betydande teknisk expertis, specialiserad programvara och ofta en avsevärd tidsinvestering.
Metas nya teknik skulle kunna minska dessa hinder avsevärt och göra skapandet av VR-innehåll tillgängligt för en bredare publik. Användare kan till exempel skapa en 3D-miljö från en enda bild och sedan utforska den med Meta Quest eller använda den som en startmiljö.
Nuvarande restriktioner och utmaningar
Trots de imponerande framstegen kvarstår vissa begränsningar och utmaningar, vilket beskrivs i forskningsartikeln. En viktig begränsning är navigeringen inom den genererade miljön, som för närvarande är begränsad till en kub med sidor som är cirka 2 meter långa. Forskarna förklarar att det är svårt att utöka det navigerbara området bortom detta eftersom det avsevärt ökar uppgiftens komplexitet.
Dessutom stöder pipelinen ännu inte scensyntes i realtid. Det betyder att det tar tid att skapa miljön. Men när Gaussian Splats-miljön väl är skapad kan den visas i realtid på en VR-enhet.
Integrering i Metas strategiska vision
Utvecklingen av denna 3D-genereringsteknik är en del av Metas bredare strategi att sammanfoga AI och immersiva teknologier. Mark Zuckerberg har upprepade gånger betonat visionen om en metaversum som är avsedd att fungera som efterträdaren till mobilt internet.
Meta har konsekvent investerat i utvecklingen av VR- och MR-tekniker de senaste åren, från Horizon-familjen för sociala interaktioner i VR till integrationen av AI-assistenter i VR-miljöer. Möjligheten att enklare skapa engagerande 3D-miljöer är en viktig byggsten för att förverkliga denna vision.
Lämplig för detta:
AI som katalysator för VR-utveckling
Tekniken som Meta demonstrerat exemplifierar en större trend: Artificiell intelligens blir alltmer en katalysator för framsteg inom VR-utveckling. Liknande tillvägagångssätt kan hittas inom andra områden, såsom skapandet av AI-avatarer för immersiva miljöer eller AI-drivna virtuella världar som Victoria VR, som använder OpenAI-integration.
Kombinationen av AI och VR öppnar upp nya möjligheter för att skapa realistiska, interaktiva och intuitiva virtuella upplevelser. I synnerhet kan förenkling av utvecklingsprocessen och minskning av tekniska inträdeshinder bidra till ett bredare införande av VR-teknik.
VR:s framtid: Vad Metas 3D-utveckling har i beredskap för oss
Metas teknik för att generera 3D VR-miljöer från enskilda bilder markerar ett betydande framsteg i att förenkla skapandet av VR-innehåll. Genom att smart kombinera olika AI-metoder bryts ett komplext problem ner i lösbara deluppgifter, vilket leder till imponerande resultat.
Det är för närvarande okänt när denna teknik kommer att finnas tillgänglig i kommersiella produkter som Meta Quest. Enligt forskarna verkar kommersialiseringen dock nära förestående. Med fortsatt utveckling skulle nuvarande begränsningar, såsom det begränsade navigeringsområdet, kunna övervinnas.
Den ökande integrationen av AI i VR-teknik lovar att revolutionera både skapandet och användningen av virtuella miljöer. Med innovationer som denna positionerar sig Meta i framkant av denna utveckling och banar väg för en framtid där immersiva digitala upplevelser blir både enklare att skapa och mer tillgängliga för en bredare publik.
Lämplig för detta:
Din globala marknadsförings- och affärsutvecklingspartner
☑ Vårt affärsspråk är engelska eller tyska
☑ Nytt: korrespondens på ditt nationella språk!
Konrad Wolfenstein
Jag är glad att vara tillgänglig för dig och mitt team som personlig konsult.
Du kan kontakta mig genom att fylla i kontaktformuläret eller helt enkelt ringa mig på +49 89 674 804 (München) . Min e -postadress är: Wolfenstein ∂ xpert.digital
Jag ser fram emot vårt gemensamma projekt.
