Transformacja AI w rozwoju VR: Jak Meta tworzy wciągające światy 3D z pojedynczych obrazów – Zdjęcie: Xpert.Digital
Meta Labs opracowuje przełomowe narzędzie do tworzenia światów VR 3D
Przyszłość tworzenia VR: realistyczne światy 3D dzięki nowej technologii
Zespół badawczy z Meta Reality Labs w Zurychu zaprezentował imponującą technologię, która umożliwia generowanie realistycznych środowisk 3D dla zestawów słuchawkowych VR z jednego obrazu. Ta innowacja obiecuje fundamentalną zmianę sposobu tworzenia treści VR i może stanowić istotny krok w kierunku demokratyzacji tworzenia treści VR. Łącząc różne metody sztucznej inteligencji, badaczom udało się rozłożyć złożone i niejednoznaczne zadanie na łatwe do opanowania podproblemy, torując tym samym drogę do uproszczonego tworzenia treści VR.
Nadaje się do:
Innowacja technologiczna stojąca za generatorem środowiska VR 3D firmy Meta
Technologia opracowana przez Meta reprezentuje nowatorskie podejście do generowania treści VR z wykorzystaniem sztucznej inteligencji. Proces składa się z kilku kolejnych kroków, które razem tworzą spójne środowisko 3D. Najpierw generowane są spójne panoramy 360 stopni z wykorzystaniem wstępnie wytrenowanego modelu dyfuzji. Następnie są one przekształcane na trzeci wymiar za pomocą metrycznego estymatora głębokości.
W kolejnych fazach procesu, z danych 3D generowana jest chmura punktów. Model inpaintingu wypełnia następnie brakujące obszary informacjami z tych chmur punktów, zapewniając w ten sposób spójność wizualną. Efektem końcowym jest środowisko 3D renderowane z wykorzystaniem splatania Gaussa, które można eksplorować w VR w obrębie określonego obszaru.
Zespół badawczy, w którego skład wchodzą Katja Schwarz, Denis Rozumny, Samuel Rota Bulo, Lorenzo Porzi i Peter Kontschieder, wyjaśnia, że głównym założeniem ich pracy jest rozbicie z natury złożonego i niejednoznacznego zadania tworzenia środowiska 3D z pojedynczego obrazu na serię łatwiejszych do rozwiązania podproblemów, z których każdy można rozwiązać, wykorzystując istniejące techniki.
Elastyczność danych wejściowych
Niezwykłą cechą tej metody jest jej wszechstronność w zakresie danych wejściowych. Technologia ta działa nie tylko ze sztucznie generowanymi obrazami, ale również z konwencjonalnymi fotografiami. Co więcej, nawet czysto tekstowe opisy sceny mogą posłużyć jako dane wejściowe do generowania wysokiej jakości środowisk 3D, odpowiednich do wykorzystania w zestawach VR.
Potencjał uproszczenia tworzenia treści VR
Możliwość stworzenia kompletnego środowiska VR na podstawie jednego obrazu lub opisu tekstowego ma daleko idące implikacje dla tworzenia treści VR. Tradycyjne metody tworzenia środowisk VR wymagają znacznej wiedzy technicznej, specjalistycznego oprogramowania i często znacznej inwestycji czasu.
Nowa technologia Meta może znacznie obniżyć te bariery i sprawić, że tworzenie treści VR stanie się dostępne dla szerszej publiczności. Na przykład użytkownicy będą mogli stworzyć środowisko 3D na podstawie pojedynczego obrazu, a następnie eksplorować je za pomocą Meta Quest lub używać go jako środowiska startowego.
Obecne ograniczenia i wyzwania
Pomimo imponującego postępu, wciąż istnieją pewne ograniczenia i wyzwania, jak opisano w artykule badawczym. Kluczowym ograniczeniem jest nawigacja w wygenerowanym środowisku, które obecnie ogranicza się do sześcianu o bokach długości około 2 metrów. Naukowcy wyjaśniają, że rozszerzenie obszaru nawigacyjnego poza ten obszar jest trudne, ponieważ znacznie zwiększa złożoność zadania.
Co więcej, potok nie obsługuje jeszcze syntezy scen w czasie rzeczywistym. Oznacza to, że tworzenie środowiska zajmuje dużo czasu. Jednak po utworzeniu środowiska Gaussian Splats można je wyświetlać w czasie rzeczywistym na urządzeniu VR.
Integracja ze strategiczną wizją Meta
Rozwój tej technologii generacji 3D jest częścią szerszej strategii Meta, mającej na celu połączenie sztucznej inteligencji (AI) i technologii immersyjnych. Mark Zuckerberg wielokrotnie podkreślał wizję metawersum, które ma być następcą mobilnego internetu.
Meta konsekwentnie inwestowała w rozwój technologii VR i MR w ostatnich latach, od rodziny Horizon do interakcji społecznych w VR, po integrację asystentów AI ze środowiskami VR. Możliwość łatwiejszego tworzenia angażujących środowisk 3D jest kluczowym elementem realizacji tej wizji.
Nadaje się do:
Sztuczna inteligencja jako katalizator rozwoju VR
Technologia zaprezentowana przez Meta ilustruje szerszy trend: sztuczna inteligencja staje się coraz bardziej katalizatorem postępu w rozwoju VR. Podobne podejścia można znaleźć w innych obszarach, takich jak tworzenie awatarów AI do środowisk immersyjnych lub wirtualnych światów opartych na sztucznej inteligencji, takich jak Victoria VR, która wykorzystuje integrację z OpenAI.
Połączenie sztucznej inteligencji i VR otwiera nowe możliwości tworzenia realistycznych, interaktywnych i intuicyjnych wirtualnych doświadczeń. W szczególności uproszczenie procesu rozwoju i obniżenie technicznych barier wejścia mogłoby przyczynić się do szerszego wdrożenia technologii VR.
Przyszłość VR: Co przyniesie nam rozwój 3D firmy Meta
Technologia Meta do generowania trójwymiarowych środowisk VR z pojedynczych obrazów stanowi znaczący postęp w upraszczaniu tworzenia treści VR. Dzięki sprytnemu połączeniu różnych metod sztucznej inteligencji, złożony problem jest dzielony na rozwiązywalne podzadania, co prowadzi do imponujących rezultatów.
Obecnie nie wiadomo, kiedy ta technologia będzie dostępna w produktach komercyjnych, takich jak Meta Quest. Jednak zdaniem naukowców jej komercjalizacja wydaje się nieunikniona. Dzięki dalszemu rozwojowi obecne ograniczenia, takie jak ograniczony obszar nawigacji, mogą zostać pokonane.
Coraz większa integracja sztucznej inteligencji z technologiami VR obiecuje zrewolucjonizować zarówno tworzenie, jak i korzystanie z wirtualnych środowisk. Dzięki takim innowacjom, Meta plasuje się w czołówce tego rozwoju, torując drogę do przyszłości, w której immersyjne doświadczenia cyfrowe będą łatwiejsze w tworzeniu i bardziej dostępne dla szerszej publiczności.
Nadaje się do:
Twój globalny partner w zakresie marketingu i rozwoju biznesu
☑️Naszym językiem biznesowym jest angielski lub niemiecki
☑️ NOWOŚĆ: Korespondencja w Twoim języku narodowym!
Konrad Wolfenstein
Chętnie będę służyć Tobie i mojemu zespołowi jako osobisty doradca.
Możesz się ze mną skontaktować wypełniając formularz kontaktowy lub po prostu dzwoniąc pod numer +49 89 89 674 804 (Monachium) . Mój adres e-mail to: wolfenstein ∂ xpert.digital
Nie mogę się doczekać naszego wspólnego projektu.
