发布日期：2025年3月31日 / 更新日期：2025年3月31日 – 作者：Konrad Wolfenstein
AI在VR开发中的变革：Meta如何从单张图像中构建沉浸式3D世界——图片来源：Xpert.Digital
Meta Labs 开发出用于 3D VR 世界的一种突破性工具
VR创作的未来：利用新技术打造栩栩如生的3D世界
苏黎世 Meta Reality Labs 的一个研究团队发布了一项令人瞩目的技术，该技术能够仅凭一张图像就为虚拟现实头显生成栩栩如生的 3D 环境。这项创新有望从根本上改变虚拟现实内容的开发方式，并可能成为虚拟现实内容创作普及化进程中的重要一步。通过结合多种人工智能方法，研究人员成功地将一项复杂且模糊的任务分解为易于处理的子问题，从而为简化虚拟现实开发铺平了道路。
适合：
Meta 3D VR 环境生成器背后的技术创新
Meta 开发的这项技术代表了一种全新的 AI 驱动型 VR 内容生成方法。该过程包含多个顺序步骤，最终共同创建一个连贯的 3D 环境。首先，使用预训练的扩散模型生成连贯的 360 度全景图。然后，使用度量深度估计器将这些全景图转换到三维空间。
在接下来的流程中，系统会根据三维数据生成点云。然后，一种称为图像修复的模型会利用这些点云信息填充缺失区域，从而确保视觉一致性。最终生成一个使用高斯散射渲染的三维环境，用户可以在虚拟现实（VR）中探索该环境的特定区域。
由 Katja Schwarz、Denis Rozumny、Samuel Rota Bulo、Lorenzo Porzi 和 Peter Kontschieder 组成的研究团队解释说，他们工作的核心见解是将从单张图像创建 3D 环境这一本质上复杂且模糊的任务分解为一系列更易于管理的子问题，每个子问题都可以使用现有技术来解决。
输入数据的灵活性
该方法的一大亮点在于其对输入数据的广泛兼容性。这项技术不仅适用于人工生成的图像，也适用于传统照片。此外，即使是场景的纯文本描述，也能作为输入生成高质量的3D环境，适用于VR头显。
简化VR内容创作的潜力
利用单张图片或文字描述创建完整虚拟现实环境的能力，对虚拟现实内容创作具有深远的影响。传统的虚拟现实环境开发方法需要大量的技术专长、专用软件，而且往往需要投入大量时间。
Meta 的新技术有望显著降低这些门槛，让更多用户能够轻松创作 VR 内容。例如，用户可以仅凭一张图片创建 3D 环境，然后使用 Meta Quest 进行探索，或将其用作初始环境。
当前限制和挑战
尽管取得了令人瞩目的进展，但正如研究论文中所述，仍然存在一些局限性和挑战。一个关键的局限性在于生成环境中的导航，目前导航范围仅限于边长约为2米的立方体。研究人员解释说，将可导航区域扩展到此范围之外非常困难，因为这会显著增加任务的复杂性。
此外，该流程目前尚不支持实时场景合成。这意味着创建环境需要时间。但是，一旦 Gaussian Splats 环境创建完成，即可在 VR 设备上实时显示。
融入Meta的战略愿景
这项3D生成技术的开发是Meta公司融合人工智能和沉浸式技术的整体战略的一部分。马克·扎克伯格曾多次强调，他设想构建一个元宇宙，作为移动互联网的继任者。
近年来，Meta持续投资于VR和MR技术的研发，从用于VR社交互动的Horizon系列产品到将AI助手集成到VR环境中，均有涉足。而能够更轻松地创建引人入胜的3D环境，则是实现这一愿景的关键基石。
适合：
人工智能作为虚拟现实发展的催化剂
Meta公司展示的技术体现了一个更大的趋势：人工智能正日益成为推动虚拟现实（VR）发展的重要催化剂。类似的方法也应用于其他领域，例如为沉浸式环境创建人工智能化身，或构建像Victoria VR这样利用OpenAI集成技术的AI驱动的虚拟世界。
人工智能与虚拟现实技术的结合，为创造逼真、互动且直观的虚拟体验开辟了新的可能性。尤其值得一提的是，简化开发流程并降低技术准入门槛，将有助于虚拟现实技术的更广泛应用。
VR的未来：Meta的3D开发将为我们带来什么？
Meta公司利用单张图像生成3D VR环境的技术，标志着VR内容创作流程的显著简化。通过巧妙地结合多种人工智能方法，复杂的难题被分解成可解决的子任务，最终取得了令人瞩目的成果。
目前尚不清楚这项技术何时能应用于Meta Quest等商业产品中。不过，研究人员表示，商业化似乎指日可待。随着技术的不断研发，目前存在的导航区域受限等问题有望得到解决。
人工智能与虚拟现实技术的日益融合有望彻底改变虚拟环境的创建和使用方式。凭借此类创新，Meta 正处于这一发展趋势的前沿，为未来打造更易于创建且更易于被广大用户体验的沉浸式数字体验铺平道路。
适合：
您的全球营销和业务发展合作伙伴
☑️我们的业务语言是英语或德语
☑️ 新：用您的国家语言进行通信！
Konrad Wolfenstein
我很乐意作为个人顾问为您和我的团队提供服务。
您可以通过填写此处的联系表，或者直接致电+49 89 89 674 804 （慕尼黑）。我的电子邮件地址是： wolfenstein ∂ xpert.digital
我很期待我们的联合项目。
