バーチャルリアリティスマートフォンアプリ「Wist」：動画を3Dで歩ける思い出に変える - クリエイティブイメージ：Xpert.Digital
iPhone Proなら可能：普通の動画を没入感のある3D体験に変えるアプリ
空間記憶：Wist アプリを使用すると、過去の瞬間を歩くことができます。
お子様の誕生日や前回の休暇の古いビデオを見るだけでなく、文字通りそのシーンに入り込み、その中を動き回れることを想像してみてください。まさにこれが、「Wist」というアプリが実現する魅力的な未来です。このアプリは、私たちが過去を記録し、体験する方法を再定義します。このアプリは、ありふれたスマートフォンのビデオを、歩き回れる3次元の「空間記憶」へと変換します。.
これは、既に多くのポケットに搭載されている技術、つまり現行のiPhone Proモデルに搭載されているLiDARスキャナによって可能になりました。ガウススプラッティングなどの高度なアルゴリズムと組み合わせることで、Wistは単なる動画ではなく、ある瞬間の完全な3D再構成を作成します。そして、Meta Quest 3やApple Vision Proなどの複合現実ヘッドセットを使って、まるで個人用ホログラムの中に入り込んだかのように、没入感のある体験をすることができます。.
しかし、Wistは単なる技術的な仕掛けではなく、Appleのネイティブ空間動画フォーマットをはるかに超えるものです。Appleがステレオスコピックな映像を提供するのに対し、Wistは録画内で真の自由な動きを可能にします。この技術的飛躍は、深遠な問いへの扉を開きます。過去を観察するだけでなく、体験できるということは、私たちの記憶にとって何を意味するのでしょうか？どのような治療の可能性が生まれ、そして「ブラック・ミラー」のようなディストピア映画に描かれているように、ノスタルジア中毒やデジタル虐待の危険性はどこに潜んでいるのでしょうか？
本稿では、空間記憶の世界を深く掘り下げ、Wistに関する最も重要な疑問に答えます。技術的な基盤や感情的な影響から、倫理的・経済的側面まで、あらゆる観点から考察します。過去との関係を根本的に変える可能性を秘めたこの技術に光を当てます。.
これに関連して:
文中でWistとは何ですか?
Wist は、従来のビデオ録画を歩き回れる 3D シーンに変換するスマートフォン アプリです。ユーザーは、Meta Quest 3 や Apple Vision Pro などの拡張現実および複合現実ヘッドセットを使用して、部屋いっぱいに自分の思い出を体験できます。.
なぜたった 1 つのアプリがこれほど注目を集めるのでしょうか?
なぜなら、Wist は、ユーザーに特別なカメラや高価なデスクトップ ソフトウェアを必要とせずに、日常の記憶を大規模にリアルタイムのホログラムに変換する初めての試みだからです。.
Wist と従来の 2D ビデオや iPhone 15 Pro の今日の空間ビデオ録画との違いは何でしょうか?
Wist は、2 台の立体カメラ画像を単に記録するだけでなく、LiDAR センサーを介して深度データも収集し、それを正確なデバイスのポーズと組み合わせて、再構築されたポイントまたはガウス スプラッティング モデルにすべてをパックし、視聴者が真の視差の動きを体験できるようにします。.
Wist の CEO である Andrew McHugh 氏は、「空間記憶」という用語をどのように定義していますか?
人が物理的に入り、自由に移動できる生活状況をデジタルで再構築することで、既存の写真やビデオ モードに空間座標と奥行きを補完します。.
このアイデアは新しいですか?
VR における空間記憶評価などの研究分野は長年存在していますが、これまで、ビデオをインタラクティブな 3D シーンに自動的に変換する、日常使用に適したコンシューマー向けアプリは存在しませんでした。.
どの Apple デバイスが Wist の録画をサポートしていますか?
AppleデバイスはWistビデオの録画において中心的な役割を果たしますが、この機能をサポートしているのは一部のiPhoneモデルのみです。具体的には、LiDARスキャナーを搭載したiPhone 13以降のすべてのProおよびPro Max世代です。iPhone 13 ProはWist録画のエントリーモデルであり、より高速なA16 CPUを搭載したiPhone 14 Proがそれに続きます。iPhone 15 Proはネイティブの空間ビデオ機能も提供しています。一方、iPhone 15のような標準モデルは必要なLiDARスキャナーを搭載していないため、Wistビデオを録画できません。そのため、この機能は必要なセンサー技術を備えた上位のProモデルに限定されています。.
Wist が LiDAR スキャナーに依存するのはなぜですか?
スキャナーはレーザーパルスを放射し、反射までの移動時間を測定して、ソリッド 3D 再現に不可欠なミリメートル単位の精度の深度マップを作成します。.
携帯電話の処理能力も影響するのでしょうか?
はい。アプリは再構築パイプラインの大部分をローカルで処理するため、A15 以降の A シリーズ SoC が必要になります。.
典型的なレコーディングプロセスはどのようなものですか?
アプリはビデオ モードで直接起動し、ユーザーは最大 40 秒間撮影し、その間に LiDAR とモーション センサーが同期してデータを収集します。.
録音後はどうなるのでしょうか?
iPhone はビデオ フレームをセグメント化し、深度とポーズからポイント クラウドを作成し、ガウス スプラッティングを使用して最適化し、後でパイプラインを更新できるように生データを保存します。.
生のデータはなぜ重要なのでしょうか?
将来のソフトウェア バージョンでは、ユーザーが再度撮影しなくても、より高度なアルゴリズムを使用して同じシーンを再構築できるようになります。.
記憶にどう入るのでしょうか?
iPhone の AR モード、または Quest 3 や Vision Pro 専用の複合現実アプリを使用して、3D シーンをホログラフィック球として室内に配置します。.
Wist は Quest 3 でどのくらいのフレーム レートを達成しますか?
400,000 個のガウス分布を持つデモ ビルドは、中心窩 VR スプラッティング ラスタライザーにより、安定した 72 fps を実現します。.
Apple Vision Proも同じデータを使用するのでしょうか?
はい。Wist はモデルを USD-Z アセットとしてエクスポートし、Vision Pro はそれを RealityKit レンダラーでレンダリングし、Apple が独自のフォービエイテッド シェーディングを追加します。.
ガウススプラッティングとは何ですか?
各 3D サンプルを色付きの異方性ガウス曲線としてエンコードする方法。レンダリング中に、数百万個の楕円体が GPU を使用して画面上にラスタライズされます。.
なぜ Wist は従来のメッシュではなくこの方法を選択したのでしょうか?
構造化されていない深度サンプルを効率的に処理し、フォトリアリスティックなソフトエッジの再構築を実現し、ヘッドトラッキング VR でよりスムーズにスケーリングできるためです。.
視点アーティファクトはありますか?
はい。撮影は1つのカメラ位置からのみ行われるため、後方の映像が欠落し、端が透明に見える場合があります。.
アプリはどのようにしてこれらの障害を最小限に抑えるのでしょうか?
穴を埋める ML ベースのインペインティング拡散モデルと、ニューラル ネットワークに基づく深度超解像を通じて。.
これは Apple のネイティブ空間ビデオと比べてどうでしょうか?
Apple はステレオ RGB を提供しますが、自由な視差はありません。一方、Wist は動きの自由度を提供しますが、遠距離の細部は犠牲になります。.
空間記憶に関する心理学的研究にはどのようなものがありますか?
VR 研究によると、混合現実のコンテキストは 2D 刺激よりもエピソード記憶をより強く引き起こすそうです。.
このような記憶空間には治療効果があるのでしょうか?
はい。外傷管理や高齢者介護のアプリケーションでは、VR ベースの記憶再生が調査されており、より高い想起精度と感情的共鳴が報告されています。.
シーンはどこに保存されますか?
デフォルトでは、データはローカルおよび暗号化された iCloud ストレージに保存され、クラウド処理はオプションのままです。.
第三者が私の部屋を改築することは許可されていますか?
ユーザーが権限を付与した場合のみ。Meta-Quest-Policy では、空間データの共有には別途同意が必要です。.
データ保護の支持者はどのようなリスクを認識しているのでしょうか?
高解像度のプライベート空間を悪用して、ターゲティング、ディープフェイク操作、ソーシャル エンジニアリング攻撃を行うこと。.
Wist にはビジネス モデルがありますか?
フリーミアム プラットフォーム: 基本アカウントは無料、より長いクリップ、クラウド レンダリング クレジット、マルチユーザー セッションにはプレミアム サブスクリプションが必要です。.
誰が投資しているのか？
シリコンバレーの XR ファンドからのエンジェル資金調達ラウンド。CEO の Andrew McHugh 氏は、以前は Samsung XR デザインに携わっており、業界のつながりを持っています。.
競争はありますか？
Apple 自体、Insta360 ハードウェア、そして空間ビデオにより高い解像度を提供する Spatialify などのサードパーティ製アプリ。.
これに関連して:
こうしたアプリはどのような文化的物語を伝えるのでしょうか?
「ブラックミラー」のようなドラマでは、記憶の再生は Segen あると同時に呪いでもあると描写されている。ハイズ氏はウィストを、VRの記憶が治癒効果を持つというエピソード「Eulogy」と比較している。.
ノスタルジアは依存症になる可能性があるのでしょうか？
研究者たちは、完璧に再現された過去が現実の現在の魅力を覆い隠してしまう現実逃避の危険性について警告している。.
何か前向きなビジョンはありますか？
メモリーホログラムは、史跡、家族の歴史、文化遺産を鮮明に保存し、教育をよりインタラクティブなものにすることができます。.
どのような照明条件が理想的ですか?
自然で均一な光。LiDAR が迷光を妨害するため、強い影は生じません。.
クリップの長さはどのくらいですか？
現在は 40 秒です。シーケンスが長くなると、データ量が飛躍的に増加し、リアルタイム ストリーミングが難しくなります。.
特に価値のあるモチーフは何ですか？
誕生日やペットの行動など、カメラの前方 1 ～ 4 メートルの範囲で奥行きをレイヤー化した空間的にダイナミックなシーン。.
SDKはありますか？
Wist は、外部の XR アプリを接続するために、再構築パイプラインへの API アクセスを計画しています。.
Wist シーンを Unity に統合するにはどうすればよいですか?
USD-Z エクスポートと、マルチレイヤー スプラットの VR に最適化されたソート アルゴリズムを含む Gaussian レンダラー パッケージを使用します。.
3DGS はモバイル チップセットでハードウェア アクセラレーションされますか?
Qualcomm の特許ロードマップには、ガウス順方向スプラット用の Tensor コアが示されており、スマートフォン SoC で 90 fps の混合現実再生が可能になります。.
将来の iPhone では録音機能がどのように改善されるのでしょうか?
10 メートルの範囲と可変のポイント密度を備えたデュアル LiDAR アレイに関する噂が広まっており、これによりリアルタイムで 360° スキャンが可能になります。.
AIはセキュリティホールを完全に塞ぐのでしょうか？
拡散モデルは、実際のマルチビュースキャンと比較して写真一貫性スコア 0.95 に近づき、影のアーティファクトとテクスチャのちらつきを大幅に削減します。.
ウィストは私たちと過去との関係を変えるのでしょうか?
はい。個人の歴史が単に見られるだけでなく、空間的に体験されると、記憶と現在の境界が変化し、共感の機会と感情の過負荷のリスクが生じます。.
ウィストは、消費者向け電子機器でさえ、プライベートな瞬間をホログラフィックポータルとして処理できるようになったことを実証しました。この技術は驚くほど効率的ですが、倫理的に難しい問題があります。この技術を使用する人は、記憶を保存し共有する機会と、データプライバシーや依存症への懸念とを比較検討する必要があります。.
これに関連して:
グローバルマーケティングとビジネス開発のパートナー
☑️ 当社のビジネス言語は英語またはドイツ語です。
☑️ 新機能: 母国語での対応!
Konrad Wolfenstein
私と私のチームは、あなたの個人アドバイザーとして喜んでお手伝いさせていただきます。.
こちらの問い合わせフォームにご記入いただくかwolfenstein@xpert.digital。、 +49 7348 4088 965までお電話ください。メールアドレスはです
私たちの共同プロジェクトを楽しみにしています。.
