Приложение виртуальной реальности для смартфонов «Wist»: превратите свои видео в интерактивные 3D-воспоминания – Креативное изображение: Xpert.Digital
iPhone Pro делает это возможным: приложение превращает обычные видеоролики в захватывающие 3D-эффекты
Пространственные воспоминания: приложение Wist-App позволяет вам совершить виртуальную прогулку по прошлым моментам
Представьте, что вы можете не просто посмотреть старое видео с дня рождения вашего ребенка или вашего последнего отпуска, а буквально войти в эту сцену и перемещаться внутри нее. Именно такое захватывающее обещание дает приложение Wist, которое меняет способ, которым мы запечатлеваем и переживаем наше прошлое. Оно превращает обычные видео со смартфонов в трехмерные «пространственные воспоминания», по которым можно ходить.
Это стало возможным благодаря технологии, уже встречающейся во многих карманах: LiDAR-сканеру современных моделей iPhone Pro. В сочетании с передовыми алгоритмами, такими как гауссовское развертывание, Wist создает не просто видео, а полную 3D-реконструкцию момента. Затем ее можно иммерсивно исследовать с помощью гарнитур смешанной реальности, таких как Meta Quest 3 или Apple Vision Pro, как будто вы попадаете в персональную голограмму.
Но Wist — это не просто технологическая уловка, а нечто гораздо большее, чем собственный пространственный видеоформат Apple. В то время как последний обеспечивает стереоскопическое изображение, Wist предоставляет истинную свободу движений при записи. Этот технологический прорыв открывает двери для глубоких вопросов: что значит для нашей памяти, когда мы можем не только наблюдать за прошлым, но и переживать его? Какие терапевтические возможности возникают, и где таятся опасности ностальгической зависимости и цифрового насилия, как это показано в антиутопических видениях, таких как «Черное зеркало»?
В этой статье подробно рассматривается мир пространственной памяти и даются ответы на самые важные вопросы о технологии Wist – от технических основ и эмоционального воздействия до этических и экономических аспектов. Она проливает свет на технологию, которая потенциально может коренным образом изменить наше отношение к прошлому.
В связи с этим:
Что означает слово "Wist" в предложении?
Wist — это приложение для смартфонов, которое преобразует обычные видеозаписи в интерактивные 3D-сцены, позволяя пользователям пережить свои воспоминания в масштабе, занимающем всю комнату, с помощью гарнитур дополненной и смешанной реальности, таких как Meta Quest 3 или Apple Vision Pro.
Почему одно-единственное приложение привлекает столько внимания?
Потому что Wist — это первая попытка преобразовать повседневные воспоминания в голограммы в реальном времени в массовом масштабе, не требуя от пользователей специальных камер или дорогостоящего программного обеспечения для настольных компьютеров.
Чем Wist отличается от классических 2D-видео или современных пространственных видеозаписей на iPhone 15 Pro?
Вместо того чтобы просто записывать два стереоскопических изображения с камеры, Wist также собирает данные о глубине с помощью датчика LiDAR, объединяет их с точным положением устройства и упаковывает все это в реконструированную точечную модель или модель гауссова распределения, которая позволяет зрителю ощутить истинное параллаксное движение.
Как генеральный директор компании Wist Эндрю МакХью определяет термин «пространственная память»?
Это цифровая реконструкция жизненной ситуации, в которую можно физически войти и свободно перемещаться, дополняющая традиционные методы фото- или видеосъемки пространственными координатами и глубиной.
Эта идея нова?
Направления исследований, такие как оценка пространственной памяти в виртуальной реальности, существуют уже много лет, но до сих пор не существовало потребительского приложения, подходящего для повседневного использования, которое автоматически преобразовывало бы видео в интерактивные 3D-сцены.
Какие устройства Apple поддерживают запись для Wist?
Устройства Apple играют центральную роль в записи видео Wist, хотя эта функция поддерживается только некоторыми моделями iPhone. В частности, это все модели Pro и Pro Max, начиная с iPhone 13, которые оснащены сканером LiDAR. iPhone 13 Pro — это модель начального уровня для записи Wist, за ней следует iPhone 14 Pro с более быстрым процессором A16. iPhone 15 Pro также предлагает встроенные возможности пространственного видео. В отличие от них, стандартные модели, такие как iPhone 15, не могут записывать видео Wist, поскольку у них отсутствует необходимый сканер LiDAR. Таким образом, технология доступна только в более дорогих моделях Pro, которые обладают необходимой сенсорной технологией.
Почему Wist использует лидарный сканер?
Сканер излучает лазерные импульсы, измеряет время их распространения до отражения и, таким образом, предоставляет карты глубины с миллиметровой точностью, которые необходимы для качественной 3D-реконструкции.
Играет ли роль и вычислительная мощность телефона?
Да, потому что приложение обрабатывает значительную часть процесса восстановления локально, а это значит, что требуются SoC серии A, начиная с A15.
Как обычно выглядит процесс записи?
Приложение запускается сразу в режиме видеосъемки; пользователь снимает видео максимум 40 секунд, в то время как датчики LiDAR и движения синхронно собирают данные.
Что происходит после записи?
iPhone сегментирует видеокадры, создает облако точек на основе глубины и положения, оптимизирует обработку с помощью гауссова распределения и сохраняет необработанные данные для последующего обновления конвейера обработки.
Почему важны необработанные данные?
В будущих версиях программного обеспечения появится возможность восстанавливать ту же сцену с помощью более совершенных алгоритмов, без необходимости повторной съемки для пользователя.
Как происходит погружение в память?
С помощью режима дополненной реальности на iPhone или через специальное приложение смешанной реальности для Quest 3 или Vision Pro, которое отображает 3D-сцену в виде голографической сферы в помещении.
Какую частоту кадров демонстрирует Wist на Quest 3?
Демонстрационные сборки с 400 000 гауссовых распределений обеспечивают стабильные 72 кадра в секунду благодаря растеризатору фовеального VR-сплэттинга.
Использует ли Apple Vision Pro те же данные?
Да; Wist экспортирует модель как ресурс в формате USD-Z, который Vision Pro рендерит в своем рендерере RealityKit, а Apple добавляет собственное фовеальное затенение.
Что такое гауссово сплэттинг?
Метод, который кодирует каждый 3D-сэмпл в виде анизотропной гауссовой кривой с цветом; во время рендеринга миллионы таких эллипсоидов растрируются на экране с помощью графического процессора.
Почему Wist выбирает именно этот метод, а не классические сетки?
Благодаря возможности эффективной обработки неструктурированных выборок глубины, созданию фотореалистичных реконструкций с мягкими краями и более плавному масштабированию в виртуальной реальности с отслеживанием положения головы.
Есть ли какие-либо артефакты, связанные с ракурсом?
Да. Поскольку съемка ведется только с одной точки обзора, изображения с заднего плана отсутствуют; края могут выглядеть прозрачными.
Как приложение сводит к минимуму эти препятствия?
С помощью моделей диффузионного восстановления на основе машинного обучения, которые заполняют пробелы, а также сверхразрешения глубины на основе нейронных сетей.
Как это соотносится с собственными функциями пространственного видео от Apple?
Apple обеспечивает стереофонический RGB-сигнал, но не предоставляет возможности свободного параллакса; Wist предлагает свободу движений, но жертвует детализацией при просмотре под дальними углами.
Какие существуют психологические исследования пространственной памяти?
Исследования в области виртуальной реальности показывают, что контексты смешанной реальности активируют эпизодическую память интенсивнее, чем двухмерные стимулы.
Могут ли подобные пространства памяти оказывать терапевтический эффект?
Да; в сфере оказания помощи при травмах и ухода за пожилыми людьми исследуется возможность воспроизведения воспоминаний с помощью виртуальной реальности, при этом отмечается более высокая точность воспроизведения и эмоциональный резонанс.
Где хранятся эти кадры?
По умолчанию данные хранятся локально в зашифрованном хранилище iCloud; обработка данных в облаке остается необязательной.
Разрешено ли третьим лицам проводить реконструкцию моих номеров?
Только если пользователь предоставит необходимые разрешения; Meta-Quest-Policy требует отдельного согласия для обмена пространственными данными.
Какие риски видят защитники данных?
Злоупотребление частным пространством с высоким разрешением для таргетинга, манипулирования дипфейками или атак с использованием методов социальной инженерии.
Есть ли у Wist бизнес-модель?
Платформа Freemium: базовый аккаунт бесплатный, премиум-подписка для более длинных видеороликов, кредиты на облачный рендеринг и многопользовательские сессии.
Кто инвестирует?
Привлечены инвестиции от фондов XR из Кремниевой долины; генеральный директор Эндрю МакХью, ранее работавший в Samsung XR design, привнесет свои связи в отрасли.
Есть ли конкуренция?
Компания Apple, оборудование Insta360 и сторонние приложения, такие как Spatialify, предлагают более высокое разрешение для пространственного видео.
В связи с этим:
Каким культурным нарративам служат подобные приложения?
В таких сериалах, как «Черное зеркало», воспроизведение воспоминаний изображается одновременно и как Segen , и как проклятие; Хайзе сравнивает Уиста с эпизодом «Поминальная речь», в котором воспоминания в виртуальной реальности оказывают целительный эффект.
Может ли ностальгия перерасти в зависимость?
Исследователи предупреждают об опасности эскапизма, когда идеально воссозданное прошлое затмевает привлекательность реального настоящего.
Есть ли какие-нибудь позитивные перспективы?
Голограммы, создающие эффект памяти, могли бы наглядно сохранять исторические места, семейные истории или культурное наследие и делать образование более интерактивным.
Какие условия освещения являются идеальными?
Естественное, равномерное освещение; отсутствие резких теней, поскольку LiDAR создает помехи для рассеянного света.
Какой может быть продолжительность видеоролика?
В настоящее время длительность последовательности составляет 40 секунд; более длинные последовательности экспоненциально увеличивают объем данных и затрудняют потоковую передачу в реальном времени.
Какие мотивы заслуживают особого внимания?
Пространственно динамичные сцены с наложением глубины в диапазоне от 1 до 4 метров перед камерой, например, дни рождения или съемки с участием домашних животных.
Существует ли SDK?
Компания Wist планирует предоставить доступ к API-интерфейсу конвейера реконструкции для подключения внешних XR-приложений.
Как интегрировать сцены Wist в Unity?
Используется экспорт в формате USD-Z и пакет рендеринга Gaussian, включающий оптимизированные для VR алгоритмы сортировки для многослойных изображений.
Используется ли аппаратное ускорение 3DGS в мобильных чипсетах?
В патентных планах Qualcomm указано, что будут созданы тензорные ядра для гауссовой аппроксимации, что позволит воспроизводить смешанную реальность со скоростью 90 кадров в секунду на SoC для смартфонов.
Как будущие модели iPhone смогут улучшить качество записи?
Ходят слухи о двух массивах лидаров с дальностью действия 10 м и переменной плотностью точек, что позволит осуществлять сканирование на 360° в реальном времени.
Сможет ли ИИ полностью устранить уязвимости в системе безопасности?
Модели диффузии приближаются к показателям согласованности фотографий 0,95 по сравнению с реальными многоракурсными сканами, что значительно уменьшает артефакты теней и мерцание текстуры.
Меняет ли Wist наше отношение к прошлому?
Да. Как только личная история не только становится видимой, но и воспринимается в пространстве, граница между памятью и настоящим смещается — открывая возможности для эмпатии и создавая риски эмоциональной перегрузки.
Вист демонстрирует, что даже бытовая электроника теперь способна обрабатывать личные моменты в виде голографических порталов. Технология поразительно эффективна, но вызывает этические вопросы. Тем, кто её использует, следует взвесить возможности сохранения и обмена воспоминаниями с учётом проблем конфиденциальности данных и зависимости от них.
В связи с этим:
- Заменят ли промышленные «умные» очки наши смартфоны в ближайшее время? На горизонте маячат перемены – в том числе и в промышленности – появятся ли в скором времени очки с искусственным интеллектом?
- Экспертиза агентства в области расширенной реальности: выявление отраслей и компаний, которые могут получить наибольшую выгоду от маркетинга с использованием дополненной реальности
Ваш глобальный партнер по маркетингу и развитию бизнеса
☑️ Язык ведения нашего бизнеса — английский или немецкий
☑️ НОВИНКА: Переписка на вашем родном языке!
Konrad Wolfenstein
Я и моя команда будем рады быть вашими личными консультантами.
Вы можете связаться со мной, заполнив контактную форму здесь wolfenstein@xpert.digital:или просто позвонив по номеру +49 7348 4088 965. Мой адрес электронной почты
Я с нетерпением жду начала нашего совместного проекта.
