Qualcomm Snapdragon XR-серия Платформа расширенной реальности

2019: Qualcomm Snapdragon XR2

5 декабря 2019 года компания Qualcomm представила Qualcomm Snapdragon XR2 — платформу расширенной реальности (extended reality, XR) с поддержкой 5G. Qualcomm Technologies объединила в ней свои инновации в области 5G-связи и искусственного интеллекта (ИИ) со своей XR-технологией. Эта платформа представляет специализированные функции, которые охватывают дополненную реальность (augmented reality, AR), виртуальную реальность (virtual reality, VR) и смешанную реальность (mixed reality, MR).

По информации компании, платформа Snapdragon XR2 существенно доработана в сравнении с платформой XR1. Вдвое выросла производительность CPU и GPU, вчетверо расширилась полоса пропускания видео, в 6 раз увеличилось разрешение и в 11 — производительность ИИ. Snapdragon XR2 — XR-платформа, поддерживающая семь камер одновременно плюс специализированный процессор компьютерного зрения. Кроме того, это первая XR-платформа, обеспечивающая истинно смешанную реальность благодаря камере с низкой задержкой в режиме прозрачности. Это позволяет пользователю с VR-гарнитурой создавать гибрид виртуального и реального миров, видеть его и взаимодействовать с ним. Чтобы удовлетворять требованиям действительно иммерсивной смешанной реальности, на платформе реализованы специализированные визуальные, интерактивные и аудио-технологии, использующие искусственный интеллект и возможности 5G-связи.

Чтобы повысить реалистичность XR, необходимо стереть видимые границы между реальным и виртуальным мирами. Для этого требуется самый современный дисплей и высокое качество графики. Графический процессор на платформе Snapdragon XR2 прекрасно отрисовывает графику, поддерживая в полтора раза большую скорость обработки пикселей и в три раза — текселей. Такие специфические XR-функции, как фовеальный рендеринг с отслеживанием движений глаз и улучшенная технология шейдинга с переменной скоростью для более плавного обновления кадров ускоряют рендеринг тяжелых рабочих нагрузок, сохраняя при этом низкое энергопотребление. Дисплейная панель Snapdragon XR2 имеет разрешение 3х3K для каждого глаза при частоте 90 кадров в секунду. Фотореалистичность визуальных эффектов при стриминге и локальном воспроизведении, обеспечивает впервые реализованная на XR-платформе поддержка видео в формате 8K 360o при частоте 60 кадров в секунду. Чтобы уменьшить общесистемные задержки и поддерживать эффект AR-погружения, применен специализированный чип для AR-дисплеев.

В смешанной реальности пользователь может виртуально телепортироваться в другую среду. Чтобы в ней полноценно ориентироваться и уверенно действовать, Snapdragon XR2 предлагает одновременно семь камер плюс специализированный процессор компьютерного зрения. Действуя одновременно, камеры точно отслеживают движения головы, губ и глаз, а также рук — по 26 точкам. Процессор компьютерного зрения отвечает за эффективное понимание и трехмерную реконструкцию сцены. Весь этот функционал позволяет пользователю перемещаться в обстановку, где он будет интуитивно взаимодействовать с цифровым миром.

В дополненной или виртуальной реальности звук играет основную роль в каждом иммерсивном событии. Платформа Snapdragon XR2 предлагает звуковые слои следующего уровня в ярком 3-мерном звуковом пространстве и, углубляя погружение, обеспечивает чистое звучание голоса. Специализированный постоянно действующий энергоэффективный процессор Qualcomm Hexagon поддерживает такие аппаратно ускоряемые функции, как голосовая активация и определение контекста, позволяя слышать реальный мир, находясь в виртуальном.

С помощью ИИ были усовершенствованы многие функции Snapdragon XR2, включая аудио- и визуальные эффекты, и интерактивность, которые помогают погружать пользователей в более яркую реальность. Snapdragon XR2 — XR-платформа с поддержкой 5G-связи, возможности которой открывают шлюзы потоку инновационных XR-приложений, требующих низкой задержки и сверхвысоких скоростей передачи данных. Например, 5G-технологии, используя раздельную обработку данных на устройстве и в пограничном облаке, позволяют реализовать практически безграничную XR-среду с фотореалистичным представлением без привязки к тому или иному помещению.