賽道Hyper | 對標AVP:玩出夢想科技推出國產空間計算機

作者:周源/華爾街見聞

6月28日,蘋果Vision Pro(以下簡稱AVP)國行版上市,售價人民幣29999元。

就實際體驗來說,AVP稱不上完美。比如,初次登錄,因無手柄,故需以視線焦點實現相應的數字“點擊”動作,若對焦不準,則無法完成點擊;整個登錄過程操作步驟繁瑣,有一定門檻,不具備“傻瓜式”特點;垂墜感過強,佩戴舒適度不高,等等問題,諸如此類,不一而足。

如以上這些體驗弱項不甚要緊,那麼戴着AVP走路或乘坐交通工具,運動震感會影響這款設備的系統應用窗口顯示。因爲窗口會短暫消失(或出現視覺模糊,無法調取應用),應用也隨之有同樣變化。這種特點,不但影響用戶體驗,還會稀釋商業價值。

華爾街見聞獲悉,上海有家XR公司——玩出夢想科技,推出了與AVP類似的產品——玩出夢想MR。這款產品被定義爲全球首款安卓系統空間計算機,可支持空間觀影、MR遊戲、3D空間拍看和輕辦公等功能。

玩出夢想MR搭載8K Micro-OLED屏幕,實現雙目2700萬像素,3882PPI,中心區域PPD高達45,在光學指標上實現了對AVP的單點超越。

同時,這款設備搭載高通驍龍第二代驍龍XR2+芯片,採用精密攝像頭傳感器陣列:11個高性能攝像頭、7類傳感器和22個紅外補光燈,成功實現卓越的眼手手柄多模態交互,達成更高清低延的虛實融合體驗。

此外,玩出夢想MR避免了AVP的一些體驗弱項,比如除了支持手眼交互和語音交互,還保留了手柄交互這一用戶更熟悉的交互方式,3:2的平衡配重,佩戴時也會更舒適。

由於玩出夢想科技的各項技術均超越了行業一般技術水準,因此玩出夢想MR擁有了可比肩AVP的整體體驗。

玩出夢想MR具備哪些技術優勢?

任何智能終端的C端體驗,除了本身的技術能力,影響體驗和市場普及廣度的因素也包括場景可玩性和生態豐富性。玩出夢想科技作爲一家成立僅4年的XR新玩家,其空間計算機的場景和生態構建程度又如何?

核心技術優勢包括哪些?

玩出夢想科技,2020年成立,前身叫做“YVR”。這家公司的核心技術團隊成員,均有超過10年的XR行業深耕經驗。

成立4年以來,玩出夢想科技已發佈兩款VR產品。於今年6月25日在新加坡推出的全新空間計算產品,是這家公司的第三款智能終端設備。

之所以擁有如此之高的研發效率,據玩出夢想科技CMO朱然透露,這是因爲玩出夢想科技團隊擁有三個要素:專業、專心、專注。

玩出夢想科技首席技術工程師張騰博士進一步表示,玩出夢想MR主要是在玩出夢想科技構建的三重技術能力的基礎上誕生的。

首先,玩出夢想科技研發了“追蹤模塊”,包括頭部6DoF追蹤、手柄6DoF追蹤、手部26DoF追蹤和眼動追蹤。靠着這些技術,因此設備能通過人的動作感知人的意圖。爲了達成超高精度、超高魯棒性和超低延遲的追蹤效果,玩出夢想MR配備了11個攝像頭、7類傳感器和22個紅外補光燈。

其次,達成虛擬世界與現實世界的無縫融合,需要具備將現實世界實現數字化的能力。玩出夢想科技爲此研發了的“地圖模塊”,可以構建由點雲、網格和語義標籤組成的地圖,保存地圖數據並實現在設備之間共享。

第三,通過持續的技術研發投入,玩出夢想科技提升了玩出夢想MR的視覺體驗。

張騰表示,空間計算機視覺體驗的基礎是屏幕和光學。這兩種硬件對性能的高要求,促使玩出夢想科技採用了當前業界最前沿的解決手段:雙目8K Micro-OLED屏幕和自研超輕樹脂Pancake光學方案的配置。

其中,Pancake光學方案的作用,就是通過摺疊光路的設計大幅壓縮屏幕與透鏡的距離,以縮小光學模組總長度;相對傳統的菲涅爾方案,採用Pancake光學方案的光學模組,厚度大幅減少,同時克服了邊緣模糊、菲涅爾光環等問題,由此提高了佩戴頭顯設備的舒適度和視覺清晰度。

基於以上配置,玩出夢想MR達到了雙目2700萬超高像素、3882 PPI、92% DCI-P3、103°FOV,中心區域PPD更高達45,多項光學參數單點均實現了對AVP的超越或追平。

同時,玩出夢想科技也研發了1:1還原的超低延遲VST。張騰說,“通過我們的VST技術,我們希望能讓佩戴者看到人眼真實看到的物理世界,而非看到攝像頭播放的物理世界的數字化結果。”

這兩者有何差異?要回答這個問題,首先要清楚,VST技術,對空間計算機的作用是什麼?

這項技術在空間計算機中扮演着至關重要的角色。VST允許設備通過攝像頭捕捉現實世界的場景,並將這些場景與虛擬信息(數字世界)相結合,從而在用戶的視場中創造出一個融合了現實(物理)與虛擬(數字)的交互環境。

因此,VST技術的作用,就是增強用戶的沉浸感和交互體驗,同時爲虛擬與現實之間的無縫連接提供技術橋樑。

比如玩出夢想MR,通過機身的MR旋鈕,用戶能從0到100%調節虛擬環境與現實環境的交融度(也稱沉浸度),但用戶看到的“現實環境”,在屏幕前呈現的實際上是“數字化的物理空間”。

玩出夢想MR的雙目8K Micro-OLED顯示屏,其實是兩塊屏幕:通過光學攝像頭、傳感器和主控芯片的強悍算力,玩出夢想MR實現了14ms的超低延遲,將用戶眼前的真實世界,以1:1還原的形式,呈現在屏幕上,從而達到虛實融合的效果。

虛實無界:強性能+低延遲

要實現人眼通過空間計算機的屏幕,看到1:1真實還原的物理世界,就需要空間計算機的主芯片提供超強算力;此外,設備還需要有強悍的軟件性能,以便精確調配這些可貴的算力。

玩出夢想MR的主芯片是高通第二代驍龍XR2+芯片,也是全球首批搭載該芯片的空間計算機。

第二代驍龍XR2+芯片的性能提升(以驍龍XR2 Gen 1芯片的性能爲對比基準)主要體現在:GPU性能提升150%,GPU能耗比提升50%,AI性能提升至800% ,並支持多個攝像頭。

這些性能,搭載第二代驍龍XR2+芯片的終端在理論上都能具備,區別是不同的終端公司,對這些性能的應用,存在能力方面的差異,而應用能力,主要由軟件性能決定。

在此基礎上,玩出夢想科技的技術優勢,主要集中在軟件層面,核心優勢是算法,包括算法的精度與工程化。其中,算法的主要作用,是對第二代驍龍XR2+芯片算力的精確調度。

要做到精確調度,必須先有效節省算力。玩出夢想MR有精準有效的視線焦點(眼動)追蹤能力,其低延遲體驗,來自其對算力的有效分配。

張騰說,“首先,眼動追蹤中的注視點渲染能力的優化,這方面我們下了大功夫。其次,類似於ATW(Asynchronous Timewarp)、ASW(Asynchronous Spacewarp)這種能夠極大節約GPU算力的畫面補幀插幀技術,我們也實現了有效突破(比如補幀預測)。第三,我們用軟件技術最大限度地利用了驍龍芯片的異構算力。”

其中,ATW主要解決延遲和補幀問題。

延遲在這裡是什麼意思呢?就是人體發生肢體動作時,再到圖像顯示到屏幕上的時間,存在的時間差。

ATW的技術原理:用軟件輸出圖像後,緊接着渲染管線接上,在上屏時負責用人的新姿態數據做重投影計算,避免出現可感知的延遲,從而避免出現眩暈;同時,在應用掉幀時,ATW將前一幀的圖像做重新投影,這就是補幀。

有了ATW就夠了?其實不夠,只有迭加ASW,才能縱享MR的絲滑視覺體驗。ATW彌補場景相機的運動畫面,ASW則彌補場景物體運動帶來的變化。

除了這些技術之外,玩出夢想MR還具備僅14ms低延遲的VST ,讓用戶能夠體驗到與真實世界幾乎無法區分的數字世界。

用戶價值永遠最大

玩出夢想科技的這些軟件技術方案(能力),源自立足於長期主義的自研努力。

據張騰透露,在啓動研發玩出夢想MR時,也曾考慮過直接使用市面上的光學解決方案,但後來發現,當前供應商能提供的現成的4K光機方案,在邊緣清晰程度和邊緣畸變程度等技術維度上,都無法滿足玩出夢想科技對空間計算機的性能追求,而這會影響最終的用戶體驗。

自成立起,“爲用戶帶來美好體驗”就始終是玩出夢想科技的商業價值取向。玩出夢想科技CMO朱然說,“我們有持續深耕空間計算賽道的準備和決心,故而當我們發現市場現有方案達不到期許時,就下決心構建自己的技術優勢壁壘。”

這種技術護城河,對一個有長期主義站位意識的初創公司而言,具有相對於其它準備轉型的傳統手機大廠的核心競爭優勢。

朱然認爲,“未來,行業現有的這些智能手機公司,都會參與角逐這個賽道。玩出夢想科技創始人黃鋒在內部常說,要抓住歷史機遇和時間窗口,增厚我們的技術實力儲備,同時做好量產的產品體驗打磨和性能迭代。國內的傳統手機大廠,善於後發制人,就是等市場成熟了再大規模投入資源。但到那時,我們已有足夠的技術和競爭優勢,無懼衝擊。”

在技術優勢之外,玩出夢想MR的競爭優勢還體現在豐富的應用場景和內容生態上。

目前,玩出夢想MR支持空間觀影、MR遊戲、3D空間拍看等功能。空間觀影方面,玩出夢想科技已成爲IMAX和DTS在空間計算和混合現實領域的首個戰略合作伙伴,超千英寸巨幕再加上DTS定製音效,將玩出夢想MR的觀影沉浸感拉滿。

同時,低延遲彩色VST搭配音頻提示精確定位和6DoF無光環振動手柄,帶來遊戲視聽觸體驗的全面升級;雙3200萬像素超高清3D相機支持3D空間視頻拍攝,其顯示效果與交互體驗更是2D影像所不能匹敵的。

此外,玩出夢想MR也兼容主流辦公應用和多屏串流,因而這款設備也可以在輕辦公場景中使用。

在內容生態上,玩出夢想科技累計與全球多個國家與地區的近百個CP達成了深度合作。目前,商店在架應用數量已超過300個,並在持續拓展中。

朱然表示,玩出夢想科技當下發佈全球首款安卓系統空間計算機玩出夢想MR,在空間計算賽道做到產品佔先,再結合自身的產研優勢以及用戶積累,確保讓自己在空間計算行業大爆發之前,繼續留場,找到差異化競爭優勢就有可能在這個賽道上,實現彎道超車。