VR 社交、眼球追蹤、多人無線套件,哪個會成為 HTC Vive的殺手鐧?
4 月 28 日,HTC 與此前由其發起的虛擬實境風投聯盟(VRVCA)在三藩市舉辦第四次聯盟成員投資大會。現場共有來自 5 個地區的 10 個 VR/AR 初創公司,向 30 多家投資機構進行產品演示。
其中,ObEN 公司為 Vive 打造了一款整合了微信的 VR 社交應用;七鑫易維將此前的眼球追蹤模組 aGlass 以可插入式升級套件的形式應用於 HTC Vivie 中;傳送科技則推出了 BE 商用版的 Vive 無線套件,可最多支援六名使用者在同一物理空間內互動。
打通微信的 VR 社交
F8 大會上紮克伯格演示的 Facebook Spaces 讓我們看到了 VR 社交的新玩法,以及各種可能性。其中有一個功能是 VR 用戶可以通過 Massenger 與其他沒有 VR 頭盔的用戶在虛擬世界中通話。
而 ObEN 推出的這款社交應用最大的亮點是接入了微信,而且使用的是微信小程式。HTC Vive 中國區總裁汪叢青透露,“ObEN 其實跟騰訊有超過一年的合作,有資源拿到特殊的 API,讓(VR 應用和微信)結合更容易實現。”
在此前 HTC Vive 生態圈大會上 ObEN 曾介紹過其中的一些玩法。首先,VR 用戶通過 Viveport 進入 ObEN 的應用後,掃描微信二維碼,將 VR 應用與自己的微信帳號關聯,不需要再申請新的帳號。這時,VR 用戶就可以在虛擬世界中無障礙地流覽並且語音回復微信消息。
同時,VR 用戶可邀請自己的微信好友一起在 VR 裡欣賞異地風景。實現過程是,微信好友將自己的自拍發送給 VR 用戶後,自拍照可即時自動生成好友的 3D 虛擬形象,VR 用戶便能夠與好友的虛擬形象同時出現在 VR 裡。之後,VR 用戶可將把兩人的 VR 自拍合照發送給微信好友。此外,除了將好友的自拍照自動生成虛擬形象外,還可以將好友的聲音傳到 VR 中,與虛擬形象合成。
與 Facebook Spaces 相比,ObEN 設計的社交應用中 VR 用戶虛擬人物的生成略有不同,汪叢青較為詳細地描述了這個過程,
“在微信的小程式裡發一張自拍照,然後給出一個用戶號,並創建個人的 Avatar。你可以給 Avatar 換衣服、頭髮,但臉基本上跟你的臉是一樣的,是三維的,就是把你上傳的二維圖片變成三維模型。”
Spaces 則是根據使用者 Facebook 社交帳號上以往的照片生成相近的形象,然後再在比較細節的地方進行定制選擇,如眼睛的顏色、髮型等等。
更重要的是,汪叢青表示,
“ObEN 不止自己做一款 APP, 會向其他開發者開放 API,讓任何 Vive 裡面的 VR 應用都可以與微信結合,這樣一來不管你在使用什麼 VR 應用,都可以直接通過 Vive 分享給微信好友。”
而 VR 用戶與微信好友的交流主要通過語音實現,“在 VR 裡,我們覺得鍵盤不是特別合適,會將語音轉化為漢字,再發給微信好友。”
眼球追蹤套件
去年 11 月,七鑫易維曾推出一款 VR 眼球追蹤模組 aGlass,當時便宣佈得到 HTC Vive 官方認證,可放置於頭盔中。雷鋒網曾報導,aGlass是一個疊加到頭盔透鏡上面的產品。一對設備上各自有一個感測器(攝像頭),設計在下方;環繞著透鏡的則是一圈紅外補光燈,因為VR頭盔是全封閉的;另外它還有一個USB Type-C介面用作供電和資料傳輸。 現在七鑫易維將 aGlass 升級為 Vive 套件,經過半年的時間,他們也做了不少改進。
七鑫易維的副總裁徐筱告訴雷鋒網,
以前是單眼追蹤,現在是雙眼追蹤,實際上,單眼追蹤是夠用的,一般我們正常人雙眼做的是一個動作,但是如果有一些景深類的場景會涉及到雙眼的問題。
而且他們在演算法上也用到了深度學習,
以前使用數學建模的方法來做,現在我們使用了深度學習,深度學習的好處就是適配度高,通過大資料學習的方式,建立眼球的案例特別多。而且校準的時間會特別短,甚至到後面可以達到不校準。(眼球追蹤套件)使用的時候會有一個九點的校準過程,我們現在可以做到三點或一點,時間很短就搞定了。
有了這個眼球追蹤套件後,就可以實現以下幾個功能:
注視點渲染,只對眼睛注視區域進行高清渲染,周邊區域逐步降低渲染分辯率,而且這個區域會隨著注視點的變化而變化,從而提高渲染效率;
眼控交互和遊戲,主要可用於 VR 內容操作,如通過眼睛注視來選定某個物體,或是在射擊遊戲中,鎖定射擊目標;
眼動大資料,這是對使用者觀看畫面的注視點數據進行採集和分析,可統計使用者注視軌跡資料、注視區域資料、注視時長資料等特徵資料,有些類似於統計使用者注視情況的熱力圖。
汪叢青表示,儘管其他公司也在做眼球追蹤的相關事情,但七鑫易維是真正可以開售的產品。至於說眼球追蹤能不能取代 Vive 手柄,他表示,
“有可能會,起碼會讓螢幕上看到的東西容易控制,但需要應用知道有這個功能,這就要他們的 API,如果只是為了渲染就不需要任何軟體的開發,但用眼球追蹤取代手柄,可能還需要軟體上做些微調。”
下個月,這款套件 aGlass DK II 即將開啟限量預售,價格人民幣1,500元(約219美元)雙眼,每套贈送近視鏡片200°、400°、600°各一副並支持訂制各種度數鏡片。
可多人使用的 TPCast BE 無線套件
不久前,Vive TPCast 無線套件消費者版(CE)開始陸續發貨,雷鋒網也做了詳細的體驗報導,但是消費者版只能支持一名 VR 用戶在 4.5x4.5 的範圍內移動。現在,傳送科技推出了可支援多人使用的無線套件商用版(BE),同時可體驗的空間範圍也達到了 6x6 平米。
這一版本主要面向的用戶也開始偏向于行業應用、主題樂園、影城等 B 端用戶。
商用版的詳細參數如下:
無線設備
在CE版本主要性能指標不變的基礎上,BE無線設備多台設備同空間:
支援區域不小於規則的 36 平米(光塔有效範圍);
支援同一區域內4人相互不受干擾,遊戲者可交叉運動,完全不受干擾;
6人通過安裝佈局,可應對部分運動交叉少的場景使用;
2人套、4人套和6人套採用同一個大型路由器,通過網線與多台計算及組成局域網連接,彼此間相互連接互補干擾;
與 CE 版區分,獨立包裝設計,以 4 人套為例,包裝內含 4 套無線套件(RX、TX、AD、連接線、移動電源),一個路由器;
配套的 20000mAh 鋰電支持 5 小時持續運行;
獨立設計一款座式充電器,2A 充電口,可一次性充電4個移動電源。
PC 用戶端
BE 版本的用戶端提供 user 端和 admin 端兩種用戶端,user 端需安裝在每台連接 vive 的 PC 上,與每套無線套件 user 一一對應。Admin 端可選擇安裝安裝在任意一台 PC 上或局域網內的其他 PC 上,通過局域網與其他的 user 端連接,admin 端查看所有無線設備的運轉情況,統一控制所有無線設備的連接
User端功能:
安裝時選擇所對應的user套件序號或顏色,形成一一對應,並在檢測時,只檢測自己所對應的adaptor。
提供路由器檢測、adaptor檢測、驅動載入等工作,可實現套件內單機也可以連接使用。
向admin端提供資料通道,接收來自admin端的指令和回饋user端的狀態。
向所連接的user套件提供user端的升級功能,包括用戶端和adptor固件的升級提示及升級包下載和安裝。
Admin端功能:
Admin端可安裝在套件所連接的任何一台電腦或局域網內的其他pc上,通過局域網與user端關聯。
擁有統一的管理頁面,查看區域內每一個USER的無線終端的連接情況。
設備連接異常提醒,僅限wifi傳輸部分,部分操作指令的發送。
獲取來自user端的升級提醒,但不操作升級行為,升級行為需在單獨的user上操作一鍵接通所有設備,一鍵斷開所有設備。
此外,傳送科技還提供搭建方案,以及付費的專業指導。
從這次發佈的產品來看,還是有不少驚喜的。像眼球追蹤技術現在終於有了較為成熟的產品,而當 VR 社交遇到微信,可能很快,VR 合照就要在朋友圈刷屏了。