淘新聞

微軟正研究在VR中體驗面部脈搏呼吸頻率

自從微軟進軍VR界後,大動作層出不窮,各種黑科技截然而生,勢必要稱霸VR行業!改進VR和3D沉浸式通訊一直是微軟在這一技術領域進行長期投資的基石,並因此帶來了眾多的創新。

微軟表示,通過3D應用實現更加身臨其境的交流需要在3D幾何的捕獲和交換上實現巨大的飛躍,而這只有通過持續的信號處理才能實現。這項工作的核心是微軟與學術合作夥伴的合作研究(CORE)專案,包括日本國立情報學研究所副教授Gene Cheung博士。

使用諸如Kinect感測器的深度感測設備,研究人員開發了一種可更好地降低雜訊並恢復圖像中缺失細節的方法。至關重要的是,他們發現了一種在增強自然圖像和深度圖像之前利用圖形信號平滑度的方法。微軟研究亞洲院的高級研究員Dinei Florencio一直在與Cheung教授研究“rate-constrained 3D surface estimation”和“precision enhancement of multiple 3D depth maps”。

Florenicio說:“這兩條研究線是我們最近合作中最活躍的項目。當我們在沉浸式通訊中取得所需的進展時,我相信Gene的研究將會帶來一些核心的貢獻。”該項目的其他主要成員包括微軟研究院的Cha Zhang和Philip Chou,以及香港科技大學研究生Pengfei Wan。

Florencio和Chueng現正在研究主動光傳感是否可以準確檢測資訊性生物信號(例如面部的脈搏/呼吸頻率和溫度變化)。研究的一個關鍵問題是能否擴展主動光感測以揭示陰影或遠端人類受試者的相同細節。

微軟研究所高級研究員Tao Mei說:“該項目非常有趣,因為它試圖估計生物信號以實現更有效的面對面交流。主要研究者提出了使用完全非接觸和非侵入性的主動成像的方法——通過分析室內主動圖像傳感系統中構造的熱和深度圖像這一新穎的想法來解決這個問題。

在完成後,Cheung教授將公開該研究工具。期待著該項目的不斷進步和所取得的成就。我們希望更多的研究人員可以探索這一領域,拓展虛擬實境技術的前沿,並在未來實現《星球大戰》中萊婭公主的那種全息消息傳遞。

希望這項技術可以越來越研發透徹,這樣對於小夥伴們今後使用VR設備來說更是一番美好的體驗!