根據 VR 虛擬實境資訊網站 UploadVR 報導,索尼互動娛樂(SIE)近期在一份
研究論文中透露了研發中的新型 VR 控制器技術成果,可藉由鄰近感測器來偵測使用者每根手指的細微動作,藉以達成精細的操作。
這篇論文是 4 月下旬在夏威夷舉辦的「CHI 2020」論壇中發表,標題為「Evaluation of Machine Learning Techniques for Hand Pose Estimation on Handheld Device with Proximity Sensor(在配備鄰近感測器之手持裝置上應用機器學習進行手勢判斷的評估)」,作者是 SIE 的研究員 Kazuyuki Arimatsu 與 Hideki Mori。
SIE 在論文中介紹了研發中的新型 VR 控制器原型,該控制器握把上配備有 62 個表面電容鄰近感測器,可偵測手掌指接近握把所造成的電容變化。再透過光學追蹤系統同步取得精確手指動作的訓練數據,藉由卷積神經網路方法進行機器學習,來獲得一套能單憑表面電容鄰近感測器數據就能精確判斷手指動作的系統。
※ 光學追蹤系統只是用來取得機器學習的訓練數據,該裝置實際運作時只使用鄰近感測器,不使用光學追蹤系統
SIE 在影片中示範了運用此一新型 VR 控制器原型來進行精確 VR 操作,像是用手指拿取與堆疊積木塊,作出各種手勢等。即便出現手部潮濕或是佩戴戒指之類的干擾,依然可以準確判斷。不過因為是透過偵測電容變化搭配機器學習模型來 “推估” 手勢動作,因此還是有部分手勢無法準確判斷,例如經典的瓦肯舉手禮。
雖然這些研究成果目前只是實驗室階段,尚未進入實際產品規劃。不過只要 SIE 仍持續在 VR 領域發展,未來很有可能會應用在下一代 PlayStation VR 的控制器上。有興趣的玩家不妨可以多多留意後續的消息。
附帶一提,雖然目前 Valve 推出的 Valve Index 控制器也有提供類似的手指動作偵測功能,但從示範影片的成果來看,SIE 研發中的這套新型 VR 控制器原型能提供比 Valve Index 控制器更細微精確的偵測效果。