手和手指跟蹤被堅(jiān)定地計(jì)劃為 XR 未來(lái)的標(biāo)準(zhǔn)界面。一位開發(fā)人員現(xiàn)在正在 SteamVR 上展示手指追蹤如何與 Myo 手鐲配合使用。
XR 領(lǐng)域的幾乎每個(gè)主要制造商都處理手和手指跟蹤:Valve Index(測(cè)試)的控制器內(nèi)置了基本的手和手指跟蹤傳感器,HTC 為 Vive 眼鏡提供了手指跟蹤算法。索尼用于 psvr 2的新VR 控制器也應(yīng)該提供一種手指追蹤功能。
也有Ultraleap等特殊模組的廠商,有的與VR、AR眼鏡廠商合作做配件。微軟或Nreal等 AR 眼鏡制造商也提供手和手指跟蹤作為 XR 輸入方法。
許多手部跟蹤方法遵循與人工智能相結(jié)合的光學(xué)方法:相機(jī)拍攝手和手指,計(jì)算機(jī)視覺(jué)算法識(shí)別運(yùn)動(dòng)。尤其是 Facebook,近年來(lái)在 Oculus Quest 的光學(xué) AI 跟蹤方面取得了巨大進(jìn)步。
Reddit 上的一位開發(fā)人員現(xiàn)在展示了在 SteamVR 上進(jìn)行手指跟蹤的另一種可能方法:使用 EMG 設(shè)備,他測(cè)量手指肌肉移動(dòng)時(shí)在前臂上產(chǎn)生的電脈沖。你可以在下面的視頻中看到他的結(jié)果。
從理論上講,如果人工智能技術(shù)能夠更好地識(shí)別精細(xì)圖案并將其轉(zhuǎn)換為合適的數(shù)字手指運(yùn)動(dòng)或命令,那么這些電信號(hào)就可以在前臂沒(méi)有過(guò)度或可能完全沒(méi)有手指運(yùn)動(dòng)的情況下被識(shí)別。這使得 EMG 技術(shù)對(duì)殘疾人來(lái)說(shuō)很有趣。