近期,美國(guó)專利商標(biāo)局公布了蘋果一項(xiàng)與AR手勢(shì)識(shí)別相關(guān)專利,專利中指出了一種通過(guò)生成手指3D模型來(lái)識(shí)別手勢(shì)和觸碰虛擬物體的方案。蘋果在專利中寫道,使用者可通過(guò)旋轉(zhuǎn)手指,并與AR頭顯攝像頭前的物理環(huán)境互動(dòng),以此來(lái)登陸賬號(hào)。
那么,整個(gè)手勢(shì)識(shí)別方案是如何實(shí)現(xiàn)的呢?首先,利用iPhone或iPad設(shè)備,識(shí)別并生成用戶的3D手部模型,并實(shí)時(shí)追蹤3D手勢(shì)的變化,與AR頭顯同步。AR頭顯根據(jù)iPhone或iPad追蹤的動(dòng)態(tài)3D手勢(shì)模型來(lái)進(jìn)行手勢(shì)追蹤,并對(duì)不同的手勢(shì)做出相對(duì)的反應(yīng)。
為了避免手指與物理環(huán)境之間的遮擋影響追蹤效果,該系統(tǒng)同時(shí)會(huì)生成手部和所接觸物體的3D模型,通過(guò)對(duì)兩個(gè)模型的分析來(lái)提取和優(yōu)化深度數(shù)據(jù)。此外,還將采用ICP算法、基于輪廓對(duì)齊的算法來(lái)實(shí)時(shí)更新3D手勢(shì)模型與實(shí)時(shí)手勢(shì)之間的變化,識(shí)別手指觸碰。
來(lái)源:青亭網(wǎng)