近期，美國專利商標局公布了蘋果一項與AR手勢識別相關專利，專利中指出了一種通過生成手指3D模型來識別手勢和觸碰虛擬物體的方案。蘋果在專利中寫道，使用者可通過旋轉手指，并與AR頭顯攝像頭前的物理環境互動，以此來登陸賬號。
那么，整個手勢識別方案是如何實現的呢？首先，利用iPhone或iPad設備，識別并生成用戶的3D手部模型，并實時追蹤3D手勢的變化，與AR頭顯同步。AR頭顯根據iPhone或iPad追蹤的動態3D手勢模型來進行手勢追蹤，并對不同的手勢做出相對的反應。
為了避免手指與物理環境之間的遮擋影響追蹤效果，該系統同時會生成手部和所接觸物體的3D模型，通過對兩個模型的分析來提取和優化深度數據。此外，還將采用ICP算法、基于輪廓對齊的算法來實時更新3D手勢模型與實時手勢之間的變化，識別手指觸碰。
來源：青亭網
