蘋果頭顯新專利:使用頭部運(yùn)動(dòng)傳感器進(jìn)行眼動(dòng)追蹤
近日,美國專利商標(biāo)局發(fā)布了蘋果公司的一項(xiàng)專利申請(qǐng),涉及使用稱為“頭部運(yùn)動(dòng)傳感器”的頭部運(yùn)動(dòng)傳感器在虛擬和混合或增強(qiáng)現(xiàn)實(shí)(VR / AR)應(yīng)用中進(jìn)行眼動(dòng)追蹤的各種方法和設(shè)備。
VR / AR系統(tǒng)可以包括諸如頭顯、護(hù)目鏡或眼鏡等設(shè)備(在本文中稱為頭戴式設(shè)備HMD),該設(shè)備包括用于顯示用戶眼前左右圖像內(nèi)容的顯示器(例如,左右顯示器),以便向用戶提供三維(3D)虛擬視圖。
VR / AR系統(tǒng)可以包括眼動(dòng)追蹤系統(tǒng)(也可以被稱為注視點(diǎn)追蹤系統(tǒng))。
提供準(zhǔn)確眼動(dòng)追蹤的關(guān)鍵是知道用戶的眼睛相對(duì)于追蹤相機(jī)的位置。在眼動(dòng)追蹤系統(tǒng)的一些實(shí)施例中,為了準(zhǔn)確地確定用戶眼睛位置,控制器可以執(zhí)行算法,該算法使用由眼動(dòng)追蹤照相機(jī)捕獲的圖像執(zhí)行三維(3D)重建,以生成用戶眼睛的3D模型。
該3D模型能夠指示眼睛相對(duì)于追蹤相機(jī)的3D位置,這使控制器執(zhí)行的追動(dòng)追蹤算法可以準(zhǔn)確地跟蹤眼睛的運(yùn)動(dòng)。
專利描述了用于追蹤用戶頭部相對(duì)運(yùn)動(dòng)的方法和設(shè)備,其中傳感器(在本文中稱為頭部運(yùn)動(dòng)傳感器或頭部里程表)被放置在設(shè)備內(nèi)部或設(shè)備上的一個(gè)或多個(gè)位置處。靠近使用者耳朵的傳感器主要用以追蹤音高,位于鼻梁處或鼻梁附近的傳感器主要用以追蹤y軸運(yùn)動(dòng)。來自頭部運(yùn)動(dòng)傳感器的信號(hào)可用于檢測設(shè)備相對(duì)于用戶眼睛的運(yùn)動(dòng)。該系統(tǒng)允許僅在檢測到設(shè)備相對(duì)于用戶眼睛的運(yùn)動(dòng)時(shí)才執(zhí)行3D重建,從而大大減少了眼動(dòng)追蹤系統(tǒng)的功耗。
圖源:patentlyapple
蘋果的專利圖2示出了示例VR / AR HMD,該VR / AR HMD實(shí)現(xiàn)了眼動(dòng)追蹤系統(tǒng),該系統(tǒng)包括用于檢測HMD相對(duì)于用戶眼睛運(yùn)動(dòng)的傳感器;圖3是眼動(dòng)追蹤方法的流程圖,其中傳感器用于檢測HMD相對(duì)于用戶眼睛的運(yùn)動(dòng),并且僅當(dāng)檢測到HMD的運(yùn)動(dòng)時(shí)才執(zhí)行3D重建。
圖源:patentlyapple
蘋果的專利圖12示出了示例性VR / AR系統(tǒng)的框圖,該示例性VR / AR系統(tǒng)包括如圖1和圖2所示的眼動(dòng)追蹤系統(tǒng)的組件。圖11是眼動(dòng)追蹤方法的流程圖,其中使用頭部運(yùn)動(dòng)傳感器檢測HMD相對(duì)于用戶眼睛的運(yùn)動(dòng),并且使用眼睛運(yùn)動(dòng)傳感器處理由眼動(dòng)追蹤相機(jī)捕獲的幀。
更多關(guān)于該專利的詳細(xì)信息可查看蘋果這項(xiàng)專利申請(qǐng)?zhí)枮?0210081039的專利。考慮到這是一項(xiàng)專利申請(qǐng),目前尚不知道搭載此類功能設(shè)備上市的時(shí)機(jī)。