【技術(shù)實(shí)現(xiàn)步驟摘要】
本公開涉及增強(qiáng)現(xiàn)實(shí)顯示，尤其涉及一種集成顯示與眼動(dòng)追蹤的增強(qiáng)現(xiàn)實(shí)系統(tǒng)及電子設(shè)備。
技術(shù)介紹
1、增強(qiáng)現(xiàn)實(shí)技術(shù)運(yùn)用了多種技術(shù)手段，將計(jì)算機(jī)生成的文字、圖像、三維模型、音樂、視頻等虛擬信息模擬仿真后，應(yīng)用到真實(shí)世界中，通過虛擬信息和真實(shí)世界中的信息互為補(bǔ)充，從而實(shí)現(xiàn)對(duì)真實(shí)世界的“增強(qiáng)”。
2、隨著增強(qiáng)現(xiàn)實(shí)技術(shù)的快速發(fā)展，增強(qiáng)現(xiàn)實(shí)應(yīng)用產(chǎn)品在醫(yī)療、工業(yè)、教育和娛樂等多個(gè)領(lǐng)域展現(xiàn)了廣泛的應(yīng)用潛力。增強(qiáng)現(xiàn)實(shí)應(yīng)用產(chǎn)品能夠?qū)⑻摂M信息與現(xiàn)實(shí)世界有效融合，為用戶帶來沉浸式體驗(yàn)，提高信息使用效率和便捷性。
3、目前，增強(qiáng)現(xiàn)實(shí)應(yīng)用產(chǎn)品在使用中，存在人機(jī)交互不夠準(zhǔn)確、交互不流暢的問題。降低了用戶的體驗(yàn)。
技術(shù)實(shí)現(xiàn)思路
1、有鑒于此，本公開提出了一種顯示方案。
2、根據(jù)本公開的一方面，提供了一種顯示系統(tǒng)，包括：顯示器、光波導(dǎo)、注視點(diǎn)確定單元；所述顯示器，用于發(fā)出第一光信號(hào)，所述第一光信號(hào)包含當(dāng)前虛擬圖像的圖像信息；所述光波導(dǎo)，用于傳輸所述第一光信號(hào)，并將所述第一光信號(hào)傳出所述光波導(dǎo)；所述光波導(dǎo)，還用于傳輸眼部反射的第二光信號(hào)，并將所述第二光信號(hào)傳出所述光波導(dǎo)，形成第三光信號(hào)，所述第三光信號(hào)為失真光信號(hào)；所述注視點(diǎn)確定單元設(shè)置在所述光波導(dǎo)傳出所述第二光信號(hào)的一側(cè)；所述注視點(diǎn)確定單元，用于基于所述第三光信號(hào)，確定所述眼部的注視點(diǎn)坐標(biāo)。
3、在一種可能的實(shí)現(xiàn)方式中，所述注視點(diǎn)確定單元，包括：校正單元，第一成像單元，第一識(shí)別單元，
4、所述校正單元，用于校正
5、所述第一成像單元，用于基于所述第四光信號(hào)，生成眼部圖像；
6、所述第一識(shí)別單元，用于基于所述眼部圖像，識(shí)別所述注視點(diǎn)坐標(biāo)。
7、在一種可能的實(shí)現(xiàn)方式中，所述注視點(diǎn)確定單元，包括：第二成像單元，第二識(shí)別單元
8、所述第二成像單元，用于基于所述第三光信號(hào)，生成失真眼部圖像；
9、所述第二識(shí)別單元，用于使用識(shí)別模型，對(duì)所述失真眼部圖像進(jìn)行注視點(diǎn)識(shí)別，確定所述注視點(diǎn)坐標(biāo)，所述識(shí)別模型是基于失真眼圖樣本以及失真眼圖樣本表現(xiàn)的眼部的真實(shí)注視點(diǎn)坐標(biāo)訓(xùn)練而得到的。
10、在一種可能的實(shí)現(xiàn)方式中，所述校正單元，包括：模型獲取單元，用于獲取成像特性模型，所述成像特性模型用于模擬所述光波導(dǎo)傳播所述第二光信號(hào)，得到第五光信號(hào)；目標(biāo)自變量獲取單元，用于以使得所述第三光信號(hào)與所述第五光信號(hào)的差異最小為目標(biāo)，確定所述成像特性模型的目標(biāo)自變量，將所述目標(biāo)自變量作為所述第四光信號(hào)。
11、在一種可能的實(shí)現(xiàn)方式中，還包括：
12、退化模型獲取單元，用于獲取退化模型；
13、失真眼圖樣本獲取單元，用于將眼圖樣本輸入所述退化模型，得到所述失真眼圖樣本；
14、真實(shí)注視點(diǎn)坐標(biāo)確定單元，用于獲取所述眼圖樣本表征的第一注視點(diǎn)坐標(biāo)，并將所述第一注視點(diǎn)坐標(biāo)作為所述失真眼圖樣本表現(xiàn)的眼部的真實(shí)注視點(diǎn)坐標(biāo)。
15、在一種可能的實(shí)現(xiàn)方式中，所述注視點(diǎn)確定單元與所述顯示器通信連接，所述顯示器，還用于：
16、基于所述注視點(diǎn)坐標(biāo)，確定所述眼部關(guān)注的景物；
17、生成與所述景物匹配的第一虛擬圖像，并將所述當(dāng)前虛擬圖像替換為所述第一虛擬圖像。
18、在一種可能的實(shí)現(xiàn)方式中，所述注視點(diǎn)確定單元還包括紅外光源，所述第二光信號(hào)為所述眼部針對(duì)所述紅外光源發(fā)出的光束進(jìn)行反射形成的光信號(hào)。
19、在一種可能的實(shí)現(xiàn)方式中，所述顯示系統(tǒng)還包括：支撐裝置，所述支撐裝置，用于將所述光波導(dǎo)固定于所述眼部的前方；
20、所述支撐裝置包括：用于支撐所述光波導(dǎo)的外框支架，以及與所述外框支架連接的定位支架，所述定位支架設(shè)置在避開視線的方向上；
21、所述顯示器、所述注視點(diǎn)確定單元設(shè)置于所述定位支架上。
22、在一種可能的實(shí)現(xiàn)方式中，所述顯示系統(tǒng)還包括：設(shè)置于所述顯示器和所述光波導(dǎo)之間的準(zhǔn)直裝置、分光元件；以及設(shè)置于所述注視點(diǎn)確定單元和所述分光元件之間的聚焦裝置；
23、其中，所述準(zhǔn)直裝置比所述分光元件更靠近所述顯示器，所述分光元件比所述準(zhǔn)直裝置更靠近所述光波導(dǎo)；
24、所述準(zhǔn)直裝置，用于將所述第一光信號(hào)沿第一方向傳播，使得所述第一光信號(hào)到達(dá)所述分光元件；
25、所述分光元件，用于將所述第一光信號(hào)沿第二方向傳播，使得所述第一光信號(hào)到達(dá)所述光波導(dǎo)；
26、所述分光元件將所述第三光信號(hào)沿第三方向傳播，使得所述第三光信號(hào)到達(dá)所述聚焦裝置；
27、所述聚焦裝置將所述第三光信號(hào)沿第四方向進(jìn)行傳播并匯聚，使得所述第三光信號(hào)到達(dá)所述注視點(diǎn)確定單元。
28、根據(jù)本公開的另一方面，提供了一種電子設(shè)備，包括：處理器；用于存儲(chǔ)處理器可執(zhí)行指令的存儲(chǔ)器；其中，所述處理器被配置為在執(zhí)行所述存儲(chǔ)器存儲(chǔ)的指令時(shí)，實(shí)現(xiàn)上述顯示系統(tǒng)的功能。
29、在本公開實(shí)施例中，第二光信號(hào)經(jīng)過光波導(dǎo)傳輸形成了失真的光信號(hào)，即第三光信號(hào)。注視點(diǎn)確定單元可以基于第三關(guān)光信號(hào)來確定眼部的注視點(diǎn)坐標(biāo)。這樣，即使獲得的光信號(hào)無法準(zhǔn)確反映眼部的注視狀態(tài)，使用本公開的顯示系統(tǒng)仍可以獲得準(zhǔn)確的注視點(diǎn)坐標(biāo)，提高了對(duì)眼動(dòng)情況判斷的準(zhǔn)確性，也提高了生成的虛擬圖像與眼部看到的真實(shí)景物的匹配度，提高了用戶體驗(yàn)。根據(jù)下面參考附圖對(duì)示例性實(shí)施例的詳細(xì)說明，本公開的其它特征及方面將變得清楚。
本文檔來自技高網(wǎng)...【技術(shù)保護(hù)點(diǎn)】
1.一種顯示系統(tǒng)，其特征在于，包括：顯示器、光波導(dǎo)、注視點(diǎn)確定單元；
2.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，所述注視點(diǎn)確定單元，包括：校正單元，第一成像單元，第一識(shí)別單元，
3.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，所述注視點(diǎn)確定單元，包括：第二成像單元，第二識(shí)別單元，
4.根據(jù)權(quán)利要求2所述的系統(tǒng)，其特征在于，所述校正單元，包括：
5.根據(jù)權(quán)利要求3所述的系統(tǒng)，其特征在于，還包括：
6.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，所述注視點(diǎn)確定單元與所述顯示器通信連接，所述顯示器，還用于：
7.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，所述注視點(diǎn)確定單元還包括紅外光源，所述第二光信號(hào)為所述眼部針對(duì)所述紅外光源發(fā)出的光束進(jìn)行反射形成的光信號(hào)。
8.根據(jù)權(quán)利要求1-7任一所述的系統(tǒng)，其特征在于，所述顯示系統(tǒng)還包括：支撐裝置，所述支撐裝置，用于將所述光波導(dǎo)固定于所述眼部的前方；
9.根據(jù)權(quán)利要求1-7任一所述的系統(tǒng)，其特征在于，所述顯示系統(tǒng)還包括：設(shè)置于所述顯示器和所述光波導(dǎo)之間的準(zhǔn)直裝置、分光
10.一種電子設(shè)備，其特征在于，包括：
...【技術(shù)特征摘要】
1.一種顯示系統(tǒng)，其特征在于，包括：顯示器、光波導(dǎo)、注視點(diǎn)確定單元；
2.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，所述注視點(diǎn)確定單元，包括：校正單元，第一成像單元，第一識(shí)別單元，
3.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，所述注視點(diǎn)確定單元，包括：第二成像單元，第二識(shí)別單元，
4.根據(jù)權(quán)利要求2所述的系統(tǒng)，其特征在于，所述校正單元，包括：
5.根據(jù)權(quán)利要求3所述的系統(tǒng)，其特征在于，還包括：
6.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，所述注視點(diǎn)確定單元與所述顯示器通信連接，所述顯示器，還用于：<...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：曹良才，邢宇琪，馬玉辰，吳佳琛，
申請(qǐng)(專利權(quán))人：清華大學(xué)，
類型：發(fā)明
國(guó)別省市：
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。