本申請公開了一種虛擬現(xiàn)實眼鏡，所述虛擬現(xiàn)實眼鏡包括：將布局陣列光束投射至預(yù)設(shè)投影平面，根據(jù)反射波束的波束信息，對布局陣列光束的光線阻斷的位置進行定位，得到阻斷坐標位置；根據(jù)預(yù)設(shè)投影平面對應(yīng)區(qū)域的當(dāng)前圖像幀，對用戶在字符書寫界面的觸控點的位置進行識別，得到觸點坐標位置，對阻斷坐標位置進行動態(tài)追蹤得到光線阻斷運動軌跡，對光線阻斷運動軌跡對應(yīng)的字符進行識別；若識別出的字符為多個疑似的待確定字符，則依據(jù)時序性對觸點坐標位置進行動態(tài)追蹤，構(gòu)建得到光線觸點運動軌跡，將光線觸點運動軌跡和各待確定字符輸入字符識別神經(jīng)網(wǎng)絡(luò)模型，得到目標字符進行輸入。本申請能提高虛擬現(xiàn)實眼鏡的字符輸入準確性。本申請能提高虛擬現(xiàn)實眼鏡的字符輸入準確性。本申請能提高虛擬現(xiàn)實眼鏡的字符輸入準確性。
【技術(shù)實現(xiàn)步驟摘要】
虛擬現(xiàn)實眼鏡
[0001]本申請涉及虛擬現(xiàn)實
，尤其涉及一種虛擬現(xiàn)實眼鏡。
技術(shù)介紹
[0002]目前，VR（VirtualReality，虛擬現(xiàn)實）眼鏡是目前正在快速發(fā)展和普及的虛擬現(xiàn)實產(chǎn)品。而市面上很多虛擬現(xiàn)實眼鏡通常不配備鍵盤或觸摸屏等輸入設(shè)備，所以在虛擬現(xiàn)實眼鏡上的字符輸入方式一般只能通過語音和手勢來進行，這一局限給虛擬現(xiàn)實眼鏡在文本信息的交互方面造成了不便。
[0003]相關(guān)技術(shù)中的字符輸入方式是通過提供一種允許用戶使用書寫工具和書寫平面進行手寫筆跡的提取方法，即通過攝像頭跟蹤書寫工具的筆尖，從跟蹤得到的筆尖的運動軌跡，確定手寫筆跡 (即字符信息)。但是，實際應(yīng)用中，用戶在書寫時很難通過遠距離的攝像頭精確捕捉到筆尖的運動軌跡，導(dǎo)致提取出的手寫筆跡的準確度不高，進而使得字符輸入準確性較低。
[0004]因此，如何提高虛擬現(xiàn)實眼鏡的字符輸入準確性，成為亟待解決的技術(shù)問題。
技術(shù)實現(xiàn)思路
[0005]本申請的主要目的在于提供一種虛擬現(xiàn)實眼鏡，旨在解決如何提高虛擬現(xiàn)實眼鏡的字符輸入準確性的技術(shù)問題。
[0006]為實現(xiàn)上述目的，本申請?zhí)峁┮环N虛擬現(xiàn)實眼鏡，所述虛擬現(xiàn)實眼鏡包括激光收發(fā)模塊、圖像識別模塊和處理模塊，所述激光收發(fā)模塊和所述圖像識別模塊分別與所述處理模塊電連接，所述激光收發(fā)模塊用于：在檢測到輸入的字符書寫指令時，生成所述虛擬現(xiàn)實眼鏡的字符書寫界面對應(yīng)的布局陣列光束，將所述布局陣列光束投射至預(yù)設(shè)投影平面，以在所述預(yù)設(shè)投影平面投影所述字符書寫界面；接收所述布局陣列光束對應(yīng)反射回的反射波束，根據(jù)所述反射波束的波束信息，對所述布局陣列光束的光線阻斷的位置進行定位，得到阻斷坐標位置；所述圖像識別模塊用于：采集所述預(yù)設(shè)投影平面對應(yīng)區(qū)域的當(dāng)前圖像幀，根據(jù)所述當(dāng)前圖像幀，對用戶在字符書寫界面的觸控點的位置進行識別，得到觸點坐標位置；所述處理模塊用于：依據(jù)時序性對所述阻斷坐標位置進行動態(tài)追蹤，根據(jù)動態(tài)追蹤的所述阻斷坐標位置，構(gòu)建基于回波識別的光線阻斷運動軌跡，將所述光線阻斷運動軌跡轉(zhuǎn)換為二維矢量圖形，并對所述二維矢量圖形對應(yīng)的字符進行識別；依據(jù)時序性對所述觸點坐標位置進行動態(tài)追蹤，根據(jù)動態(tài)追蹤的所述觸點坐標位置，構(gòu)建基于圖像識別的光線觸點運動軌跡；
若識別出的所述字符為多個疑似的待確定字符，則將所述光線觸點運動軌跡和各所述待確定字符輸入至訓(xùn)練好的字符識別神經(jīng)網(wǎng)絡(luò)模型，獲取得到所述字符識別神經(jīng)網(wǎng)絡(luò)模型從各所述待確定字符中選擇的目標字符，并輸入所述目標字符，其中，所述待確定字符為識別準確的概率小于預(yù)設(shè)概率閾值的字符。
[0007]可選地，所述處理模塊還用于：若識別出的所述字符為確定字符，則將所述確定字符作為目標字符進行輸入，其中，所述確定字符為識別準確的概率大于或等于預(yù)設(shè)概率閾值的字符。
[0008]可選地，所述虛擬現(xiàn)實眼鏡還包括手柄操控模塊，所述處理模塊包括生成單元和追蹤單元，所述手柄操控模塊、所述生成單元和所述追蹤單元依次電連接，所述手柄操控模塊，用于獲取用戶所觸發(fā)的按鈕鍵位信息；所述生成單元，用于根據(jù)所述按鈕鍵位信息生成控制指令，其中，所述控制指令包括落筆指令、移筆指令或完全提筆指令；所述追蹤單元，用于根據(jù)所述控制指令，依據(jù)時序性對所述阻斷坐標位置進行動態(tài)追蹤。
[0009]可選地，所述激光收發(fā)模塊包括：比較單元，用于獲取預(yù)存的所述布局陣列光束的標準回波信息，將所述反射波束的波束信息與所述標準回波信息進行比較，確定所述布局陣列光束的回波周期的變動值；定位單元，用于若所述回波周期的變動值大于預(yù)設(shè)時長閾值，則對所述變動值大于預(yù)設(shè)時長閾值的所述反射波束的坐標位置進行定位，得到回波異動坐標位置；將所述回波異動坐標位置，作為所述布局陣列光束的光線阻斷的阻斷坐標位置。
[0010]可選地，所述激光收發(fā)模塊還包括校準單元，所述校準單元，用于：若幀測到輸入的光束定位校準指令，則將預(yù)設(shè)的校準參考光束投射至所述預(yù)設(shè)投影平面上的預(yù)設(shè)坐標位置以在所述預(yù)設(shè)投影平面形成校準標識，其中，所述校準參考光束的波長與所述布局陣列光束的波長不同；接收所述校準參考光束對應(yīng)反射回的校準反射光束；根據(jù)所述校準反射光束的波束信息，對所述激光收發(fā)模塊中預(yù)存的光束定位識別算法進行校準；所述定位單元，還用于：若所述回波周期的變動值大于預(yù)設(shè)時長閾值，則通過校準后的所述光束定位識別算法，對所述變動值大于預(yù)設(shè)時長閾值的所述反射波束的坐標位置進行定位，得到回波異動坐標位置。
[0011]可選地，所述處理模塊還包括：預(yù)測單元，用于將所述光線觸點運動軌跡和所述待確定字符輸入至預(yù)存的字符識別神經(jīng)網(wǎng)絡(luò)模型，通過所述字符識別神經(jīng)網(wǎng)絡(luò)模型預(yù)測得到所述光線觸點運動軌跡對應(yīng)的預(yù)測字符；匹配單元，用于通過所述字符識別神經(jīng)網(wǎng)絡(luò)模型將所述預(yù)測字符與各所述待確定字符進行相似度匹配，得到各所述待確定字符對應(yīng)的字符匹配度；確定單元，用于將所述字符匹配度最高的所述待確定字符，作為各所述待確定字
符中選擇的目標字符。
[0012]可選地，所述虛擬現(xiàn)實眼鏡還包括觸屏顯示模塊，所述觸屏顯示模塊與所述確定單元電連接，所述確定單元，還用于：若判定所述字符匹配度最高的所述待確定字符為一個，則執(zhí)行：所述將所述字符匹配度最高的所述待確定字符，作為各所述待確定字符中選擇的目標字符的步驟；若判定所述字符匹配度最高的所述待確定字符為多個，則將所述字符匹配度最高的各所述待確定字符輸入至所述觸屏顯示模塊進行顯示，其中，所述字符匹配度最高的各所述待確定字符分別顯示于所述觸屏顯示模塊的顯示界面中不同的坐標位置；所述觸屏顯示模塊，用于：若接收到用戶在所述顯示界面的觸控選擇指令，則確定所述觸控選擇指令對應(yīng)的觸控坐標位置；所述確定單元，還用于：將所述觸控坐標位置對應(yīng)顯示的字符，作為各所述待確定字符中選擇的目標字符。
[0013]可選地，所述圖像識別模塊還包括：獲取單元，用于獲取預(yù)存的書寫物尖端對應(yīng)的目標特征，其中，所述書寫物尖端為手指指尖或工具筆筆尖，所述目標特征為所述書寫物尖端對應(yīng)的形狀特征和/或顏色特征；輪詢單元，用于將所述當(dāng)前圖像幀中的各圖像特征，與所述目標特征進行相似度的輪詢匹配，并將匹配度最高的所述圖像特征，作為所述書寫物尖端；判定單元，用于將所述書寫物尖端的坐標位置，作為用戶在字符書寫界面的觸控點的觸點坐標位置。
[0014]可選地，所述圖像識別模塊還包括：采集單元，用于若檢測到輸入的書寫物更新指令時，則控制所述圖像識別模塊對新的書寫物進行圖像采集，得到最新書寫物圖像；掃描單元，用于對所述最新書寫物圖像中的書寫物進行輪廓掃描，掃描得到最新的書寫物尖端對應(yīng)的形狀特征和/或顏色特征；預(yù)存單元，用于將最新的書寫物尖端對應(yīng)的形狀特征和/或顏色特征，作為書寫物尖端對應(yīng)的目標特征進行預(yù)存。
[0015]可選地，所述處理模塊還包括：通信單元，用于將所述光線觸點運動軌跡和各所述待確定字符發(fā)送至字符分析服務(wù)器，其中，所述字符分析服務(wù)器中存儲有訓(xùn)練好的字符識別神經(jīng)網(wǎng)絡(luò)模型；接收所述字符分析服務(wù)器響應(yīng)于所述光線觸點運動軌跡和各所述待確定字符，而返回的所述本文檔來自技高網(wǎng)...
【技術(shù)保護點】
【技術(shù)特征摘要】
1.一種虛擬現(xiàn)實眼鏡，其特征在于，所述虛擬現(xiàn)實眼鏡包括激光收發(fā)模塊、圖像識別模塊和處理模塊，所述激光收發(fā)模塊和所述圖像識別模塊分別與所述處理模塊電連接，所述激光收發(fā)模塊用于：在檢測到輸入的字符書寫指令時，生成所述虛擬現(xiàn)實眼鏡的字符書寫界面對應(yīng)的布局陣列光束，將所述布局陣列光束投射至預(yù)設(shè)投影平面，以在所述預(yù)設(shè)投影平面投影所述字符書寫界面；接收所述布局陣列光束對應(yīng)反射回的反射波束，根據(jù)所述反射波束的波束信息，對所述布局陣列光束的光線阻斷的位置進行定位，得到阻斷坐標位置；所述圖像識別模塊用于：采集所述預(yù)設(shè)投影平面對應(yīng)區(qū)域的當(dāng)前圖像幀，根據(jù)所述當(dāng)前圖像幀，對用戶在字符書寫界面的觸控點的位置進行識別，得到觸點坐標位置；所述處理模塊用于：依據(jù)時序性對所述阻斷坐標位置進行動態(tài)追蹤，根據(jù)動態(tài)追蹤的所述阻斷坐標位置，構(gòu)建基于回波識別的光線阻斷運動軌跡，將所述光線阻斷運動軌跡轉(zhuǎn)換為二維矢量圖形，并對所述二維矢量圖形對應(yīng)的字符進行識別；依據(jù)時序性對所述觸點坐標位置進行動態(tài)追蹤，根據(jù)動態(tài)追蹤的所述觸點坐標位置，構(gòu)建基于圖像識別的光線觸點運動軌跡；若識別出的所述字符為多個疑似的待確定字符，則將所述光線觸點運動軌跡和各所述待確定字符輸入至訓(xùn)練好的字符識別神經(jīng)網(wǎng)絡(luò)模型，獲取得到所述字符識別神經(jīng)網(wǎng)絡(luò)模型從各所述待確定字符中選擇的目標字符，并輸入所述目標字符，其中，所述待確定字符為識別準確的概率小于預(yù)設(shè)概率閾值的字符。2.如權(quán)利要求1所述的虛擬現(xiàn)實眼鏡，其特征在于，所述處理模塊還用于：若識別出的所述字符為確定字符，則將所述確定字符作為目標字符進行輸入，其中，所述確定字符為識別準確的概率大于或等于預(yù)設(shè)概率閾值的字符。3.如權(quán)利要求1所述的虛擬現(xiàn)實眼鏡，其特征在于，所述虛擬現(xiàn)實眼鏡還包括手柄操控模塊，所述處理模塊包括生成單元和追蹤單元，所述手柄操控模塊、所述生成單元和所述追蹤單元依次電連接，所述手柄操控模塊，用于獲取用戶所觸發(fā)的按鈕鍵位信息；所述生成單元，用于根據(jù)所述按鈕鍵位信息生成控制指令，其中，所述控制指令包括落筆指令、移筆指令或完全提筆指令；所述追蹤單元，用于根據(jù)所述控制指令，依據(jù)時序性對所述阻斷坐標位置進行動態(tài)追蹤。4.如權(quán)利要求1所述的虛擬現(xiàn)實眼鏡，其特征在于，所述激光收發(fā)模塊包括：比較單元，用于獲取預(yù)存的所述布局陣列光束的標準回波信息，將所述反射波束的波束信息與所述標準回波信息進行比較，確定所述布局陣列光束的回波周期的變動值；定位單元，用于若所述回波周期的變動值大于預(yù)設(shè)時長閾值，則對所述變動值大于預(yù)設(shè)時長閾值的所述反射波束的坐標位置進行定位，得到回波異動坐標位置；將所述回波異動坐標位置，作為所述布局陣列光束的光線阻斷的阻斷坐標位置。5.如權(quán)利要求4所述的虛擬現(xiàn)實眼鏡，其特征在于，所述激光收發(fā)模塊還包括校準單
元，所述校準單元，用于：若幀測到輸入的光束定位校準指令，則將預(yù)設(shè)的校準參考光束投射至所述預(yù)設(shè)投影平面上的預(yù)設(shè)坐標位置以在所述預(yù)設(shè)投影平面形成校準標識，其中，所述校準參考光束的波長與所述布局陣列光束的波長不同；接收所述校準參考光束對應(yīng)反射回的校準反射光...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：尤文娟，
申請(專利權(quán))人：北京元隆雅圖文化傳播股份有限公司，
類型：發(fā)明
國別省市：
還沒有人留言評論。發(fā)表了對其他瀏覽者有用的留言會獲得科技券。