System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本專利技術實施例涉及眼球追蹤,尤其涉及一種基于眼球追蹤的圖像處理方法、裝置、設備及存儲介質。
技術介紹
1、現有的具有眼球追蹤功能的可穿戴設備有分析式眼鏡,虛擬現實設備(vr),增強現實設備(ar)。分析式眼鏡和ar通常通過眼球追蹤相機和前置相機組合,將人眼注視點投影到前置相機拍攝的畫面上,方便后續進行各項眼球追蹤實驗與分析及人機交互,例如進行人類心理學和認知科學研究,醫療輔助診斷,用戶體驗分析,用戶交互等。前置相機因為帶寬限制,采集的圖像幀率要小于眼球追蹤相機采集的圖像幀率,這樣在注視點投影過程中,需要降低注視點的幀率,數據利用率不全,難以用于對幀率要求很高的眼球追蹤分析試驗中。
2、虛擬現實設備(vr)一般帶有眼球追蹤功能,用戶通過佩戴vr觀看屏幕上的圖像,體驗游戲、觀看影視、觀看直播、召開視頻會議等交互活動。vr設備可以實時捕捉計算用戶的注視點并顯示在屏幕上。
技術實現思路
1、本專利技術實施例提供一種基于眼球追蹤的圖像處理方法、裝置、設備及存儲介質,根據劃分的多個區域和編碼信息對用戶注視的圖像進行編碼,以減小圖像傳輸量的大小,從而使得傳輸變得更加便捷,加快了數據傳輸速度。也為后續提高圖像采集設備的采集幀率或者提高圖像顯示設備的顯示幀率帶來可能性,從而可以提高眼球追蹤的精度。
2、第一方面,本專利技術實施例提供了一種基于眼球追蹤的圖像處理方法,包括:
3、同步獲取用戶的視線方向和/或注視點信息以及用戶注視的圖像;
4、基于所述視
5、基于所述多個區域和編碼信息對所述圖像進行編碼,所述編碼信息包含如下至少一項:整體目標碼率、量化步長。
6、第二方面,本專利技術實施例還提供了一種基于眼球追蹤的圖像處理裝置,包括:
7、獲取模塊,用于同步獲取用戶的視線方向和/或注視點信息以及用戶注視的圖像;
8、區域劃分模塊,用于基于所述視線方向和/或注視點信息將所述圖像劃分為多個區域,所述多個區域至少為兩個;
9、圖像編碼模塊,用于基于所述多個區域和編碼信息對所述圖像進行編碼,所述編碼信息包含如下至少一項:整體目標碼率、量化步長。
10、第三方面,本專利技術實施例還提供了一種電子設備,所述電子設備包括:
11、至少一個處理器;以及
12、與所述至少一個處理器通信連接的存儲器;其中,
13、所述存儲器存儲有可被所述至少一個處理器執行的計算機程序,所述計算機程序被所述至少一個處理器執行,以使所述至少一個處理器能夠執行本專利技術實施例所述的基于眼球追蹤的圖像處理方法。
14、第四方面,本專利技術實施例還提供了一種計算機可讀存儲介質,所述計算機可讀存儲介質存儲有計算機指令,所述計算機指令用于使處理器執行時實現本專利技術實施例所述的基于眼球追蹤的圖像處理方法。
15、本專利技術實施例公開了一種基于眼球追蹤的圖像處理方法、裝置、設備及存儲介質。同步獲取用戶的視線方向和/或注視點信息以及用戶注視的圖像;基于視線方向和/或注視點信息將圖像劃分為多個區域,多個區域至少為兩個;基于多個區域和編碼信息對圖像進行編碼,編碼信息包含如下至少一項:整體目標碼率、量化步長。本專利技術實施例提供的基于眼球追蹤的圖像處理方法,基于劃分的多個區域及編碼信息對圖像進行編碼,以減小圖像傳輸量的大小,從而使得傳輸變得更加便捷,加快了數據傳輸速度。也為后續提高圖像采集設備的采集幀率或者提高圖像顯示設備的顯示幀率帶來可能性,最終提高眼球追蹤的精度。
本文檔來自技高網...【技術保護點】
1.一種基于眼球追蹤的圖像處理方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,當所述編碼信息為整體目標碼率時,基于所述多個區域和編碼信息對所述圖像進行編碼,包括:
3.根據權利要求2所述的方法,其特征在于,根據所述整體目標碼率分別確定所述多個區域的子目標碼率,包括:
4.根據權利要求1所述的方法,其特征在于,當所述編碼信息為量化步長時,基于所述多個區域和編碼信息對所述圖像進行編碼,包括:
5.根據權利要求1所述的方法,其特征在于,基于所述視線方向和/或注視點信息將所述圖像劃分為多個區域,包括:
6.根據權利要求1所述的方法,其特征在于,獲取用戶的視線方向和/或注視點信息,包括:
7.根據權利要求1所述的方法,其特征在于,在基于所述多個區域和編碼信息對所述圖像進行編碼之后,還包括:
8.一種基于眼球追蹤的圖像處理裝置,其特征在于,包括:
9.一種電子設備,其特征在于,所述電子設備包括:
10.一種計算機可讀存儲介質,其特征在于,所述計算機可讀存儲介質存儲有
...【技術特征摘要】
1.一種基于眼球追蹤的圖像處理方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,當所述編碼信息為整體目標碼率時,基于所述多個區域和編碼信息對所述圖像進行編碼,包括:
3.根據權利要求2所述的方法,其特征在于,根據所述整體目標碼率分別確定所述多個區域的子目標碼率,包括:
4.根據權利要求1所述的方法,其特征在于,當所述編碼信息為量化步長時,基于所述多個區域和編碼信息對所述圖像進行編碼,包括:
5.根據權利要求1所述的方法,其特征在于,基于所述視線方向和/或注視點信息將所述圖像劃分為...
【專利技術屬性】
技術研發人員:請求不公布姓名,
申請(專利權)人:北京七鑫易維信息技術有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。