System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本公開涉及人工智能,尤其涉及為計算機視覺、增強現實、虛擬現實等,可應用于元宇宙、數字人等場景,具體涉及手勢估計方法、裝置、電子設備及存儲介質。
技術介紹
1、隨著虛擬現實、增強現實技術的逐漸普及以及不可估量發展前景,作為人機交互的一種重要手段,手勢識別技術一直受到計算機視覺領域的高度關注。由于人手關節較多、形狀較復雜,如何準確進行手勢識別一直是一個難題。
技術實現思路
1、本公開提供了一種手勢估計方法、裝置、電子設備及存儲介質。
2、根據本公開的一方面,提供了一種手勢估計方法,包括:
3、獲取待估計手部圖像;
4、對所述待估計手部圖像進行特征提取,得到手部占據特征以及三維圖像特征,所述手部占據特征用于描述所述待估計手部圖像中手部的特征,所述三維圖像特征用于描述所述待估計手部圖像中整體圖像的特征;
5、根據所述手部占據特征和所述三維圖像特征預測得到與所述待估計手部圖像對應的手部姿態。
6、根據本公開的另一方面,提供了一種手勢估計裝置,包括:
7、獲取模塊,用于獲取待估計手部圖像;
8、提取模塊,用于對所述待估計手部圖像進行特征提取,得到手部占據特征以及三維圖像特征,所述手部占據特征用于描述所述待估計手部圖像中手部的特征,所述三維圖像特征用于描述所述待估計手部圖像中整體圖像的特征;
9、預測模塊,用于根據所述手部占據特征和所述三維圖像特征預測得到與所述待估計手部圖像對應的手部姿態。
< ...【技術保護點】
1.一種手勢估計方法,包括:
2.根據權利要求1所述的方法,其中,所述對所述待估計手部圖像進行特征提取,得到手部占據特征以及三維圖像特征,包括:
3.根據權利要求1所述的方法,其中,所述根據所述手部占據特征和所述三維圖像特征預測得到與所述待估計手部圖像對應的手部姿態,包括:
4.根據權利要求3所述的方法,其中,所述將所述手部占據特征進行監督學習訓練,得到調整后的手部占據特征,包括:
5.根據權利要求3所述的方法,其中,所述將所述三維圖像特征進行渲染監督學習訓練,得到調整后的三維圖像特征,包括:
6.根據權利要求3所述的方法,其中,所述根據所述調整后的手部占據特征以及所述調整后的三維圖像特征預測得到與所述待估計手部圖像對應的手部姿態,包括:
7.根據權利要求6所述的方法,其中,所述將所述調整后的手部占據特征和所述調整后的三維圖像特征進行解碼,以預測得到與所述待估計手部圖像對應的手部姿態,包括:
8.一種手勢估計裝置,包括:
9.根據權利要求8所述的裝置,其中,所述提取模塊對所述待估計手部
10.根據權利要求8所述的裝置,其中,所述預測模塊根據所述手部占據特征和所述三維圖像特征預測得到與所述待估計手部圖像對應的手部姿態,包括:
11.根據權利要求10所述的裝置,其中,所述預測模塊將所述手部占據特征進行監督學習訓練,得到調整后的手部占據特征,包括:
12.根據權利要求10所述的裝置,其中,所述預測模塊將所述三維圖像特征進行渲染監督學習訓練,得到調整后的三維圖像特征,包括:
13.根據權利要求10所述的裝置,其中,所述預測模塊根據所述調整后的手部占據特征以及所述調整后的三維圖像特征預測得到與所述待估計手部圖像對應的手部姿態,包括:
14.根據權利要求13所述的裝置,其中,所述預測模塊將所述調整后的手部占據特征和所述調整后的三維圖像特征進行解碼,以預測得到與所述待估計手部圖像對應的手部姿態,包括:
15.一種電子設備,包括:
16.一種存儲有計算機指令的非瞬時計算機可讀存儲介質,其中,所述計算機指令用于使所述計算機執行根據權利要求1-7中任一項所述的方法。
17.一種計算機程序產品,包括計算機程序,所述計算機程序在被處理器執行時實現根據權利要求1-7中任一項所述的方法。
...【技術特征摘要】
1.一種手勢估計方法,包括:
2.根據權利要求1所述的方法,其中,所述對所述待估計手部圖像進行特征提取,得到手部占據特征以及三維圖像特征,包括:
3.根據權利要求1所述的方法,其中,所述根據所述手部占據特征和所述三維圖像特征預測得到與所述待估計手部圖像對應的手部姿態,包括:
4.根據權利要求3所述的方法,其中,所述將所述手部占據特征進行監督學習訓練,得到調整后的手部占據特征,包括:
5.根據權利要求3所述的方法,其中,所述將所述三維圖像特征進行渲染監督學習訓練,得到調整后的三維圖像特征,包括:
6.根據權利要求3所述的方法,其中,所述根據所述調整后的手部占據特征以及所述調整后的三維圖像特征預測得到與所述待估計手部圖像對應的手部姿態,包括:
7.根據權利要求6所述的方法,其中,所述將所述調整后的手部占據特征和所述調整后的三維圖像特征進行解碼,以預測得到與所述待估計手部圖像對應的手部姿態,包括:
8.一種手勢估計裝置,包括:
9.根據權利要求8所述的裝置,其中,所述提取模塊對所述待估計手部圖像進行特征提取,得到手部占據特征以及三維圖像特征,包括:
10....
【專利技術屬性】
技術研發人員:張雨蒙,葉曉青,
申請(專利權)人:北京百度網訊科技有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。