【技術實現步驟摘要】
本申請實施例涉及計算機領域，具體涉及一種基于多模態信息的目標識別系統。
技術介紹
1、目標識別指從待識別信息中識別出目標對象，例如，從視頻中識別出說話人，比如判斷畫面中的人物是否正在講話，如果存在講話者，則同步地找到它在畫面中的位置。該任務作為計算機領域子方向之一，由于其巨大的技術挑戰以及廣闊的市場應用前景，近年來逐漸受到科研人員的重視。
技術實現思路
1、本申請實施例提供一種基于多模態信息的目標識別系統。
2、第一方面，本申請實施例提供了一種方法，包括：
3、獲取待識別信息；
4、對所述待識別信息進行特征提取，得到對象特征信息；
5、基于所述對象特征信息，確定出目標識別對象信息。
6、第二方面，本申請實施例還提供了一種系統，包括：
7、獲取模塊，用于獲取待識別信息；
8、提取模塊，用于對所述待識別信息進行特征提取，得到對象特征信息；
9、確定模塊，用于基于所述對象特征信息，確定出目標識別對象信息。
10、第三方面，本申請實施例還提供了一種設備，該設備包括存儲器、處理器及存儲在存儲器中并可在處理器上運行的計算機程序，處理器執行計算機程序時實現上述的方法中的步驟。
11、第四方面，本申請實施例還提供了一種計算機可讀存儲介質，計算機可讀存儲介質上存儲有計算機程序，計算機程序被處理器執行時實現上述的方法中的步驟。
12、第五方面，本申請實施例還提供了一種計算
本文檔來自技高網...【技術保護點】
1.一種方法，其特征在于，包括：
2.根據權利要求1所述的方法，其特征在于，所述基于所述對象特征信息，確定出目標識別對象信息，包括：
3.根據權利要求2所述的方法，其特征在于，所述若所述對象姿態信息不滿足所述第一預設條件，對所述對象特征信息進行特征分析識別處理，得到所述目標識別對象信息，包括：
4.根據權利要求2所述的方法，其特征在于，所述對象識別模型包括第一編碼模塊、第二編碼模塊、融合模塊和時序處理模塊，所述第一編碼模塊的輸入端被配置為接收所述對象識別模型的第一模型輸入信息，所述第二編碼模塊的輸入端被配置為接收所述對象識別模型的第二模型輸入信息，所述第一編碼模塊的輸出端連接所述融合模塊的輸入端，所述第二編碼模塊的輸出端連接所述融合模塊的輸入端，所述融合模塊的輸出端連接所述時序處理模塊的輸入端，所述時序處理模塊的輸出端被配置為輸出所述對象識別模型的模型輸出信息。
5.根據權利要求4所述的方法，其特征在于，所述對象識別模型的第一模型輸入信息為所述待識別信息中的圖像信息，所述對象識別模型的第二模型輸入信息為所述待識別信息中的音頻信息；<...
【技術特征摘要】
1.一種方法，其特征在于，包括：
2.根據權利要求1所述的方法，其特征在于，所述基于所述對象特征信息，確定出目標識別對象信息，包括：
3.根據權利要求2所述的方法，其特征在于，所述若所述對象姿態信息不滿足所述第一預設條件，對所述對象特征信息進行特征分析識別處理，得到所述目標識別對象信息，包括：
4.根據權利要求2所述的方法，其特征在于，所述對象識別模型包括第一編碼模塊、第二編碼模塊、融合模塊和時序處理模塊，所述第一編碼模塊的輸入端被配置為接收所述對象識別模型的第一模型輸入信息，所述第二編碼模塊的輸入端被配置為接收所述對象識別模型的第二模型輸入信息，所述第一編碼模塊的輸出端連接所述融合模塊的輸入端，所述第二編碼模塊的輸出端連接所述融合模塊的輸入端，所述融合模塊的輸出端連接所述時序處理模塊的輸入端，所述時序處理模塊的輸出端被配置為輸出所述對象識別模型的模型輸出信息。
5.根據權利要求4所述的方法，其特征在于，所述對象識別模型的第一模型輸入信息為所述待識別信息中的圖像信息，所述對象識別模型的第二模型輸入信息為所述待識別信息中的音頻信息；
6.根據權利要求5所述的方法，其特征在于，所述第一編碼模塊依次包括第一組合單元、第一池化單元、第一殘差單元、第二組合單元和第二池化單元，所述第一組合單元的輸入端被配置為接收所述對象識別模型的第一模型輸入信息，所述第一組合單元的輸出端連接所述第一池化單元的輸入端，所述第一池化單元的輸出端連接所...
【專利技術屬性】
技術研發人員：陸杰，劉軍，羅建平，郝江偉，
申請(專利權)人：深圳市TCL高新技術開發有限公司，
類型：發明
國別省市：
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。