System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本申請涉及人工智能,尤其涉及一種數字人的交互控制方法及相關設備。
技術介紹
1、隨著人工智能技術的發展,數字人被廣泛應用于各種視頻播放場景中,尤其是電商直播場景。數字人在電商直播中的應用不僅能夠提供創新的購物體驗,還能夠幫助企業降低成本、提高效率,并通過與用戶互動增強用戶粘性。
2、數字人與用戶之間的互動往往依賴于人工編寫的對話腳本,對話腳本定義了一些常見問題及其對應的回復話術,基于對話腳本,數字人可以回復用戶提出的常見問題。若用戶提出的問題不屬于對話腳本定義的常見問題,數字人可能會無法正確理解或回應用戶。目前的數字人無法適應用戶多變和細分的個性化對話需求,降低用戶的互動意愿,進而降低商品購買意愿。
技術實現思路
1、本申請的多個方面提供一種數字人的交互控制方法及相關設備,用以提升數字人與用戶之間的交互質量,實現更為自然、流暢且富有情感的多模態互動體驗。
2、本申請實施例提供一種數字人的交互控制方法,獲取目標用戶針對數字人發起的第一互動信息;利用意圖識別模型從第一互動信息中識別目標用戶的情感特征和目標意圖信息;根據情感特征和目標意圖信息調用具有多模態交互能力的語言模型,生成用于控制數字人進行多模態交互的控制信息;根據控制信息,控制數字人與目標用戶進行多模態交互。
3、本申請實施例提供一種電子設備,包括:存儲器和處理器;存儲器,用于存儲計算機程序;處理器耦合至存儲器,用于執行計算機程序以用于執行數字人的交互控制方法中的步驟。
4、本申請
5、本申請實施例提供一種計算機程序產品,包括計算機程序/指令,當計算機程序/指令被處理器執行時,致使處理器能夠實現數字人的交互控制方法中的步驟。
6、在本申請實施例中,在數字人與用戶的交互過程中,通過意圖識別模型基于用戶的互動信息識別用戶的情感特征和意圖信息,通過具有多模態交互能力的語言模型基于用戶的情感特征和意圖信息進行多模態互動反饋。由此,提升了數字人與用戶之間的交互質量,實現了更為自然、流暢且富有情感的多模態互動體驗,有效地適應用戶多變和細分的個性化對話需求,提高了用戶的互動意愿,特別是在商品直播場景中,能夠有效提高用戶的商品購買意愿。
本文檔來自技高網...【技術保護點】
1.一種數字人的交互控制方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,所述意圖識別模型包括情感分析網絡和意圖識別網絡;利用意圖識別模型從所述第一互動信息中識別所述目標用戶的情感特征和目標意圖信息,包括:
3.根據權利要求2所述的方法,其特征在于,結合上下文信息分析所述第一互動信息表達的情感信息,作為所述情感特征,包括:
4.根據權利要求3所述的方法,其特征在于,所述上下文信息包括以下至少一種信息:
5.根據權利要求2所述的方法,其特征在于,結合數字人直播的應用場景對所述第一互動信息進行語義理解,以得到所述目標意圖信息,包括:
6.根據權利要求1-5任一項所述的方法,其特征在于,根據所述情感特征和所述目標意圖信息調用具有多模態交互能力的語言模型,生成用于控制所述數字人進行多模態交互的控制信息,包括:
7.根據權利要求6所述的方法,其特征在于,根據所述情感特征和所述目標意圖信息,生成用于控制所述數字人進行多模態交互的語言類控制信息和非語言類控制信息,包括:
8.根據權利要求7所述
9.根據權利要求8所述的方法,其特征在于,所述目標意圖信息為與第一商品相關的知識問答意圖,則執行所述目標交互控制流程,以生成初始語言類控制信息,包括:
10.根據權利要求9所述的方法,其特征在于,根據所述第一商品與所述數字人當前直播的第二商品相關性,生成初始語言類控制信息,包括:
11.根據權利要求9所述的方法,其特征在于,根據所述目標用戶對所述第一商品的付款情況,生成初始語言類控制信息,包括:
12.根據權利要求8所述的方法,其特征在于,執行所述目標交互控制流程,以生成初始語言類控制信息,還包括:
13.根據權利要求1-6任一項所述的方法,其特征在于,所述語言類控制信息為語音播報信息,所述非語言類控制信息包括目標表情信息和目標動作信息,根據所述控制信息,控制所述數字人與所述目標用戶進行多模態交互,包括:
14.一種電子設備,其特征在于,包括:存儲器和處理器;所述存儲器,用于存儲計算機程序;所述處理器耦合至所述存儲器,用于執行所述計算機程序以用于執行權利要求1-13任一項所述方法中的步驟。
15.一種存儲有計算機程序的計算機可讀存儲介質,其特征在于,當所述計算機程序被處理器執行時,致使所述處理器能夠實現權利要求1-13任一項所述方法中的步驟。
16.一種計算機程序產品,其特征在于,包括計算機程序/指令,當計算機程序/指令被處理器執行時,致使處理器能夠實現權利要求1-13任一項所述方法中的步驟。
...【技術特征摘要】
1.一種數字人的交互控制方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,所述意圖識別模型包括情感分析網絡和意圖識別網絡;利用意圖識別模型從所述第一互動信息中識別所述目標用戶的情感特征和目標意圖信息,包括:
3.根據權利要求2所述的方法,其特征在于,結合上下文信息分析所述第一互動信息表達的情感信息,作為所述情感特征,包括:
4.根據權利要求3所述的方法,其特征在于,所述上下文信息包括以下至少一種信息:
5.根據權利要求2所述的方法,其特征在于,結合數字人直播的應用場景對所述第一互動信息進行語義理解,以得到所述目標意圖信息,包括:
6.根據權利要求1-5任一項所述的方法,其特征在于,根據所述情感特征和所述目標意圖信息調用具有多模態交互能力的語言模型,生成用于控制所述數字人進行多模態交互的控制信息,包括:
7.根據權利要求6所述的方法,其特征在于,根據所述情感特征和所述目標意圖信息,生成用于控制所述數字人進行多模態交互的語言類控制信息和非語言類控制信息,包括:
8.根據權利要求7所述的方法,其特征在于,根據所述目標意圖信息和輔助信息,生成所述語言類控制信息,包括:
9.根據權利要求8所述的方法,其特征在于,所述目標意圖信息為與第一商品相關的知識問答意圖,則執行所述目標...
【專利技術屬性】
技術研發人員:郭雅志,俞一鵬,郭從云,孫煜晗,金美光,馬俊鋒,
申請(專利權)人:淘寶中國軟件有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。