System.ArgumentOutOfRangeException: 索引和長(zhǎng)度必須引用該字符串內(nèi)的位置。 參數(shù)名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術(shù)實(shí)現(xiàn)步驟摘要】
本專利技術(shù)涉及語(yǔ)音數(shù)據(jù)處理,特別是涉及一種語(yǔ)音指令處理方法及裝置、電子設(shè)備、存儲(chǔ)介質(zhì)。
技術(shù)介紹
1、人車交互是用戶體驗(yàn)的核心,傳統(tǒng)汽車座艙功能區(qū)布局碎片化、信息過載造成了人車交互的障礙,導(dǎo)致將汽車本身作為交互入口的價(jià)值被低估,而隨著電子信息技術(shù)開始向車內(nèi)轉(zhuǎn)移,產(chǎn)生了智能座艙,智能座艙能夠通過各種智能化手段滿足不同人在車內(nèi)的不同需求,將帶來更為智能、安全的交互體驗(yàn),同時(shí)也是高級(jí)輔助駕駛、自動(dòng)駕駛和人工智能等新一代技術(shù)的關(guān)鍵接口。在用戶進(jìn)入智能座艙后,由于針對(duì)智能座艙的環(huán)境變化將會(huì)影響用戶的語(yǔ)音指令的準(zhǔn)確性,在車機(jī)端使用槽位識(shí)別等方式進(jìn)行意圖識(shí)別,必須要用戶有明確的意圖才能提取出對(duì)應(yīng)的關(guān)鍵詞,若用戶發(fā)出比較泛化的指令車輛則無法識(shí)別,如用戶說“我好熱”,通過槽位識(shí)別就無法判斷用戶想要控制的功能,如何為用戶提供更加良好的指令交互是目前急需解決的問題。
技術(shù)實(shí)現(xiàn)思路
1、鑒于上述問題,提出了以便提供克服上述問題或者至少部分地解決上述問題的一種語(yǔ)音指令處理方法及裝置、電子設(shè)備、存儲(chǔ)介質(zhì),包括:
2、一種語(yǔ)音指令處理方法,所述方法包括:
3、在目標(biāo)車輛的語(yǔ)音助手處于喚醒狀態(tài)時(shí),若所述語(yǔ)音助手檢測(cè)到目標(biāo)語(yǔ)音指令,則將所述目標(biāo)語(yǔ)音指令轉(zhuǎn)換為目標(biāo)文本指令;
4、將所述目標(biāo)文本指令輸入所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型,輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型;
5、調(diào)用所述目標(biāo)指令類型對(duì)應(yīng)的目標(biāo)語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令
6、依照所述車輛控制指令控制所述目標(biāo)車輛。
7、可選地,所述將所述目標(biāo)文本指令輸入所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型,輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型,包括:
8、將所述目標(biāo)文本指令輸入所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型;
9、在所述第一語(yǔ)音識(shí)別處理模型中,對(duì)所述目標(biāo)文本指令進(jìn)行分詞處理,生成多個(gè)分詞數(shù)據(jù);
10、基于所述多個(gè)分詞數(shù)據(jù)輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型。
11、可選地,所述基于所述多個(gè)分詞數(shù)據(jù)輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型,包括:
12、將每個(gè)分詞數(shù)據(jù)進(jìn)行向量化,得到每個(gè)分詞數(shù)據(jù)的對(duì)應(yīng)的第一向量數(shù)據(jù);
13、將多個(gè)第一向量數(shù)據(jù)的平均值確定為所述目標(biāo)文本數(shù)據(jù)的目標(biāo)句向量;
14、根據(jù)所述目標(biāo)句向量輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型。
15、可選地,所述目標(biāo)語(yǔ)音識(shí)別處理模塊包括所述目標(biāo)車輛部署的第一語(yǔ)音識(shí)別處理模型和云端部署的第二語(yǔ)音識(shí)別處理模型,所述調(diào)用所述目標(biāo)指令類型對(duì)應(yīng)的目標(biāo)語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令,包括:
16、當(dāng)所述目標(biāo)指令類型為端側(cè)指令類型時(shí),調(diào)用所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令;
17、當(dāng)所述指令類型為云側(cè)指令類型時(shí),將所述目標(biāo)文本指令發(fā)送至所述目標(biāo)車輛連接的云端,以采用所述云端部署的第二語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令。
18、可選地,所述調(diào)用所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令,包括:
19、基于所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)詞槽文本;
20、根據(jù)所述目標(biāo)詞槽文本生成所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令。
21、可選地,所述第一語(yǔ)音識(shí)別處理模型的訓(xùn)練過程包括:
22、獲取用于第一語(yǔ)音識(shí)別處理模型進(jìn)行訓(xùn)練的樣本語(yǔ)音指令對(duì)應(yīng)的樣本文本指令;
23、確定所述樣本文本指令對(duì)應(yīng)的期望指令類型;
24、將所述樣本文本指令輸入預(yù)設(shè)的初始語(yǔ)音識(shí)別模型進(jìn)行指令分類預(yù)測(cè),得到所述樣本文本指令對(duì)應(yīng)的預(yù)測(cè)指令類型;
25、基于所述期望指令類型和所述預(yù)測(cè)指令類型確定預(yù)設(shè)第一損失函數(shù)的第一損失函數(shù)值;
26、依照所述第一損失函數(shù)值對(duì)所述初始語(yǔ)音識(shí)別模型的模型參數(shù)進(jìn)行調(diào)整;
27、當(dāng)調(diào)整后的語(yǔ)音識(shí)別模型滿足預(yù)設(shè)的訓(xùn)練終止條件時(shí),輸出所述調(diào)整后的語(yǔ)音識(shí)別模型;
28、當(dāng)調(diào)整后的語(yǔ)音識(shí)別模型不滿足預(yù)設(shè)的訓(xùn)練終止條件時(shí),基于所述調(diào)整后的語(yǔ)音識(shí)別模型進(jìn)行迭代訓(xùn)練。
29、可選地,還包括:
30、當(dāng)所述期望指令類型為端側(cè)指令類型時(shí),確定所述樣本文本指令對(duì)應(yīng)的期望詞槽文本;
31、將所述樣本文本指令輸入預(yù)設(shè)的初始語(yǔ)音識(shí)別模型進(jìn)行詞槽文本預(yù)測(cè),得到所述樣本文本指令對(duì)應(yīng)的預(yù)測(cè)詞槽文本;
32、基于所述期望詞槽文本和所述預(yù)測(cè)詞槽文本確定預(yù)設(shè)第二損失函數(shù)的第二損失函數(shù)值;
33、其中,所述依照所述第一損失函數(shù)值對(duì)所述初始語(yǔ)音識(shí)別模型的模型參數(shù)進(jìn)行調(diào)整,包括:
34、獲取所述第一損失函數(shù)值的第一權(quán)重?cái)?shù)據(jù)和所述第二損失函數(shù)值得第二權(quán)重?cái)?shù)據(jù),所述第一權(quán)重?cái)?shù)據(jù)和所述第二權(quán)重?cái)?shù)據(jù)相加為1;
35、采用所述第一權(quán)重?cái)?shù)據(jù)和所述第二權(quán)重?cái)?shù)據(jù)分別所述第一損失函數(shù)值和所述第二損失函數(shù)值進(jìn)行加權(quán)求和,得到目標(biāo)損失函數(shù)值;
36、基于所述目標(biāo)損失函數(shù)值對(duì)所述初始語(yǔ)音識(shí)別模型的模型參數(shù)進(jìn)行調(diào)整。
37、一種語(yǔ)音指令處理裝置,所述裝置包括:
38、目標(biāo)文本指令生成模塊,用于在目標(biāo)車輛的語(yǔ)音助手處于喚醒狀態(tài)時(shí),若所述語(yǔ)音助手檢測(cè)到目標(biāo)語(yǔ)音指令,則將所述目標(biāo)語(yǔ)音指令轉(zhuǎn)換為目標(biāo)文本指令;
39、指令分類模塊,用于將所述目標(biāo)文本指令輸入所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型,輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型;
40、車輛控制指令生成模塊,用于調(diào)用所述目標(biāo)指令類型對(duì)應(yīng)的目標(biāo)語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令,所述目標(biāo)語(yǔ)音識(shí)別處理模型基于輸入的目標(biāo)文本指令輸出所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令;
41、車輛控制模塊,用于依照所述車輛控制指令控制所述目標(biāo)車輛。
42、一種電子設(shè)備,包括處理器、存儲(chǔ)器及存儲(chǔ)在所述存儲(chǔ)器上并能夠在所述處理器上運(yùn)行的計(jì)算機(jī)程序,所述計(jì)算機(jī)程序被所述處理器執(zhí)行時(shí)實(shí)現(xiàn)如上所述語(yǔ)音指令處理方法。
43、一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上存儲(chǔ)計(jì)算機(jī)程序,所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如上所述語(yǔ)音指令處理方法。
44、本專利技術(shù)實(shí)施例具有以下優(yōu)點(diǎn):
45、在目標(biāo)車輛的語(yǔ)音助手處于喚醒狀態(tài)時(shí),若所述語(yǔ)音助手檢測(cè)到目標(biāo)語(yǔ)音指令,則將所述目標(biāo)語(yǔ)音指令轉(zhuǎn)換為目標(biāo)文本指令;將所述目標(biāo)文本指令輸入所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型,輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型;調(diào)用所述目標(biāo)指令類型對(duì)應(yīng)的語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令;依照所述車輛控制指令控制所述本文檔來自技高網(wǎng)...
【技術(shù)保護(hù)點(diǎn)】
1.一種語(yǔ)音指令處理方法,其特征在于,所述方法包括:
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述將所述目標(biāo)文本指令輸入所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型,輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型,包括:
3.根據(jù)權(quán)利要求2所述的方法,其特征在于,所述基于所述多個(gè)分詞數(shù)據(jù)輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型,包括:
4.根據(jù)權(quán)利要求1至3中任一項(xiàng)所述的方法,其特征在于,所述目標(biāo)語(yǔ)音識(shí)別處理模塊包括所述目標(biāo)車輛部署的第一語(yǔ)音識(shí)別處理模型和云端部署的第二語(yǔ)音識(shí)別處理模型,所述調(diào)用所述目標(biāo)指令類型對(duì)應(yīng)的目標(biāo)語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令,包括:
5.根據(jù)權(quán)利要求4所述的方法,其特征在于,所述調(diào)用所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令,包括:
6.根據(jù)權(quán)利要求1至3中任一項(xiàng)所述的方法,其特征在于,所述第一語(yǔ)音識(shí)別處理模型的訓(xùn)練過程包括:
7.根據(jù)權(quán)利要求6所述的方法,其特征在于,還包括:
8.一種語(yǔ)音指令處理裝置,其特征在于,所述裝置
9.一種電子設(shè)備,其特征在于,包括處理器、存儲(chǔ)器及存儲(chǔ)在所述存儲(chǔ)器上并能夠在所述處理器上運(yùn)行的計(jì)算機(jī)程序,所述計(jì)算機(jī)程序被所述處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至7中任一項(xiàng)所述語(yǔ)音指令處理方法。
10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),其特征在于,所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上存儲(chǔ)計(jì)算機(jī)程序,所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至7中任一項(xiàng)所述語(yǔ)音指令處理方法。
...【技術(shù)特征摘要】
1.一種語(yǔ)音指令處理方法,其特征在于,所述方法包括:
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述將所述目標(biāo)文本指令輸入所述目標(biāo)車輛內(nèi)部署的第一語(yǔ)音識(shí)別處理模型,輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型,包括:
3.根據(jù)權(quán)利要求2所述的方法,其特征在于,所述基于所述多個(gè)分詞數(shù)據(jù)輸出所述目標(biāo)文本指令對(duì)應(yīng)的目標(biāo)指令類型,包括:
4.根據(jù)權(quán)利要求1至3中任一項(xiàng)所述的方法,其特征在于,所述目標(biāo)語(yǔ)音識(shí)別處理模塊包括所述目標(biāo)車輛部署的第一語(yǔ)音識(shí)別處理模型和云端部署的第二語(yǔ)音識(shí)別處理模型,所述調(diào)用所述目標(biāo)指令類型對(duì)應(yīng)的目標(biāo)語(yǔ)音識(shí)別處理模型確定所述目標(biāo)文本指令對(duì)應(yīng)的車輛控制指令,包括:
5.根據(jù)權(quán)利要求4所述的方法,其特征在于,所述調(diào)用所述目標(biāo)車輛...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員:智緒達(dá),何浩,黃勇波,文懌男,
申請(qǐng)(專利權(quán))人:賽力斯汽車有限公司,
類型:發(fā)明
國(guó)別省市:
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。