用于評測會話機器人智能的方法及設備技術

本發明專利技術的實施方式提供了一種用于評測會話機器人智能的方法。該用于評測會話機器人智能的方法包括：根據會話機器人的配置信息確定配置指標的配置質量；其中，上述配置指標包括：表達配置信息的表達方式、意圖配置信息的意圖設置、表達配置信息的實體標注及表達配置信息的服務觸發中的至少一個。本發明專利技術的實施方式通過設置衡量會話機器人的智能程度的配置指標，使本發明專利技術可以基于會話機器人的配置信息客觀的認知會話機器人的智能水平，從而有利于提升會話機器人的智能水平。此外，本發明專利技術的實施方式還提供了一種用于評測會話機器人智能的設備以及計算機可讀存儲介質。

【技術實現步驟摘要】
用于評測會話機器人智能的方法及設備
本專利技術的實施方式涉及機器人領域，更具體地，本專利技術的實施方式涉及用于評測會話機器人智能的方法、用于評測會話機器人智能的設備以及計算機可讀存儲介質。
技術介紹
本部分旨在為權利要求書中陳述的本專利技術的實施方式提供背景或者上下文。此處的描述不因為包括在本部分中就承認是現有技術。會話機器人可以通過識別用戶的意圖而為用戶提供相應的服務，如會話機器人根據用戶的意圖為用戶提供音樂播放服務以及問題解答服務等。目前，已經出現了會話機器人開發平臺，會話機器人開發者可以通過在會話機器人開發平臺上進行相應的信息配置從而方便快捷的生成會話機器人；利用會話機器人開發平臺所生成的會話機器人的智能水平在很大程度上依賴于會話機器人開發者的技能，如何對會話機器人的智能水平進行客觀的認知，以便于提升會話機器人的智能水平，是一個值得關注的技術問題。
技術實現思路
但是，出于目前會話機器人的開發過程與開發者的開發習慣以及主觀認知等相關，且現有技術并未存在一種對會話機器人的智能水平進行客觀評測的技術方案等原因，使會話機器人的智能水平依賴于開發者的開發水平，從而使不同的會話機器人的智能水平存在較大差異。因此在現有技術中，會話機器人的智能水平無法被客觀的認知，且這種狀況不利于提升會話機器人的智能水平，這是非常令人煩惱的過程。為此，非常需要一種現實且便捷可行的用于評測會話機器人智能的技術方案，以使會話機器人的智能水平能夠被會話機器人的開發者等相關人員客觀認知，以對會話機器人的智能水平進行相應的提升。在本上下文中，本專利技術的實施方式期望提供一種用于評測會話機器人智能的方法、設備以及計算機可讀存儲介質。在本專利技術實施方式的第一方面中，提供了一種用于評測會話機器人智能的方法，該方法包括：根據會話機器人的配置信息確定配置指標的配置質量；其中，所述配置指標包括：表達配置信息的表達方式、意圖配置信息的意圖設置、表達配置信息的實體標注、表達配置信息的服務觸發中的至少一個。在本專利技術的一個實施例中，該根據會話機器人的配置信息確定配置指標的配置質量的步驟包括：根據會話機器人的配置信息中對應同一意圖的不同表達之間的差異度確定會話機器人的表達配置信息的表達方式的配置質量；和/或，根據會話機器人的配置信息中包含有無關表達詞集合中的無關表達詞的表達確定會話機器人的表達配置信息的表達方式的配置質量；和/或，根據會話機器人的配置信息中的各表達長度確定會話機器人的表達配置信息的表達方式的配置質量。在本專利技術的另一實施例中，該根據會話機器人的配置信息確定配置指標的配置質量的步驟包括：根據會話機器人的配置信息中的意圖與其對應的表達之間的相似度確定會話機器人的意圖配置信息的意圖設置的配置質量；和/或，根據會話機器人的配置信息中的對應不同意圖的表達之間的相似度確定會話機器人的意圖配置信息的意圖設置的配置質量。在本專利技術的又一個實施例中，該根據會話機器人的配置信息確定配置指標的配置質量的步驟包括：根據會話機器人的配置信息中的表達實體標注的正確程度確定會話機器人的表達配置信息的實體標注的配置質量；和/或，根據會話機器人的配置信息中的表達實體標注的數量確定會話機器人的表達配置信息的實體標注的配置質量。在本專利技術的再一個實施例中，該根據會話機器人的配置信息確定配置指標的配置質量的步驟包括：根據會話機器人的配置信息中未曾觸發服務的表達配置信息確定會話機器人的表達配置信息的服務觸發的配置質量。在本專利技術的再一個實施例中，該方法還包括步驟：針對降低配置指標的配置質量的配置信息，產生并輸出配置信息存在的配置問題的提示信息。在本專利技術的再一個實施例中，該所述方法還包括下述步驟：針對降低配置指標的配置質量的配置信息從配置信息集合中選取不降低配置指標的配置質量的配置信息，并將所述選取的配置信息作為用于更新所述降低配置指標的配置質量的配置信息的選項輸出；在接收到針對所述選項的更新確認信息后，根據所述更新確認信息對應的選項對所述降低配置指標的配置質量的配置信息進行維護。在本專利技術實施方式的第二方面中，提供了一種用于評測會話機器人智能的設備，包括：確定配置質量模塊，配置用于根據會話機器人的配置信息確定配置指標的配置質量；其中，所述配置指標包括：表達配置信息的表達方式、意圖配置信息的意圖設置、表達配置信息的實體標注、表達配置信息的服務觸發中的至少一個。在本專利技術的一個實施例中，該確定配置質量模塊包括：第一質量子模塊，配置用于根據會話機器人的配置信息中對應同一意圖的不同表達之間的差異度確定會話機器人的表達配置信息的表達方式的配置質量；和/或，第二質量子模塊，配置用于根據會話機器人的配置信息中包含有無關表達詞集合中的無關表達詞的表達確定會話機器人的表達配置信息的表達方式的配置質量；和/或，第三質量子模塊，配置用于根據會話機器人的配置信息中的各表達長度確定會話機器人的表達配置信息的表達方式的配置質量。在本專利技術的一個實施例中，該確定配置質量模塊包括：第四質量子模塊，配置用于根據會話機器人的配置信息中的意圖與其對應的表達之間的相似度確定會話機器人的意圖配置信息的意圖設置的配置質量；和/或，第五質量子模塊，配置用于根據會話機器人的配置信息中的對應不同意圖的表達之間的相似度確定會話機器人的意圖配置信息的意圖設置的配置質量。在本專利技術的一個實施例中，該確定配置質量模塊包括：第六質量子模塊，配置用于根據會話機器人的配置信息中的表達實體標注的正確程度確定會話機器人的表達配置信息的實體標注的配置質量；和/或，第七質量子模塊，配置用于根據會話機器人的配置信息中的表達實體標注的數量確定會話機器人的表達配置信息的實體標注的配置質量。在本專利技術的一個實施例中，該所述確定配置質量模塊包括：第八質量子模塊，配置用于根據會話機器人的配置信息中未曾觸發服務的表達配置信息確定會話機器人的表達配置信息的服務觸發的配置質量。在本專利技術的一個實施例中，該設備還包括：問題提示模塊，配置用于針對降低配置指標的配置質量的配置信息，產生并輸出配置信息存在的配置問題的提示信息。在本專利技術的一個實施例中，該設備還包括：優化提示模塊，配置用于針對降低配置指標的配置質量的配置信息從配置信息集合中選取不降低配置指標的配置質量的配置信息，并將所述選取的配置信息作為用于更新所述降低配置指標的配置質量的配置信息的選項輸出；優化維護模塊，配置用于在接收到針對所述選項的更新確認信息后，根據所述更新確認信息對應的選項對所述降低配置指標的配置質量的配置信息進行維護。在本專利技術實施方式的第三方面中，提供了一種計算機可讀存儲介質，其上存儲有計算機程序，該程序被處理器執行時實現下述步驟：根據會話機器人的配置信息確定配置指標的配置質量；其中，所述配置指標包括：表達配置信息的表達方式、意圖配置信息的意圖設置、表達配置信息的實體標注、表達配置信息的服務觸發中的至少一個。根據本專利技術實施方式的用于評測會話機器人智能的方法、用于評測會話機器人智能的設備以及計算機可讀存儲介質，通過將表達配置信息的表達方式、意圖配置信息的意圖設置、表達配置信息的實體標注以及表達配置信息的服務觸發中的至少一個作為衡量會話機器人的智能程度的配置指標，并確定出會話機器人的配置信息中的相關配置指標的配置質量，由于本專利技術的專利技術人本文檔來自技高網...

【技術保護點】
一種方法，包括：根據會話機器人的配置信息確定配置指標的配置質量；其中，所述配置指標包括：表達配置信息的表達方式、意圖配置信息的意圖設置、表達配置信息的實體標注、表達配置信息的服務觸發中的至少一個。

【技術特征摘要】
1.一種方法，包括：根據會話機器人的配置信息確定配置指標的配置質量；其中，所述配置指標包括：表達配置信息的表達方式、意圖配置信息的意圖設置、表達配置信息的實體標注、表達配置信息的服務觸發中的至少一個。2.如權利要求1所述的方法，所述根據會話機器人的配置信息確定配置指標的配置質量的步驟包括：根據會話機器人的配置信息中對應同一意圖的不同表達之間的差異度確定會話機器人的表達配置信息的表達方式的配置質量；和/或根據會話機器人的配置信息中包含有無關表達詞集合中的無關表達詞的表達確定會話機器人的表達配置信息的表達方式的配置質量；和/或根據會話機器人的配置信息中的各表達長度確定會話機器人的表達配置信息的表達方式的配置質量。3.如權利要求1所述的方法，所述根據會話機器人的配置信息確定配置指標的配置質量的步驟包括：根據會話機器人的配置信息中的意圖與其對應的表達之間的相似度確定會話機器人的意圖配置信息的意圖設置的配置質量；和/或根據會話機器人的配置信息中的對應不同意圖的表達之間的相似度確定會話機器人的意圖配置信息的意圖設置的配置質量。4.如權利要求1所述的方法，所述根據會話機器人的配置信息確定配置指標的配置質量的步驟包括：根據會話機器人的配置信息中的表達實體標注的正確程度確定會話機器人的表達配置信息的實體標注的配置質量；和/或根據會話機器人的配置信息中的表達實體標注的數量確定會話機器人的表達配置信息的實體標...

【專利技術屬性】
技術研發人員：劉銳，
申請(專利權)人：網易杭州網絡有限公司，
類型：發明
國別省市：浙江,33