System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本申請涉及自然語言處理,尤其涉及一種文本摘要的生成方法、裝置、電子設備及存儲介質。
技術介紹
1、隨著大數據時代的來臨,處理和總結大量文本的需求大幅增加。大型語言模型(large?language?model,llm)因其出色的語言理解和生成能力,已被廣泛應用于自動文本摘要。然而,llm在處理大規模輸入時存在局限性,導致生成的摘要結果不夠準確。
技術實現思路
1、有鑒于此,本申請提供了一種文本摘要的生成方法、裝置、電子設備及存儲介質,以解決現有技術中摘要結果不夠準確的問題。
2、本申請的第一方面,提供了一種文本摘要的生成方法,包括:對待處理文本進行文本提取得到多個子文本,并從多個子文本中確定出一個主文本和至少一個副文本;對主文本進行摘要提取,得到主摘要,對每一副文本進行摘要提取,得到每一副文本對應的副摘要;根據每一副摘要對主摘要進行增量更新,得到待處理文本對應的目標摘要。
3、本申請的第二方面,提供了一種文本摘要的生成裝置,包括:文本提取模塊,被配置為對待處理文本進行文本提取得到多個子文本,并從多個子文本中確定出一個主文本和至少一個副文本;摘要提取模塊,被配置為對主文本進行摘要提取,得到主摘要,對每一副文本進行摘要提取,得到每一副文本對應的副摘要;摘要更新模塊,被配置為根據每一副摘要對主摘要進行增量更新,得到待處理文本對應的目標摘要。
4、本申請的第三方面,提供了一種電子設備,包括存儲器、處理器以及存儲在存儲器中并且可在處理器上運行的計算機程序,
5、本申請的第四方面,提供了一種存儲介質,該存儲介質存儲有計算機程序,該計算機程序被處理器執行時實現上述方法的步驟。
6、本申請采用的上述至少一個技術方案能夠達到以下有益效果:
7、通過對待處理文本進行提取,得到多個子文本,并從這些子文本中確定出一個主文本和至少一個副文本,對主文本進行摘要提取,得到主摘要,對每個副文本進行摘要提取,得到對應的副摘要,根據每個副摘要對主摘要進行增量更新,將副摘要中的新信息整合進主摘要中,最終通過增量更新后的主摘要包含所有子文本的主要信息,即得到待處理文本對應的目標摘要,這樣可以有效的將長文本轉變成多個信息源,并將多個信息源的關鍵信息進行整合和增量更新,得到目標摘要,避免了傳統摘要生成中模型令牌限制導致信息整合不完全的問題,還通過增量更新提升了目標摘要的準確性和相關性。
本文檔來自技高網...【技術保護點】
1.一種文本摘要的生成方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,所述對待處理文本進行文本提取得到多個子文本,包括:
3.根據權利要求1所述的方法,其特征在于,所述對所述主文本進行摘要提取,得到主摘要,包括:
4.根據權利要求3所述的方法,其特征在于,所述摘要結構包括鍵值對結構,所述根據每一所述副摘要對所述主摘要進行增量更新,得到所述待處理文本對應的目標摘要,包括:
5.根據權利要求4所述的方法,其特征在于,所述鍵值對數據包括鍵和值,所述根據所述副摘要中的鍵值對數據,對所述主摘要中的鍵值對數據進行增量更新,得到所述目標摘要,包括:
6.根據權利要求2所述的方法,其特征在于,在所述對待處理文本進行文本提取得到多個子文本之前,還包括:
7.根據權利要求6所述的方法,其特征在于,所述基于所述參考摘要和所述評估摘要對所述訓練前的所述大語言模型進行訓練,得到所述大語言模型,包括:
8.一種文本摘要的生成裝置,其特征在于,包括:
9.一種電子設備,包括存儲器、處理器以及存儲
10.一種存儲介質,所述存儲介質存儲有計算機程序,其特征在于,所述計算機程序被處理器執行時實現如權利要求1至7中任一項所述方法的步驟。
...【技術特征摘要】
1.一種文本摘要的生成方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,所述對待處理文本進行文本提取得到多個子文本,包括:
3.根據權利要求1所述的方法,其特征在于,所述對所述主文本進行摘要提取,得到主摘要,包括:
4.根據權利要求3所述的方法,其特征在于,所述摘要結構包括鍵值對結構,所述根據每一所述副摘要對所述主摘要進行增量更新,得到所述待處理文本對應的目標摘要,包括:
5.根據權利要求4所述的方法,其特征在于,所述鍵值對數據包括鍵和值,所述根據所述副摘要中的鍵值對數據,對所述主摘要中的鍵值對數據進行增量更新,得到所述目標摘要,包括:
6.根據權利要求2...
【專利技術屬性】
技術研發人員:劉歡,
申請(專利權)人:深圳須彌云圖空間科技有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。