System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本公開涉及計算機,具體涉及模型評測的標注方法、裝置、設備、存儲介質及程序產品。
技術介紹
1、評測標注作為模型效果評測中不可或缺的重要環節,需要評測技術人員能夠針對具體評測內容進行標注,以便高效地共享和利用這些評測標注信息進行模型的調整。目前,主要是利用excel表將評測題目、評測結果、標準答案等信息進行匯總,標注人員則需要匯總標注結果,根據匯總內容進行歸類整理。然而,不同的標注人員,對于相同的錯誤類型,其標注手法千變萬化,難以統一,這就使得后期匯總將會耗費較多時間,導致模型評測效率較低,從而影響了模型的迭代效率。
技術實現思路
1、有鑒于此,本公開提供了一種模型評測的標注方法、裝置、設備、存儲介質及程序產品,以解決模型評測效率較低的問題。
2、第一方面,本公開提供了一種模型評測的標注方法,包括:獲取待評測模型的標注模板以及評測策略,將標注模板綁定至評測策略;若觸發評測策略對應的評測任務時,展示評測任務的評測界面,評測界面包括至少一個評測項;響應于針對至少一個評測項的標注操作,生成評測任務對應的評測標注內容。
3、第二方面,本公開提供了一種模型評測的標注裝置,包括:獲取模塊,用于獲取待評測模型的標注模板以及評測策略,將標注模板綁定至評測策略;評測展示模塊,用于若觸發評測策略對應的評測任務時,展示評測任務的評測界面,評測界面包括至少一個評測項;標注模塊,用于響應于針對至少一個評測項的標注操作,生成評測任務對應的評測標注內容。
4、第三方面,本公開提
5、第四方面,本公開提供了一種計算機可讀存儲介質,該計算機可讀存儲介質上存儲有計算機指令,計算機指令用于使計算機執行上述第一方面或其對應的任一實施方式的模型評測的標注方法。
6、第五方面,本公開提供了一種計算機程序產品,包括計算機指令,計算機指令用于使計算機執行上述第一方面或其對應的任一實施方式的模型評測的標注方法。
7、本公開實施例提供的模型評測的標注方法、裝置、設備、存儲介質及程序產品,通過獲取待評測模型的標注模板和評測策略,將評測策略與標注模板進行綁定,在執行評測任務時,結合評測策略中的標注模板展示相應的評測界面,由此評測技術人員則可以根據評測界面所展示的標注模板的評測項對模型進行評測標注,實現了針對待評測模型的規范標注,避免了評測技術人員各自建立標準而導致評測結果難以統一。通過統一的標注規范,便于根據評測標注內容快速確定待評測模型的評測結論,提升了模型評測標注效率,從而提升了模型的迭代效率。
本文檔來自技高網...【技術保護點】
1.一種模型評測的標注方法,其特征在于,所述方法包括:
2.根據權利要求1所述的方法,其特征在于,獲取待評測模型的標注模板,包括:
3.根據權利要求2所述的方法,其特征在于,還包括:
4.根據權利要求1或2所述的方法,其特征在于,獲取待評測模型的評測策略,包括:
5.根據權利要求4所述的方法,其特征在于,所述將所述標注模板綁定至所述評測策略,包括:
6.根據權利要求1所述的方法,其特征在于,所述若觸發所述評測策略對應的評測任務時,展示所述評測任務的評測界面,包括:
7.根據權利要求6所述的方法,其特征在于,所述響應于針對所述至少一個評測項的標注操作,生成所述評測任務對應的評測標注內容,包括:
8.根據權利要求7所述的方法,其特征在于,還包括:
9.根據權利要求1所述的方法,其特征在于,還包括:
10.一種模型評測的標注裝置,其特征在于,所述裝置包括:
11.一種計算機設備,其特征在于,包括:
12.一種計算機可讀存儲介質,其特征在于,所述計算機可讀存
13.一種計算機程序產品,其特征在于,包括計算機指令,所述計算機指令用于使計算機執行權利要求1至9中任一項所述的模型評測的標注方法。
...【技術特征摘要】
1.一種模型評測的標注方法,其特征在于,所述方法包括:
2.根據權利要求1所述的方法,其特征在于,獲取待評測模型的標注模板,包括:
3.根據權利要求2所述的方法,其特征在于,還包括:
4.根據權利要求1或2所述的方法,其特征在于,獲取待評測模型的評測策略,包括:
5.根據權利要求4所述的方法,其特征在于,所述將所述標注模板綁定至所述評測策略,包括:
6.根據權利要求1所述的方法,其特征在于,所述若觸發所述評測策略對應的評測任務時,展示所述評測任務的評測界面,包括:
7.根據權利要求6所述的方法,其特征在于,所述響應于針對所述至少一個評測項的標注...
【專利技術屬性】
技術研發人員:劉柏纓,廖敏,趙楠,李英杰,高秀芳,田志龍,尹小明,張曉亮,
申請(專利權)人:北京火山引擎科技有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。