System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本申請涉及計算機領域,特別是涉及一種金融數據處理方法及系統。
技術介紹
1、目前,隨著計算機和人工智能(artificial?intelligence,ai)技術的不斷發展,越來越多行業或領域開始使用ai模型對相關數據進行分析、建模或者應用,以提高數據處理過程的效率和質量。例如,應用于金融行業,對于信貸領域、反洗錢領域、內控合規領域等不同領域產生的大量業務數據,金融機構可以使用ai模型對業務數據進行分析、建模或者應用,從而有效提高業務數據處理的效果。
2、一般地,ai模型的質量會對數據處理的效果產生影響。通常情況下,ai模型訓練的數據規模越大,數據覆蓋范圍越全面,則ai模型的質量往往越佳,進而數據處理過程的泛用性往往越強,魯棒性往往越高,處理結果也往往越精準。例如,隨著經濟全球化的發展,金融機構可以對境內外分支機構產生的業務數據進行整合,并利用整合后的數據規模更大的業務數據進行ai模型的訓練,從而有效了提高數據分析過程的泛用性、魯棒性及準確性,避免了利用部分境內數據或部分境外數據獨立進行ai模型訓練時的局限性。
3、不過,在金融機構整合境內外分支機構產生的業務數據以進行ai模型訓練時,部分分支機構所屬的國家或地區可能會出于數據主權、隱私保護或法規約束等因素限制業務數據的傳輸。例如,于2016年通過的gdpr(general?data?protection?regulation)條例,嚴格規范了所有涉及處理歐盟公民個人數據的組織的行為,由此極大限制了業務數據的傳輸過程。
4、實際應用時,金融機構
技術實現思路
1、本申請實施例提供了一種金融數據處理方法,以避免分支機構的金融訓練數據在模型訓練過程中存在的傳輸受限問題。除此之外,本申請實施例還提供對應的金融數據處理系統。
2、第一方面,本申請實施例提供了一種金融數據處理方法,該方法應用于金融數據處理系統,所述金融數據處理系統包括:部署在金融機構的中心節點、部署在第一分支機構的第一邊緣節點和部署在第二分支機構的第二邊緣節點,所述第一分支機構和所述第二分支機構為所述金融機構的境外的分支機構,所述中心節點和所述第一邊緣節點、第二邊緣節點之間建立即時通信連接,并且,所述第一分支機構的金融訓練數據和所述第二分支機構的金融訓練數據被限制傳輸至所述金融機構或所述金融機構其他的分支機構;所述方法包括:所述中心節點向所述第一邊緣節點和所述第二邊緣節點發送訓練指示,所述訓練指示用于指示所述第一邊緣節點和所述第二邊緣節點對模型進行本地訓練;所述第一邊緣節點根據所述第一分支機構的金融訓練數據對所述模型進行本地訓練,得到第一模型參數,所述第二邊緣節點根據所述第二分支機構的金融訓練數據對所述模型進行本地訓練,得到第二模型參數;所述第一邊緣節點通過所述即時通信連接將所述第一模型參數發送給所述中心節點,所述第二邊緣節點通過所述即時通信連接將所述第二模型參數發送給所述中心節點;所述中心節點根據所述第一模型參數和所述第二模型參數進行模型參數聚合,得到聚合模型參數;所述第一邊緣節點接收由所述中心節點發送的所述聚合模型參數;所述第一邊緣節點根據所述聚合模型參數更新所述模型,得到聚合模型;所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務。
3、在一種可能的實施方式中,所述中心節點根據所述第一模型參數和所述第二模型參數進行模型參數聚合,得到聚合模型參數,包括:所述中心節點確定所述第一模型參數的權重值和所述第二模型參數的權重值,所述第一模型參數的權重值和所述第一分支機構的金融訓練數據的數據量呈正相關,所述第二模型參數的權重值和所述第二分支機構的金融訓練數據的數據量呈正相關;所述中心節點根據所述第一模型參數、所述第二模型參數、所述第一模型參數的權重值和所述第二模型參數的權重值進行模型參數聚合,得到所述聚合模型參數。
4、在一種可能的實施方式中,所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務,包括:所述第一邊緣節點根據所述第一分支機構的金融訓練數據對所述聚合模型進行本地訓練,得到第三模型參數;所述第一邊緣節點根據所述第三模型參數更新所述聚合模型,得到個性化模型;所述第一邊緣節點根據所述個性化模型,執行針對所述第一分支機構的金融任務數據的計算任務。
5、在一種可能的實施方式中,所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務,包括:所述第一邊緣節點確定所述聚合模型的收斂狀態;當所述收斂狀態滿足收斂條件,所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務。
6、在一種可能的實施方式中,所述中心節點根據所述第一模型參數和所述第二模型參數進行模型參數聚合之前,所述方法還包括:所述中心節點根據所述金融機構的金融訓練數據對所述模型進行本地訓練,得到第四模型參數,所述金融機構的金融訓練數據被限制傳輸至所述金融機構其他的分支機構;所述中心節點根據所述第一模型參數和所述第二模型參數進行模型參數聚合,得到聚合模型參數,包括:所述中心節點根據所述第一模型參數、所述第二模型參數和所述第四模型參數進行模型參數聚合,得到所述聚合模型參數。
7、在一種可能的實施方式中,所述中心節點向所述第一邊緣節點和所述第二邊緣節點發送訓練指示,包括:所述中心節點確定所述第一邊緣節點和所述第二邊緣節點是否滿足訓練條件,所述訓練條件包括邊緣節點所屬的分支機構的金融訓練數據的數據量滿足數據量范圍;當所述第一邊緣節點和所述第二邊緣節點滿足所述訓練條件,所述中心節點向所述第一邊緣節點和所述第二邊緣節點發送所述訓練指示。
8、在一種可能的實施方式中,所述方法還包括:所述中心節點根據所述聚合模型參數更新所述模型,得到所述聚合模型;所述中心節點根據所述聚合模型,執行針對所述金融機構的金融任務數據的計算任務。
9、在一種可能的實施方式中,所述第一分支機構的金融任務數據為所述第一分支機構的內控合規數據,所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務,包括:所述第一邊緣節點根據部署在所述第一分支機構的數據庫,獲取所述第一分支機構的內控合規數據;所述第一邊緣節點利用所述聚合模型解析所述第一分支機構的內控合規數據,得到所述第一分支機構的多個內控合規標簽。
10、本文檔來自技高網...
【技術保護點】
1.一種金融數據處理方法,其特征在于,所述方法應用于金融數據處理系統,所述金融數據處理系統包括:部署在金融機構的中心節點、部署在第一分支機構的第一邊緣節點和部署在第二分支機構的第二邊緣節點,所述第一分支機構和所述第二分支機構為所述金融機構的境外的分支機構,所述中心節點和所述第一邊緣節點、第二邊緣節點之間建立即時通信連接,并且,所述第一分支機構的金融訓練數據和所述第二分支機構的金融訓練數據被限制傳輸至所述金融機構或所述金融機構其他的分支機構;
2.根據權利要求1所述的方法,其特征在于,所述中心節點根據所述第一模型參數和所述第二模型參數進行模型參數聚合,得到聚合模型參數,包括:
3.根據權利要求1所述的方法,其特征在于,所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務,包括:
4.根據權利要求1所述的方法,其特征在于,所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務,包括:
5.根據權利要求1所述的方法,其特征在于,所述中心節點根據所述第一模型參數和所述第二模型參數進行
6.根據權利要求1所述的方法,其特征在于,所述中心節點向所述第一邊緣節點和所述第二邊緣節點發送訓練指示,包括:
7.根據權利要求1所述的方法,其特征在于,所述方法還包括:
8.根據權利要求1所述的方法,其特征在于,所述第一分支機構的金融任務數據為所述第一分支機構的內控合規數據,所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務,包括:
9.根據權利要求8所述的方法,其特征在于,所述方法還包括:
10.一種金融數據處理系統,其特征在于,所述系統包括:部署在金融機構的中心節點、部署在第一分支機構的第一邊緣節點和部署在第二分支機構的第二邊緣節點,所述第一分支機構和所述第二分支機構為所述金融機構的境外的分支機構,所述中心節點和所述第一邊緣節點、第二邊緣節點之間建立即時通信連接,并且,所述第一分支機構的金融訓練數據和所述第二分支機構的金融訓練數據被限制傳輸至所述金融機構或所述金融機構其他的分支機構;
...【技術特征摘要】
1.一種金融數據處理方法,其特征在于,所述方法應用于金融數據處理系統,所述金融數據處理系統包括:部署在金融機構的中心節點、部署在第一分支機構的第一邊緣節點和部署在第二分支機構的第二邊緣節點,所述第一分支機構和所述第二分支機構為所述金融機構的境外的分支機構,所述中心節點和所述第一邊緣節點、第二邊緣節點之間建立即時通信連接,并且,所述第一分支機構的金融訓練數據和所述第二分支機構的金融訓練數據被限制傳輸至所述金融機構或所述金融機構其他的分支機構;
2.根據權利要求1所述的方法,其特征在于,所述中心節點根據所述第一模型參數和所述第二模型參數進行模型參數聚合,得到聚合模型參數,包括:
3.根據權利要求1所述的方法,其特征在于,所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務,包括:
4.根據權利要求1所述的方法,其特征在于,所述第一邊緣節點根據所述聚合模型,執行針對所述第一分支機構的金融任務數據的計算任務,包括:
5.根據權利要求1所述的方法,其特征在于,所述中心節點根據所述第...
【專利技術屬性】
技術研發人員:別勇,劉暢,
申請(專利權)人:中國農業銀行股份有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。