System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本專利技術涉及計算機,尤其涉及一種數據裝載方法、裝置、電子設備、存儲介質和程序產品。
技術介紹
1、在數據庫系統中,經常會遇到有大批量數據導入的需求,這些數據往往會存在于不同的機器中,且這些數據經常需要分別在不同機器上啟動不同的進程來向數據庫系統做導入,因此無法避免地會出現同時多個裝載進程同時向同一張數據表裝載數據的場景,而數據庫系統只能通過上鎖的形式來保證同一時間只有一個裝載命令在執行,避免多個裝載命令同時操作出現沖突引發錯亂的情況。
2、但上鎖的形式存在兩個問題:并行狀態下,一個進程對表上鎖成功,其他進程就必須處于等待且爭搶狀態,容易引起諸如死鎖,鎖超時等諸多問題,導致部分裝載進程失敗,從而無法進行裝載;且上鎖的形式無法保證不同裝載進程的數據在裝載保持順序裝載。
技術實現思路
1、本專利技術提供了一種數據裝載方法、裝置、電子設備、存儲介質和程序產品,以實現裝載任務的順序執行,并提高裝載進程處理能力。
2、根據本專利技術的一方面,提供了一種數據裝載方法,包括:
3、獲取裝載表信息,所述裝載表信息指示數據所需裝載的數據表;
4、將所述裝載表信息所對應的裝載任務,添加至所述裝載表信息所對應的目標隊列中,所述裝載任務為將所對應數據裝載至所對應數據表中的任務;
5、確定所述裝載任務在所述目標隊列中的位置信息;
6、根據所述位置信息,處理所述裝載任務。
7、根據本專利技術的另一方面,提供了一種數據裝載裝置,
8、獲取模塊,用于獲取裝載表信息,所述裝載表信息指示數據所需裝載的數據表;
9、添加模塊,用于將所述裝載表信息所對應的裝載任務,添加至所述裝載表信息所對應的目標隊列中,所述裝載任務為將所對應數據裝載至所對應數據表中的任務;
10、確定模塊,用于確定所述裝載任務在所述目標隊列中的位置信息;
11、處理模塊,用于根據所述位置信息,處理所述裝載任務。
12、根據本專利技術的另一方面,提供了一種電子設備,所述電子設備包括:
13、至少一個處理器;以及
14、與所述至少一個處理器通信連接的存儲器;其中,
15、所述存儲器存儲有可被所述至少一個處理器執行的計算機程序,所述計算機程序被所述至少一個處理器執行,以使所述至少一個處理器能夠執行本專利技術任一實施例所述的數據裝載方法。
16、根據本專利技術的另一方面,提供了一種計算機可讀存儲介質,所述計算機可讀存儲介質存儲有計算機指令,所述計算機指令用于使處理器執行時實現本專利技術任一實施例所述的數據裝載方法。
17、根據本專利技術的另一方面,提供了一種計算機程序產品,所述計算機程序產品包括計算機程序,所述計算機程序在被處理器執行時實現本專利技術任一實施例所述的數據裝載方法。
18、本專利技術實施例的技術方案,通過獲取裝載表信息,并將裝載表信息所對應的裝載任務添加至裝載表信息所對應的目標隊列中,而裝載任務為將所對應數據裝載至所對應數據表中的任務,接著確定裝載任務在目標隊列中的位置信息,最后根據位置信息,處理裝載任務。本專利技術通過將裝載任務添加至目標隊列中,并根據裝載任務在目標隊列中的位置信息處理裝載任務,通過引入目標隊列實現了裝載任務的順序執行,提高了數據庫的裝載進程處理能力。
19、應當理解,本部分所描述的內容并非旨在標識本專利技術的實施例的關鍵或重要特征,也不用于限制本專利技術的范圍。本專利技術的其它特征將通過以下的說明書而變得容易理解。
本文檔來自技高網...【技術保護點】
1.一種數據裝載方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,所述獲取裝載表信息,包括:
3.根據權利要求1所述的方法,其特征在于,所述將所述裝載表信息所對應的裝載任務,添加至所述裝載表信息所對應的目標隊列中,包括:
4.根據權利要求3所述的方法,其特征在于,所述目標隊列包括哈希鏈表隊列,所述裝載表信息所對應的目標隊列包括目標哈希值所對應的隊列,所述目標哈希值為所述裝載表信息所對應的哈希值。
5.根據權利要求1所述的方法,其特征在于,所述根據所述位置信息,處理所述裝載任務,包括:
6.根據權利要求1所述的方法,其特征在于,還包括:
7.根據權利要求1所述的方法,其特征在于,還包括:
8.一種數據裝載裝置,其特征在于,包括:
9.一種電子設備,其特征在于,所述電子設備包括:
10.一種計算機可讀存儲介質,其特征在于,所述計算機可讀存儲介質存儲有計算機指令,所述計算機指令用于使處理器執行時實現權利要求1-7中任一項所述的數據裝載方法。
11.一
...【技術特征摘要】
1.一種數據裝載方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,所述獲取裝載表信息,包括:
3.根據權利要求1所述的方法,其特征在于,所述將所述裝載表信息所對應的裝載任務,添加至所述裝載表信息所對應的目標隊列中,包括:
4.根據權利要求3所述的方法,其特征在于,所述目標隊列包括哈希鏈表隊列,所述裝載表信息所對應的目標隊列包括目標哈希值所對應的隊列,所述目標哈希值為所述裝載表信息所對應的哈希值。
5.根據權利要求1所述的方法,其特征在于,所述根據所述位置信息,處理所述裝載任務,包括:
6...
【專利技術屬性】
技術研發人員:郭琰,于海漩,韓朱忠,
申請(專利權)人:上海達夢數據庫有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。