【技術實現步驟摘要】
本專利技術涉及資源樹數據庫及數據處理，尤其涉及一種實現資源樹多線程拷貝操作方法及系統。
技術介紹
1、軟件開發及運維過程往往存在對各類數據資源進行拷貝的使用場景，特別是對于資源樹形式內容進行拷貝的場景，例如安防監控行業中的三方資源樹對接同步到本地集成平臺的應用場景，需要對包含大量資源以及資源形成的樹形結構數據進行同步。
2、現有技術中，對于資源樹的同步方式一般為從頂至底，逐級進行復制寫入。首先需要查找得到資源樹頂級節點，寫入目標庫后得到新的主鍵id查找資源樹二級節點，并補充目標pid為頂級節點主鍵id，循環遍歷寫入目標庫，再對二級節點分層級逐個寫入目標庫，得到新的主鍵id，再查找二級節點下的三級節點，并補充二級節點主鍵id，繼續循環遍歷寫入目標庫。如此方式執行往往需要耗費大量的時間，包括數據庫連接的獲取時間、數據庫數據的執行時間、樹形層級結構數據依賴關系組裝串行等待時間等，對于較大資源樹復制過程，很可能造成系統接口響應超時問題。雖然現有技術已經公開有在非關系型緩存技術(例如redis、memcache等)下，通過代碼冗余方式提高復制性能的技術方案，但仍然不能滿足大資源樹的拷貝需要。
技術實現思路
1、為解決現有技術的不足，本專利技術提出一種實現資源樹多線程拷貝操作方法及系統，通過對資源樹內容分別配置序列，實現批處理的多線程資源樹復制，提高大資源樹復制操作的時間響應性能，解決大資源樹拷貝性能低下的問題。
2、為實現以上目的，本專利技術所采用的技術方案包括：p>
3、一種實現資源樹多線程拷貝操作方法，其特征在于，包括：
4、s1、建立全局緩存和對應全局緩存的全局序列，所述全局序列為遞增序列；
5、s2、以所述全局序列作為默認主鍵規則設置目標庫主鍵id，使用源庫頂級節點數據與目標庫主鍵id拼裝為頂級節點參數并存儲入全局緩存；
6、s3、使用頂級節點參數，識別獲取源庫頂級節點數據對應的二級節點數量，依據二級節點數量在第一線程中建立對應的第一計數器；
7、s4、執行二級節點數據的拷貝操作，并開啟對應拷貝操作的第二線程，所述第二線程為第一線程下的子線程；
8、s5、判斷二級節點數據的拷貝操作是否完成，當判斷二級節點數據的拷貝操作完成時，使用第二線程操作第一計數器，將第一計數器的記錄數量減1；
9、s6、判斷第一計數器的記錄數量是否為0，當判斷第一計數器的記錄數量為0時，從全局緩存調用頂級節點參數組裝全部二級節點數據獲得拷貝數據，并將拷貝數據存儲至目標庫。
10、進一步地，所述步驟s4還包括：
11、同時執行多個不同的二級節點數據的拷貝操作，并分別開啟對應各拷貝操作的多個第二線程。
12、進一步地，所述執行二級節點數據的拷貝操作包括：
13、使用二級節點數據和作為上級標識的頂級節點id拼裝為二級節點參數并存儲入全局緩存；
14、依據二級節點參數將二級節點數據存儲至全局緩存。
15、進一步地，所述執行二級節點數據的拷貝操作還包括：
16、使用二級節點參數，識別獲取源庫二級節點數據對應的三級節點數量，依據三級節點數量在第二線程中建立對應的第二計數器；
17、同時執行多個不同的三級節點數據的拷貝操作，并依據三級節點數據的拷貝操作是否完成操作第二計數器；
18、判斷第二計數器的記錄數量是否為0，當判斷第二計數器的記錄數量為0時，確認對應二級節點數據的拷貝操作完成。
19、進一步地，所述將拷貝數據存儲至目標庫包括：
20、對拷貝數據進行分頁操作；
21、同時將多個不同分頁存儲至目標庫。
22、進一步地，所述將多個不同分頁存儲至目標庫包括：
23、依據分頁數量建立分頁計數器；
24、同時執行多個不同分頁的存儲操作，并依據分頁的存儲操作是否完成操作分頁計數器；
25、判斷分頁計數器的記錄數量是否為0，當判斷分頁計數器的記錄數量為0時，確認拷貝數據已存儲至目標庫。
26、本專利技術還涉及一種實現資源樹多線程拷貝操作系統，其特征在于，包括：
27、緩存管理模塊，用于建立并操作全局緩存和對應全局緩存的全局序列；
28、節點參數管理模塊，用于拼裝并管理節點參數；
29、計數器設置模塊，用于以及節點參數建立對應的計數器；
30、拷貝判斷模塊，用于判斷節點數據的拷貝操作是否完成；
31、計數器判斷模塊，用于判斷第一計數器的記錄數量是否為0；
32、拷貝執行模塊，用于組裝獲得拷貝數據，并將拷貝數據存儲至目標庫。
33、本專利技術還涉及一種計算機可讀存儲介質，其特征在于，所述存儲介質上存儲有計算機程序，所述計算機程序被處理器執行時實現上述的方法。
34、本專利技術還涉及一種電子設備，其特征在于，包括處理器和存儲器；
35、所述存儲器，用于存儲全局緩存和拷貝數據；
36、所述處理器，用于通過調用全局緩存和拷貝數據，執行上述的方法。
37、本專利技術還涉及一種計算機程序產品，包括計算機程序和/或指令，其特征在于，該計算機程序和/或指令被處理器執行時實現上述方法的步驟。
38、本專利技術的有益效果為：
39、采用本專利技術所述實現資源樹多線程拷貝操作方法及系統，通過對資源樹內容分別配置序列，充分利用cpu盈余性能，實現批處理的多線程資源樹復制，提高大資源樹復制操作的時間響應性能，在分頁多線程批量寫入時，可以以數量級級別提高耗時性能，解決大資源樹拷貝性能低下的問題。
本文檔來自技高網...【技術保護點】
1.一種實現資源樹多線程拷貝操作方法，其特征在于，包括：
2.如權利要求1所述的方法，其特征在于，所述步驟S4還包括：
3.如權利要求1所述的方法，其特征在于，所述執行二級節點數據的拷貝操作包括：
4.如權利要求3所述的方法，其特征在于，所述執行二級節點數據的拷貝操作還包括：
5.如權利要求1所述的方法，其特征在于，所述將拷貝數據存儲至目標庫包括：
6.如權利要求5所述的方法，其特征在于，所述將多個不同分頁存儲至目標庫包括：
7.一種實現資源樹多線程拷貝操作系統，其特征在于，包括：
8.一種計算機可讀存儲介質，其特征在于，所述存儲介質上存儲有計算機程序，所述計算機程序被處理器執行時實現權利要求1至6中任一項所述的方法。
9.一種電子設備，其特征在于，包括處理器和存儲器；
10.一種計算機程序產品，包括計算機程序和/或指令，其特征在于，該計算機程序和/或指令被處理器執行時實現權利要求1至6中任一項所述方法的步驟。
【技術特征摘要】
1.一種實現資源樹多線程拷貝操作方法，其特征在于，包括：
2.如權利要求1所述的方法，其特征在于，所述步驟s4還包括：
3.如權利要求1所述的方法，其特征在于，所述執行二級節點數據的拷貝操作包括：
4.如權利要求3所述的方法，其特征在于，所述執行二級節點數據的拷貝操作還包括：
5.如權利要求1所述的方法，其特征在于，所述將拷貝數據存儲至目標庫包括：
6.如權利要求5所述的方法，其特征在于，所述將多個不同...
【專利技術屬性】
技術研發人員：張正茂，
申請(專利權)人：富盛科技股份有限公司，
類型：發明
國別省市：
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。