System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本申請涉及數據存儲,特別是涉及一種基于數據服務區域的數據分析加速與優化處理方法、系統、計算機設備、存儲介質和計算機程序產品。
技術介紹
1、隨著工業信息化的不斷推進,如何管理海量的工業數據成為進一步推進工業場景信息化的首要問題。
2、現有公開號為cn118467212a的中國專利技術專利,該專利技術公開了一種工業設備數據的處理方法及系統,包括以下步驟:步驟s1、在工業設備數據分析處理過程中制定快捷分析處理方法;步驟s2、監測工業設備數據處理結果,判斷分析異常情況;步驟s3、當出現分析異常情況時,調節數據分析模式,進行數據分析異常情況自修復;步驟s4、輸出快捷分析處理中異常節點,人工優化快捷分析處理方法;步驟s5、根據人力資源配置,調整各工業設備分析資源配置,限定最快捷分析處理速度是在人力資源可操作范圍內,本專利技術,具有可智能切換處理和實用性強的特點。
3、然而,上述工業設備數據的處理方法及系統,僅能對工業現場當前發生的異常進行排查與處理,但仍然不能保證修復后的數據能夠被準確的保存,尤其是在需要對工業數據進行分布式保存的場景,更難以避免在數據傳輸的過程中發生數據出錯的問題。
技術實現思路
1、第一方面,本申請提供了一種基于數據服務區域的數據分析加速與優化處理方法,該方法包括:
2、從設置于數據服務區域內的采集終端獲取到監測數據;
3、按照預設數據分級關系,將監測數據拆分為第一級數據、第二級數據以及第三級數據;
4、將第一級
5、在第三級存儲空間中進行數據完整性驗證,并在完成后刪除監測數據。
6、在其中一個實施例中,監測數據包括參數變化數據以及與參數變化數據一一對應的時間戳數據;
7、按照預設數據分級關系,將監測數據拆分為第一級數據、第二級數據以及第三級數據的具體步驟包括:
8、根據預設第一采樣頻率從監測數據中提取等時間間隔的若干個時間戳數據作為采樣時間戳數據;
9、提取與采樣時間戳數據一一對應的若干個參數變化數據,作為采樣參數數據;
10、將采樣參數數據與采樣時間戳數據一一對應并存儲,以組成第一級數據。
11、在其中一個實施例中,按照預設數據分級關系,將監測數據拆分為第一級數據、第二級數據以及第三級數據的具體步驟包括:
12、提取參數變化數據中的拐點數據及其對應的時間戳數據;
13、從拐點數據對應的時間戳數據中去除采樣時間戳數據,將剩余的時間戳數據及其對應的拐點數據作為第二級數據;
14、從監測數據中去除第一級數據以及第二級數據,將剩余的監測數據作為第三級數據。
15、在其中一個實施例中,第三級存儲空間包括數據核驗暫存區;
16、在第三級存儲空間中進行數據完整性驗證,并在完成后刪除監測數據的具體步驟包括:
17、提取第一級數據與第二級數據,并存入數據核驗暫存區;
18、將第三級數據存入數據核驗暫存區,并根據時間戳數據對第一級數據、第二級數據進行合并,以獲取待核驗數據;
19、通過隨機抽樣的方式將待核驗數據與監測數據進行匹配,若均匹配成功,則表示數據核驗通過,刪除監測數據與數據核驗暫存區內的待核驗數據,僅在第一級存儲空間、第二存儲空間以及第三級存儲空間中分別保存第一級數據、第二級數據以及第三級數據。
20、在其中一個實施例中,方法還包括:
21、等待并判斷是否獲取到數據訪問信息,訪問信息包括訪問權限登記信息和數據訪問需求信息;
22、讀取數據訪問需求信息并判斷被訪問數據屬于第一級數據、第二級數據或第三級數據;
23、判斷訪問權限等級是否高于被訪問數據所屬的數據登記;
24、若是,則輸出與數據訪問需求信息對應的第一級數據、第二級數據或第三級數據。
25、第二方面,本申請還提供了一種基于數據服務區域的數據分析加速與優化處理系統,該裝置包括:
26、采集終端,用于采集監測數據并輸出;
27、數據讀寫模塊,用于獲取與暫存監測數據,并對監測數據進行分級;
28、存儲模塊,用于提供第一級存儲空間、第二存儲空間以及第三級存儲空間,以存儲第一級數據、第二級數據以及第三級數據;
29、數據核驗模塊,用于對監測數據的完整性進行驗證。
30、在其中一個實施例中,數據讀寫模塊包括:
31、數據寫入子模塊,用于將從采集終端獲取到的監測數據寫入存儲模塊;
32、數據讀取子模塊,用于根據獲取到數據訪問信息,從存儲模塊中讀取所需的監測數據。
33、第三方面,本申請還提供了一種計算機設備,該計算機設備包括存儲器和處理器,該存儲器存儲有計算機程序,該處理器執行計算機程序時實現以下步驟:
34、從設置于數據服務區域內的采集終端獲取到監測數據;
35、按照預設數據分級關系,將監測數據拆分為第一級數據、第二級數據以及第三級數據;
36、將第一級數據、第二級數據以及第三級數據分別存儲于預設的第一級存儲空間、第二存儲空間以及第三級存儲空間;
37、在第三級存儲空間中進行數據完整性驗證,并在完成后刪除監測數據。
38、第四方面,本申請還提供了一種計算機可讀存儲介質,該計算機可讀存儲介質,其上存儲有計算機程序,該計算機程序被處理器執行時實現以下步驟:
39、從設置于數據服務區域內的采集終端獲取到監測數據;
40、按照預設數據分級關系,將監測數據拆分為第一級數據、第二級數據以及第三級數據;
41、將第一級數據、第二級數據以及第三級數據分別存儲于預設的第一級存儲空間、第二存儲空間以及第三級存儲空間;
42、在第三級存儲空間中進行數據完整性驗證,并在完成后刪除監測數據。
43、第五方面,本申請還提供了一種計算機程序產品,該計算機程序產品包括計算機程序,該計算機程序被處理器執行時實現以下步驟:
44、從設置于數據服務區域內的采集終端獲取到監測數據;
45、按照預設數據分級關系,將監測數據拆分為第一級數據、第二級數據以及第三級數據;
46、將第一級數據、第二級數據以及第三級數據分別存儲于預設的第一級存儲空間、第二存儲空間以及第三級存儲空間;
47、在第三級存儲空間中進行數據完整性驗證,并在完成后刪除監測數據。
48、上述基于數據服務區域的數據分析加速與優化處理方法、裝置、計算機設備、存儲介質和計算機程序產品,通過將拆分后的第一級數據、第二級數據以及第三級數據,進行重新整合校驗,以保證被拆分后的第一級數據、第二級數據以及第三級數據能夠與原始檢測數據匹配,從而提高數據分布式存儲過程中的準確性。
本文檔來自技高網...【技術保護點】
1.一種基于數據服務區域的數據分析加速與優化處理方法,其特征在于,所述方法包括:
2.根據權利要求1所述的方法,其特征在于,所述監測數據包括參數變化數據以及與參數變化數據一一對應的時間戳數據;
3.根據權利要求2所述的方法,其特征在于,所述按照預設數據分級關系,將監測數據拆分為第一級數據、第二級數據以及第三級數據的具體步驟包括:
4.根據權利要求1所述的方法,其特征在于,所述第三級存儲空間包括數據核驗暫存區;
5.根據權利要求1至4任意一項所述的方法,其特征在于,所述方法還包括:
6.一種基于數據服務區域的數據分析加速與優化處理系統,其特征在于,所述系統包括:
7.根據權利要求6所述的系統,其特征在于,所述數據讀寫模塊包括:
8.一種計算機設備,包括存儲器和處理器,所述存儲器存儲有計算機程序,其特征在于,所述處理器執行所述計算機程序時實現權利要求1至5中任一項所述的方法的步驟。
9.一種計算機可讀存儲介質,其上存儲有計算機程序,其特征在于,所述計算機程序被處理器執行時實現權利要求1至5
10.一種計算機程序產品,包括計算機程序,其特征在于,該計算機程序被處理器執行時實現權利要求1至5中任一項所述的方法的步驟。
...【技術特征摘要】
1.一種基于數據服務區域的數據分析加速與優化處理方法,其特征在于,所述方法包括:
2.根據權利要求1所述的方法,其特征在于,所述監測數據包括參數變化數據以及與參數變化數據一一對應的時間戳數據;
3.根據權利要求2所述的方法,其特征在于,所述按照預設數據分級關系,將監測數據拆分為第一級數據、第二級數據以及第三級數據的具體步驟包括:
4.根據權利要求1所述的方法,其特征在于,所述第三級存儲空間包括數據核驗暫存區;
5.根據權利要求1至4任意一項所述的方法,其特征在于,所述方法還包括:
6.一種基于數據服務區域的數據分析...
【專利技術屬性】
技術研發人員:胡志遠,張靖,姚振,劉翠玲,侯皓宇,趙林燕,杜妍,孫佳麗,張翠翠,丁鑫,孫琦,盧銳軒,丁瀚文,張福華,胡才亮,
申請(專利權)人:國網安徽省電力有限公司信息通信分公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。