【技術實現步驟摘要】
本專利技術涉及數據分析，具體涉及一種基于智慧燃氣物聯網的燃氣數據分級評估方法。
技術介紹
1、燃氣作為清潔、高效的能源之一，被廣泛應用于居民生活、工業生產和商業領域，隨著科技的不斷發展和進步，智慧燃氣建設已成為推動能源行業轉型升級的重要方向之一，傳統的燃氣系統面臨著安全管理、供應效率和能源利用等方面的挑戰，需要借助先進的技術手段進行智能化改造和管理，智慧燃氣物聯網的引入，為實現燃氣數據的分級評估提供了可能，進而推動燃氣行業的整體升級。
2、現有技術中，智慧燃氣系統往往涉及多個異構系統的集成與融合，而不同系統關聯的燃氣數據指標有所區別，增加了數據整合的難度，并且數據的重要性不同，難以進行分級利用，會導致數據利用受限，因此，如何對異構系統數據的質量進行分析，以提高燃氣數據分級評估的精度，是我們要解決的問題，為此，現提出一種基于智慧燃氣物聯網的燃氣數據分級評估方法。
技術實現思路
1、本專利技術目的在于提供一種基于智慧燃氣物聯網的燃氣數據分級評估方法，以解決上述
技術介紹
中提出的問題。
2、為解決上述技術問題，本專利技術所采用的技術方案是：
3、一種基于智慧燃氣物聯網的燃氣數據分級評估方法，包括以下步驟：
4、步驟1，識別參與評估的異構系統數據源，從智慧燃氣物聯網中的多個異構系統數據源中收集原始燃氣數據，并對收集的原始燃氣數據進行數據處理；
5、步驟2，整合處理后的原始燃氣數據，對原始燃氣數據進行質量評估，確定其數據質量等級，并對
6、步驟3，從原始燃氣數據中提取燃氣數據評估特征，構建燃氣數據評估指標體系，結合原始燃氣數據基于燃氣數據的重要性劃分評估等級；
7、步驟4，基于燃氣數據評估特征和原始燃氣數據，根據燃氣數據的重要性、敏感性和時效性因素，并得到燃氣數據分級系數，對燃氣數據進行評估；
8、步驟5，設定評估等級的對應閾值，并根據燃氣數據分級系數的結果，確定燃氣數據的具體評估等級，根據評估結果實施相應的管理與決策。
9、本專利技術技術方案的進一步改進在于：所述步驟1中，收集原始燃氣數據的過程為：
10、步驟101，明確包含所需燃氣數據的異構系統數據源，包括燃氣表讀數系統、燃氣管道監控系統、安全報警系統、用戶管理系統以及氣象數據系統；
11、步驟102，根據各數據源對應的數據接口進行數據收集，獲取原始燃氣數據，并對收集的數據進行驗證，確保數據的完整性和準確性，將驗證后的數據存儲到數據倉庫中，以便后續處理和分析；
12、步驟103，對原始燃氣數據進行預處理操作，包括數據清洗、數據整合和數據轉換，數據清洗用于去除重復數據、糾正錯誤數據、處理缺失值等，確保數據質量，數據整合用于將來自不同數據源的數據按照一定的規則進行整合，形成統一的數據格式和視圖，數據轉換用于對數據進行格式轉換。
13、本專利技術技術方案的進一步改進在于：所述步驟2中，對原始燃氣數據進行質量評估的過程為：
14、步驟201，將不同來源和類型的燃氣數據根據時間戳、用戶id、地點的關鍵字段進行匹配和整合，使不同數據源之間的數據正確對應；
15、步驟202，將不同數據源中的相似數據項關聯起來，建立數據映射關系，并將整合和映射后的數據存儲在數據倉庫中，建立索引，以提高查詢效率；
16、步驟203，確定數據質量評估指標，分別為準確性、完整性、一致性、及時性和可靠性，獲得數據準確性評估指數、數據完整性評估指數、數據一致性評估指數、數據及時性評估指數以及數據可靠性評估指數，對數據質量進行評估；
17、步驟204，根據數據的異常值檢測結果，對識別出的異常數據進行進一步分析，判斷其原因，對于明顯的錯誤數據，進行修正或刪除，對于異常但無法確定的數據，進行標記并保留，供后續進一步分析或驗證；
18、步驟205，將數據質量評估指標合并計算獲得綜合評估指數，綜合衡量數據質量，并劃分不同的數據質量等級，以量化數據質量的范圍。
19、本專利技術技術方案的進一步改進在于：所述準確性通過計算每個數據點與標準值的絕對偏差，求平均值，分析數據點與標準值之間的偏差程度，獲得數據準確性評估指數，以評估數據質量的準確性，其表達式為：
20、
21、其中，ax是數據準確性評估指數，用于衡量數據與標準值的偏差，n是數據集中數據點的總數，xi是數據集中的數據點，ti是對應的標準值，需要說明的是，ax的值越小表示數據越準確；
22、所述完整性通過計算非缺失值的數量與初始數據集大小的比例，分析數據集中非缺失值的比例，獲得數據完整性評估指數，以評估數據質量的完整性，其表達式為：
23、
24、其中，cx是數據完整性評估指數，non是非缺失值的數量，nin是初始數據集的大小，需要說明的是，cx的值越接近1表示數據越完整；
25、所述一致性通過計算一致的數據項數量與所有被比較的數據項數量的比例，分析數據集中在不同數據源中一致的數據項的比例，獲得數據一致性評估指數，以評估數據質量的一致性，其表達式為：
26、
27、其中，yx是數據一致性評估指數，ncs是在所有數據源中一致的數據項數量，nto是所有被比較的數據項數量，需要說明的是，yx的值越大表示數據越一致；
28、所述及時性通過計算當前時間與數據最后更新時間的差，除以期望的更新頻率，分析數據更新與當前時間的延遲時間，獲得數據及時性評估指數，以評估數據質量的及時性，其表達式為：
29、
30、其中，ex是數據及時性評估指數，tc是當前時間，tu是數據最后更新的時間，tex是期望的更新頻率，需要說明的是，ex的值越小表示數據更新越及時；
31、所述可靠性通過計算每個數據點與平均值的差，除以標準差，分析單個數據點與數據集平均值的偏差程度，以評估數據質量的可靠性，獲得數據可靠性評估指數，其表達式為：
32、
33、其中，kx是數據可靠性評估指數，xi是單個數據點，是數據的平均值，σ是數據的標準差，需要說明的是，kx值的絕對數越大，表示數據點越可能是異常值。
34、本專利技術技術方案的進一步改進在于：所述綜合評估指數的計算公式為：
35、
36、其中，dz是綜合評估指數，ax是數據準確性評估指數，cx是數據完整性評估指數，yx是數據一致性評估指數，ex是數據及時性評估指數，kx是數據可靠性評估指數，n是數據集中數據點的總數，μ(ex)是數據及時性評估指數的均值，是數據集中所有數據點的數據可靠性評估指數總和，w1+w2+w3＝1，需要說明的是，dz的值越高，表示數據質量越好。
37、本專利技術技術方案的進一步改進在于：所述數據質量等級的劃分過程為：
38、步驟2051，設定數據質量等級，分別為優數據本文檔來自技高網...
【技術保護點】
1.一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：包括以下步驟：
2.根據權利要求1所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述步驟1中，收集原始燃氣數據的過程為：
3.根據權利要求2所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述步驟2中，對原始燃氣數據進行質量評估的過程為：
4.根據權利要求3所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述準確性通過計算每個數據點與標準值的絕對偏差，求平均值，分析數據點與標準值之間的偏差程度，獲得數據準確性評估指數，以評估數據質量的準確性，其表達式為：
5.根據權利要求4所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述綜合評估指數的計算公式為：
6.根據權利要求5所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述數據質量等級的劃分過程為：
7.根據權利要求6所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述步驟3中，燃氣數據評估指標體系的構建
8.根據權利要求7所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述步驟4中，燃氣數據分級系數的獲取過程為：
9.根據權利要求8所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述燃氣數據分級系數的計算公式為：
10.根據權利要求9所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述步驟5中，確定燃氣數據具體評估等級的過程為：
...【技術特征摘要】
1.一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：包括以下步驟：
2.根據權利要求1所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述步驟1中，收集原始燃氣數據的過程為：
3.根據權利要求2所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述步驟2中，對原始燃氣數據進行質量評估的過程為：
4.根據權利要求3所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述準確性通過計算每個數據點與標準值的絕對偏差，求平均值，分析數據點與標準值之間的偏差程度，獲得數據準確性評估指數，以評估數據質量的準確性，其表達式為：
5.根據權利要求4所述的一種基于智慧燃氣物聯網的燃氣數據分級評估方法，其特征在于：所述綜合評估指數...
【專利技術屬性】
技術研發人員：束開，黃翔，李爍嵐，黃其高，梁曉，李濤，孫煥然，王羽霏，
申請(專利權)人：貴州數聯慧云數字科技有限公司，
類型：發明
國別省市：
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。