【技術實現步驟摘要】
本專利技術涉及數據分布式存儲，更具體地說，涉及一種物聯網數據遷移方法及中分融合系統。
技術介紹
1、布式存儲是一種將數據分散存儲在多個節點上的存儲方式。與傳統的集中式存儲相比,分布式存儲將數據分布在多個節點上,每個節點都可以獨立地存儲和訪問數據；與傳統的數據分布式存儲不同，對于物聯網中數據的分布式存儲由其特殊的需求：1.數據具有實時性，而非固定式的數據；2.對于某些訪問頻率較高的數據，需要調節數據位置，以提升訪問效率，為解決上述問題，需要一種物聯網數據遷移方法及中分融合系統。
技術實現思路
1、本專利技術要解決的技術問題在于，針對現有技術的上述缺陷，提供一種物聯網數據遷移方法，還提供了一種中分融合系統。
2、本專利技術解決其技術問題所采用的技術方案是：
3、構造一種物聯網數據遷移方法，其中，方法包括以下步驟：
4、實時獲取物聯網中產生的待存儲數據在緩沖數據庫中暫存；對緩沖數據庫中數據進行數據分類，并分別存儲在子數據庫中；
5、按照設定分片大小定時或不定時對當前子數據庫中數據進行分片處理；
6、對每一子數據庫構建相應的分布式存儲系統，分布式存儲系統中包括處理服務器和多級存儲數據庫，每一級存儲數據庫對應不同權重范圍的數據分片；
7、處理服務器對子數據庫中多個數據分片進行分布式存儲到多級存儲數據庫中，并接收處理外界訪問請求，被訪問的數據分片進行加權處理；
8、定時或不定時的，對每一級存儲數據庫進行篩查，將
9、遷移后對數據地址進行相應修改。
10、本專利技術所述的物聯網數據遷移方法，其中，每一級存儲數據庫均包含有多個數據庫，每一數據庫均帶有標識屬性，標識屬性中包含一變量用于存儲數據分片的權重范圍。
11、本專利技術所述的物聯網數據遷移方法，其中，所述方法還包括步驟：
12、處理服務器統計每一級存儲數據庫中剩余存儲容量，若進行數據分片遷移時存在待遷移的目標存儲數據庫剩余存儲容量不足時，將當前剩余存儲容量最多的一級存儲數據庫中設定數量的數據庫通過修改權重范圍的方式來劃分至目標存儲數據庫中。
13、本專利技術所述的物聯網數據遷移方法，其中，初始狀態下進行分布式存儲時，數據分片權重為0，此時存儲不考慮權重范圍；每次訪問后，數據分片依據加權算法進行加權。
14、本專利技術所述的物聯網數據遷移方法，其中，權重范圍的較小端點數值較高所述存儲數據庫對應著更高綜合性能的數據庫。
15、本專利技術所述的物聯網數據遷移方法，其中，所述方法還包括步驟：
16、將子數據庫中已進行分布式存儲的數據分片進行刪除處理。
17、本專利技術所述的物聯網數據遷移方法，其中，所述數據分類的分類規則包括按數據生成或修改時間段分類、按傳感器類型分類、按物聯網內設備分類和自定義項目分類。
18、一種中分融合系統，應用于如上述的物聯網數據遷移方法，其中，所述系統包括數據緩存模塊和分布式存儲模塊：所述數據緩存模塊包括緩存數據庫、數據分類單元和數據分片單元；所述分布式存儲模塊包括多個與每一子數據庫對應的分布式存儲系統；
19、所述緩沖數據庫，用于實時獲取物聯網中產生的待存儲數據并暫存；所述數據分類單元，用于對緩沖數據庫中數據進行數據分類，并分別存儲在子數據庫中；所述數據分片單元，用于按照設定分片大小定時或不定時對當前子數據庫中數據進行分片處理；
20、所述分布式存儲系統中包括處理服務器和多級存儲數據庫，每一級存儲數據庫對應不同權重范圍的數據分片；處理服務器對子數據庫中多個數據分片進行分布式存儲到多級存儲數據庫中，并接收處理外界訪問請求，被訪問的數據分片進行加權處理；定時或不定時的，對每一級存儲數據庫進行篩查，將不符合當前存儲數據庫權重范圍的數據分片遷移至權重范圍相符的存儲數據庫中；遷移后對數據地址進行相應修改。
21、本專利技術的有益效果在于：應用本申請的方式方法，對物聯網數據進行實時拉取，分類并分片處理，可以有效應對物聯網的大流量實時數據處理，同時配置多個分布式存儲系統，每個系統中對訪問頻繁的數據分片進行遷移，能夠有效提升物聯網中高頻訪問數據的訪問效率。
本文檔來自技高網...【技術保護點】
1.一種物聯網數據遷移方法，其特征在于，方法包括以下步驟：
2.根據權利要求1所述的物聯網數據遷移方法，其特征在于，每一級存儲數據庫均包含有多個數據庫，每一數據庫均帶有標識屬性，標識屬性中包含一變量用于存儲數據分片的權重范圍。
3.根據權利要求2所述的物聯網數據遷移方法，其特征在于，所述方法還包括步驟：
4.根據權利要求3所述的物聯網數據遷移方法，其特征在于，初始狀態下進行分布式存儲時，數據分片權重為0，此時存儲不考慮權重范圍；每次訪問后，數據分片依據加權算法進行加權。
5.根據權利要求4所述的物聯網數據遷移方法，其特征在于，權重范圍的較小端點數值較高所述存儲數據庫對應著更高綜合性能的數據庫。
6.根據權利要求1所述的物聯網數據遷移方法，其特征在于，所述方法還包括步驟：
7.根據權利要求1所述的物聯網數據遷移方法，其特征在于，所述數據分類的分類規則包括按數據生成或修改時間段分類、按傳感器類型分類、按物聯網內設備分類和自定義項目分類。
8.一種中分融合系統，應用于如權利要求1-7任一所述的物聯網數據
...【技術特征摘要】
1.一種物聯網數據遷移方法，其特征在于，方法包括以下步驟：
2.根據權利要求1所述的物聯網數據遷移方法，其特征在于，每一級存儲數據庫均包含有多個數據庫，每一數據庫均帶有標識屬性，標識屬性中包含一變量用于存儲數據分片的權重范圍。
3.根據權利要求2所述的物聯網數據遷移方法，其特征在于，所述方法還包括步驟：
4.根據權利要求3所述的物聯網數據遷移方法，其特征在于，初始狀態下進行分布式存儲時，數據分片權重為0，此時存儲不考慮權重范圍；每次訪問后，數據分片依據加權算法進行加權。
5.根據權利要求4所述的物聯網數據遷移方法，其特征在于，權重范圍的...
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。