【技術(shù)實(shí)現(xiàn)步驟摘要】
本專利技術(shù)涉及數(shù)據(jù)分布式存儲(chǔ)，更具體地說，涉及一種物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法及中分融合系統(tǒng)。
技術(shù)介紹
1、物聯(lián)網(wǎng)是指通過信息傳感設(shè)備，按約定的協(xié)議，將任何物體與網(wǎng)絡(luò)相連接，物體通過信息傳播媒介進(jìn)行信息交換和通信，以實(shí)現(xiàn)智能化識(shí)別、定位、跟蹤、監(jiān)管等功能；在物聯(lián)網(wǎng)中，傳感器扮演了十分重要的角色，是能夠?qū)崿F(xiàn)互聯(lián)的核心環(huán)節(jié)；現(xiàn)有的常規(guī)物聯(lián)網(wǎng)傳感器數(shù)據(jù)，大都采用本地存儲(chǔ)的方式，受限于本地存儲(chǔ)器資源，存儲(chǔ)常難以滿足需求，而且對(duì)于物聯(lián)網(wǎng)的擴(kuò)展帶來了極大的限制；
2、采用常規(guī)的分布式存儲(chǔ)系統(tǒng)存儲(chǔ)方式，雖然可以解決物聯(lián)網(wǎng)擴(kuò)展時(shí)數(shù)據(jù)存儲(chǔ)的問題，但是，基于物聯(lián)網(wǎng)傳感器數(shù)據(jù)的實(shí)時(shí)性與連續(xù)性，以及部分傳感器數(shù)據(jù)還具有較高的訪問頻率，這都使得常規(guī)的分布式存儲(chǔ)系統(tǒng)難以較好的適用，訪問效率低下，需要一種能夠針對(duì)物聯(lián)網(wǎng)傳感器數(shù)據(jù)進(jìn)行分布式存儲(chǔ)的方式方法。
技術(shù)實(shí)現(xiàn)思路
1、本專利技術(shù)要解決的技術(shù)問題在于，針對(duì)現(xiàn)有技術(shù)的上述缺陷，提供一種物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，還提供了一種中分融合系統(tǒng)。
2、本專利技術(shù)解決其技術(shù)問題所采用的技術(shù)方案是：
3、構(gòu)造一種物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其中，包括以下步驟：
4、步驟一：獲取當(dāng)前物聯(lián)網(wǎng)中全部傳感器列表，按照設(shè)定分類策略對(duì)傳感器的數(shù)據(jù)類型進(jìn)行分類，并對(duì)每一數(shù)據(jù)類型分類劃分獨(dú)立的暫存區(qū)域；
5、步驟二：實(shí)時(shí)獲取目標(biāo)物聯(lián)網(wǎng)中傳感器數(shù)據(jù)，對(duì)獲取的傳感器數(shù)據(jù)進(jìn)行數(shù)據(jù)分類識(shí)別，并存儲(chǔ)至與數(shù)據(jù)分類相對(duì)應(yīng)的暫存區(qū)域
6、步驟三：對(duì)暫存區(qū)域內(nèi)的傳感器數(shù)據(jù)，進(jìn)行分片處理，且每一數(shù)據(jù)分片大小相同；
7、步驟四：將數(shù)據(jù)分片進(jìn)行分布式存儲(chǔ)至數(shù)據(jù)庫(kù)單元中；
8、數(shù)據(jù)庫(kù)單元包括多層由內(nèi)而外套設(shè)分布的多層數(shù)據(jù)環(huán)鏈，每一數(shù)據(jù)環(huán)鏈均由多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)呈環(huán)形鏈接構(gòu)成，且靠?jī)?nèi)的數(shù)據(jù)環(huán)鏈上的任一數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)的存儲(chǔ)效率優(yōu)于靠外的數(shù)據(jù)環(huán)鏈上的任一數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)，靠?jī)?nèi)的數(shù)據(jù)環(huán)鏈上的任一數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)均與靠外的數(shù)據(jù)環(huán)鏈上的一個(gè)或多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)建立連接并在靠外的數(shù)據(jù)環(huán)鏈上進(jìn)行備份數(shù)據(jù)，建立的連接同時(shí)作為數(shù)據(jù)遷移通道；
9、步驟五：定時(shí)或不定時(shí)對(duì)數(shù)據(jù)分片訪問情況進(jìn)行統(tǒng)計(jì)分析，統(tǒng)計(jì)項(xiàng)目至少包括是否存在多次被同時(shí)調(diào)用的數(shù)據(jù)分片和數(shù)據(jù)分片被調(diào)用的頻率排序；
10、步驟六：將分析結(jié)果中超出設(shè)定次數(shù)的被同時(shí)調(diào)用的多個(gè)數(shù)據(jù)分片進(jìn)行融合為一個(gè)新的數(shù)據(jù)分片進(jìn)行存儲(chǔ)；
11、步驟七：依靠數(shù)據(jù)遷移通道，按照數(shù)據(jù)分片被調(diào)用的頻率排序，定時(shí)或不定時(shí)的調(diào)整多個(gè)數(shù)據(jù)分片的存儲(chǔ)位置，使得被調(diào)用頻率較高的數(shù)據(jù)分片位于更內(nèi)層的數(shù)據(jù)環(huán)鏈上。
12、本專利技術(shù)所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其中，所述方法還包括構(gòu)建數(shù)據(jù)庫(kù)單元步驟：
13、依據(jù)單位時(shí)間內(nèi)傳感器數(shù)據(jù)的訪問頻次對(duì)傳感器數(shù)據(jù)進(jìn)行分級(jí)，不同分級(jí)內(nèi)的傳感器數(shù)據(jù)訪問頻次處于不同分段范圍；
14、依據(jù)每一分級(jí)的分段范圍對(duì)數(shù)據(jù)存儲(chǔ)效率的要求，篩選多個(gè)符合要求的數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)；
15、將每一分級(jí)對(duì)應(yīng)的多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)進(jìn)行連接構(gòu)成數(shù)據(jù)環(huán)鏈；
16、在相鄰的數(shù)據(jù)環(huán)鏈中的下一級(jí)數(shù)據(jù)環(huán)鏈中的一個(gè)或多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)中預(yù)留備份空間；
17、將具有備份空間的數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)與上一級(jí)數(shù)據(jù)環(huán)鏈中的一個(gè)或多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)進(jìn)行連接。
18、本專利技術(shù)所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其中，所述構(gòu)建數(shù)據(jù)庫(kù)單元步驟還包括：
19、對(duì)最下一級(jí)的數(shù)據(jù)環(huán)鏈額外配置備份數(shù)據(jù)庫(kù)，以便于最下一級(jí)的數(shù)據(jù)環(huán)鏈一個(gè)或多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)進(jìn)行數(shù)據(jù)備份。
20、本專利技術(shù)所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其中，所述將數(shù)據(jù)分片進(jìn)行分布式存儲(chǔ)至數(shù)據(jù)庫(kù)單元中時(shí)采用方法：將數(shù)據(jù)分片存儲(chǔ)在位于靠中間的存在空間空間的數(shù)據(jù)環(huán)鏈中；
21、數(shù)據(jù)分片存儲(chǔ)后，依據(jù)步驟五-步驟七進(jìn)行數(shù)據(jù)分片的融合與遷移，調(diào)整在數(shù)據(jù)庫(kù)單元中的位置。
22、本專利技術(shù)所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其中，進(jìn)行數(shù)據(jù)融合時(shí)，對(duì)應(yīng)的備份空間內(nèi)備份數(shù)據(jù)保持不變；
23、進(jìn)行數(shù)據(jù)遷移時(shí)，同時(shí)進(jìn)行備份空間內(nèi)的數(shù)據(jù)遷移。
24、本專利技術(shù)所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其中，每一所述數(shù)據(jù)環(huán)鏈的多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)對(duì)應(yīng)存儲(chǔ)的數(shù)據(jù)類型不完全相同，且多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)對(duì)應(yīng)的數(shù)據(jù)類型需完全覆蓋數(shù)據(jù)分片的數(shù)據(jù)類型。
25、本專利技術(shù)所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其中，所述步驟一中，所述設(shè)定分類策略包括按數(shù)據(jù)生成或修改時(shí)間段分類、按傳感器類型分類、按物聯(lián)網(wǎng)內(nèi)設(shè)備分類和自定義項(xiàng)目分類。
26、一種中分融合系統(tǒng)，應(yīng)用于上述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其中，所述系統(tǒng)包括數(shù)據(jù)預(yù)處理單元、分布式存儲(chǔ)單元和數(shù)據(jù)庫(kù)單元；
27、所述數(shù)據(jù)預(yù)處理單元，用于獲取當(dāng)前物聯(lián)網(wǎng)中全部傳感器列表，按照設(shè)定分類策略對(duì)傳感器的數(shù)據(jù)類型進(jìn)行分類，并對(duì)每一數(shù)據(jù)類型分類劃分獨(dú)立的暫存區(qū)域；實(shí)時(shí)獲取目標(biāo)物聯(lián)網(wǎng)中傳感器數(shù)據(jù)，對(duì)獲取的傳感器數(shù)據(jù)進(jìn)行數(shù)據(jù)分類識(shí)別，并存儲(chǔ)至與數(shù)據(jù)分類相對(duì)應(yīng)的暫存區(qū)域；
28、所述分布式存儲(chǔ)單元，用于對(duì)暫存區(qū)域內(nèi)的傳感器數(shù)據(jù)，進(jìn)行分片處理，且每一數(shù)據(jù)分片大小相同；將數(shù)據(jù)分片進(jìn)行分布式存儲(chǔ)至所述數(shù)據(jù)庫(kù)單元中；
29、所述數(shù)據(jù)庫(kù)單元，包括多層由內(nèi)而外套設(shè)分布的多層數(shù)據(jù)環(huán)鏈，每一數(shù)據(jù)環(huán)鏈均由多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)呈環(huán)形鏈接構(gòu)成，且靠?jī)?nèi)的數(shù)據(jù)環(huán)鏈上的任一數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)的存儲(chǔ)效率優(yōu)于靠外的數(shù)據(jù)環(huán)鏈上的任一數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)，靠?jī)?nèi)的數(shù)據(jù)環(huán)鏈上的任一數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)均與靠外的數(shù)據(jù)環(huán)鏈上的一個(gè)或多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)建立連接并在靠外的數(shù)據(jù)環(huán)鏈上進(jìn)行備份數(shù)據(jù)，建立的連接同時(shí)作為數(shù)據(jù)遷移通道；
30、所述分布式存儲(chǔ)單元還包括數(shù)據(jù)訪問統(tǒng)計(jì)模塊、數(shù)據(jù)融合模塊和數(shù)據(jù)遷移模塊；
31、所述數(shù)據(jù)訪問統(tǒng)計(jì)模塊，用于定時(shí)或不定時(shí)對(duì)數(shù)據(jù)分片訪問情況進(jìn)行統(tǒng)計(jì)分析，統(tǒng)計(jì)項(xiàng)目包括是否存在多次被同時(shí)調(diào)用的數(shù)據(jù)分片和數(shù)據(jù)分片被調(diào)用的頻率排序；
32、所述數(shù)據(jù)融合模塊，用于將分析結(jié)果中超出設(shè)定次數(shù)的被同時(shí)調(diào)用的多個(gè)數(shù)據(jù)分片進(jìn)行融合為一個(gè)新的數(shù)據(jù)分片進(jìn)行存儲(chǔ)；
33、所述數(shù)據(jù)遷移模塊，用于依靠數(shù)據(jù)遷移通道，按照數(shù)據(jù)分片被調(diào)用的頻率排序，定時(shí)或不定時(shí)的調(diào)整多個(gè)數(shù)據(jù)分片的存儲(chǔ)位置，使得被調(diào)用頻率較高的數(shù)據(jù)分片位于更內(nèi)層的數(shù)據(jù)環(huán)鏈上。
34、本專利技術(shù)的有益效果在于：應(yīng)用本申請(qǐng)的方式方法，將各種傳感器數(shù)據(jù)進(jìn)行分類，并分別進(jìn)行分片處理，分片后保持大小一致以保障分布式存儲(chǔ)時(shí)的均勻性，同時(shí)構(gòu)建具有不同權(quán)重的數(shù)據(jù)環(huán)鏈，依據(jù)分片數(shù)據(jù)的訪問情況在數(shù)據(jù)環(huán)鏈中進(jìn)行融合以及遷移操作，實(shí)現(xiàn)存儲(chǔ)資源的合理分配，保障分布式存儲(chǔ)的同時(shí)兼顧高頻次傳感器數(shù)據(jù)的訪問效率，從而解決了當(dāng)前物聯(lián)網(wǎng)中傳感器數(shù)據(jù)分布式存儲(chǔ)遇到的難題。
本文檔來自技高網(wǎng)...【技術(shù)保護(hù)點(diǎn)】
1.一種物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，包括以下步驟：
2.根據(jù)權(quán)利要求1所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，所述方法還包括構(gòu)建數(shù)據(jù)庫(kù)單元步驟：
3.根據(jù)權(quán)利要求2所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，所述構(gòu)建數(shù)據(jù)庫(kù)單元步驟還包括：
4.根據(jù)權(quán)利要求2所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，所述將數(shù)據(jù)分片進(jìn)行分布式存儲(chǔ)至數(shù)據(jù)庫(kù)單元中時(shí)采用方法：將數(shù)據(jù)分片存儲(chǔ)在位于靠中間的存在空間空間的數(shù)據(jù)環(huán)鏈中；
5.根據(jù)權(quán)利要求4所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，進(jìn)行數(shù)據(jù)融合時(shí)，對(duì)應(yīng)的備份空間內(nèi)備份數(shù)據(jù)保持不變；
6.根據(jù)權(quán)利要求1所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，每一所述數(shù)據(jù)環(huán)鏈的多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)對(duì)應(yīng)存儲(chǔ)的數(shù)據(jù)類型不完全相同，且多個(gè)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)對(duì)應(yīng)的數(shù)據(jù)類型需完全覆蓋數(shù)據(jù)分片的數(shù)據(jù)類型。
7.根據(jù)權(quán)利要求1所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，所述步驟一中，所述設(shè)定分類策略包括按數(shù)據(jù)生成或修改時(shí)間段分類、按傳感器類型分類、按物聯(lián)網(wǎng)
8.一種中分融合系統(tǒng)，應(yīng)用于如權(quán)利要求1-7任一所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，所述系統(tǒng)包括數(shù)據(jù)預(yù)處理單元、分布式存儲(chǔ)單元和數(shù)據(jù)庫(kù)單元；
...【技術(shù)特征摘要】
1.一種物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，包括以下步驟：
2.根據(jù)權(quán)利要求1所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，所述方法還包括構(gòu)建數(shù)據(jù)庫(kù)單元步驟：
3.根據(jù)權(quán)利要求2所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，所述構(gòu)建數(shù)據(jù)庫(kù)單元步驟還包括：
4.根據(jù)權(quán)利要求2所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，所述將數(shù)據(jù)分片進(jìn)行分布式存儲(chǔ)至數(shù)據(jù)庫(kù)單元中時(shí)采用方法：將數(shù)據(jù)分片存儲(chǔ)在位于靠中間的存在空間空間的數(shù)據(jù)環(huán)鏈中；
5.根據(jù)權(quán)利要求4所述的物聯(lián)網(wǎng)傳感器數(shù)據(jù)分布式存儲(chǔ)方法，其特征在于，進(jìn)行數(shù)據(jù)融合時(shí)，對(duì)應(yīng)的備份空間...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：張立旭，
申請(qǐng)(專利權(quán))人：優(yōu)網(wǎng)云計(jì)算有限公司，
類型：發(fā)明
國(guó)別省市：
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。