System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本專利技術涉及多源異構數據管理領域,具體涉及一種時間同步的多源異構數據回放方法及存儲介質。
技術介紹
1、數據回放技術,作為現代檢測技術的重要組成部分,是數據采集技術的后續和衍生。其與數據采集技術、信號處理技術相結合,已在雷達、通信、水聲遙測、遙感、地震勘測等許多領域有著廣泛的應用。隨著人們對信號檢測技術性能需求的不斷提高,如何能夠快速、精確地實現大量歷史數據的回放,為信號處理技術提供有效的歷史數據,已成為信號檢測技術的研究重點之一。
2、在實際的試驗回放應用場景中,由于試驗環境的復雜性,需要對試驗過程中的軌跡數據、各類試驗信息數據同時進行回放以盡可能接近真實試驗情況,使得試驗后待回放的數據是不同來源的具有不同結構的數據,現有的試驗數據回放方法只針對單一數據源數據進行回放,未考慮到多源異構數據回放的時間同步,cn117406249a公開了一種反無人機衛星導航設備及數據回放方法,僅支持特定格式的導航中頻數據;cn118069706a公開了一種數據記錄回放策略的實現方法、裝置及應用,僅支持時間連續的單一來源的數據記錄回放。因此,設計一種可處理多源異構數據的時間同步的回放方法是有意義的。
3、此外,上述數據回放方法一般與數據的分析顯示任務強耦合,對于不同的回放數據,使用同一套分析顯示方法不能展現不同數據的獨有特征,而考慮所有數據的顯示是不現實的,同時過多的顯示會使得展示效果過于雜亂。因此數據回放與數據分析顯示需要解耦。
技術實現思路
1、本專利技術的目的是針對現有
2、本專利技術的技術方案如下:
3、一種時間同步的多源異構數據回放方法,充分考慮多源異構數據的特征以及時間同步方式以完成數據的回放,所述方法包括:
4、將數據劃分為數據庫和文件的數據,并建立相應數據接入接口;
5、建立數據模型,可根據模型解析不同結構的數據;
6、使用主從時間軸機制與條件等待鎖保障多源數據回放過程的時間同步;
7、提供網絡和本地api兩種數據導出接口,使得數據回放與數據顯示解耦。
8、通過采用上述技術方案,首先通過相應的數據接口進行多源數據接入,建立相應數據的數據模型,通過數據模型將原始數據進行解析,形成多源異構回放數據。通過主從時間軸與條件等待鎖的時間同步機制以及數據發送接口,實現多源異構數據的時間同步回放。
9、可選的,多源數據包括:
10、數據庫數據,其一般以表結構形式存儲在關系型數據庫中;
11、文件數據,其一般是以excel、csv、xml數據格式存儲在文件中。
12、可選的,多源數據的接入包括:
13、數據庫數據的接入,通過sql查詢獲取數據即可完成數據的批量導入;
14、文件數據的接入,通過遍歷文件并按照相應文件格式提取數據即可完成數據的批量導入。
15、可選的,異構數據的解析包括:
16、按照不同結構的數據,建立相應的數據模型;
17、將原始數據格式中的字段映射為回放所需數據中的字段。
18、可選的,數據回放的控制包括:
19、建立一條主時間軸;
20、不同的待回放數據使用不同的線程進行控制,每個線程建立一條從時間軸標識數據的時間;
21、回放過程中每個線程會利用條件等待鎖將數據時間與主時間進行對比,只有到達相應時間點的數據方可進行回放,否則進行自旋等待。
22、可選的,數據的分發包括:
23、網絡協議分發,可將回放數據轉化為網絡報文數據分發,進行異地分析顯示;
24、api接口分發,將回放數據以api形式分發至本地分析顯示。
25、本可選的,專利技術還提供一種計算機可讀存儲介質,其上存儲有計算機程序,該計算機程序被處理器執行時實現本專利技術所述的一種時間同步的多源異構數據回放方法的步驟。
26、本專利技術的上述方案至少包括以下有益效果:
27、1)通過建立兩類的數據接口和自定義數據模型,可以處理多源異構數據的回放,解決了傳統數據回放方法只適用單一數據源或者同構數據的問題;
28、2)通過建立主從時間軸并利用條件等待鎖對并行數據回放過程進行控制,保證了不同數據并行回放過程的時間同步;
29、3)提供網絡和本地api兩種數據導出接口,使得回放數據可供多端進行不同的數據分析顯示,解決數據回放與分析顯示強耦合的問題;
30、4)該方法具有自適應性,可通過兩類數據接入接口和建立不同的數據模型適用于來自不同數據源的異構數據回放,該專利技術具有很好的實用性。
本文檔來自技高網...【技術保護點】
1.一種時間同步的多源異構數據回放方法,其特征在于,包括如下步驟:
2.根據權利要求1所述的時間同步的多源異構數據回放方法,其特征在于,步驟S1中所述多源數據包括數據庫數據和文件數據,所述數據庫數據是試驗中通過數據采集軟件采集得到的實時數據,以表結構形式存儲在關系型數據庫中;所述文件數據是試驗后方可得到的非實時數據或者用于對比的試驗仿真數據。
3.根據權利要求2所述的時間同步的多源異構數據回放方法,其特征在于:
4.根據權利要求2所述的時間同步的多源異構數據回放方法,其特征在于:
5.根據權利要求2所述的時間同步的多源異構數據回放方法,其特征在于:
6.根據權利要求1所述的時間同步的多源異構數據回放方法,其特征在于,在步驟S2中,所述建立相應的數據模型中包括:
7.根據權利要求1-6任一項所述的時間同步的多源異構數據回放方法,其特征在于,在步驟S4中,數據的分發包括兩種模式:一種是網絡協議,將回放數據轉化為網絡報文數據分發,進行異地分析顯示;另一種是API接口模式,將回放數據以API形式分發至本地分析顯示。<
...【技術特征摘要】
1.一種時間同步的多源異構數據回放方法,其特征在于,包括如下步驟:
2.根據權利要求1所述的時間同步的多源異構數據回放方法,其特征在于,步驟s1中所述多源數據包括數據庫數據和文件數據,所述數據庫數據是試驗中通過數據采集軟件采集得到的實時數據,以表結構形式存儲在關系型數據庫中;所述文件數據是試驗后方可得到的非實時數據或者用于對比的試驗仿真數據。
3.根據權利要求2所述的時間同步的多源異構數據回放方法,其特征在于:
4.根據權利要求2所述的時間同步的多源異構數據回放方法,其特征在于:
5.根據權利要求2所述的時間同步的多源異構數據回放方法,其特征在于:
6.根據權利要求1所述的時間同步的多源異構數據回放方法,其特征在于,在步驟s2中,所述建立相應的數據模型中包括:
7.根據權利要求1-6任一項所述的時間同步的多源異構數據回...
【專利技術屬性】
技術研發人員:張增源,王藝欣雨,莫劍飛,王恒,劉升艷,
申請(專利權)人:昆明船舶設備研究試驗中心中國船舶集團有限公司七五〇試驗場,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。