全球衛星影像搜索引擎數據爬取與歸一化方法及系統技術方案

本發明專利技術實施例涉及衛星影像技術領域，具體公開了全球衛星影像搜索引擎數據爬取與歸一化方法及系統。本發明專利技術能夠從全球各衛星官方平臺實時獲取最新發布的遙感衛星影像數據，并預先計算衛星軌道預測的相關數據和產品，以此來提高用戶實時訪問時展示衛星影像的速度，能夠對獲取的衛星影像大數據進行高效精準的分類，能夠構建統一標準規范將海量衛星影像屬性信息一致性整合，能夠偏轉角度校正展示標準快視圖，能夠可視化展示用戶的興趣區域，能夠通過增加使用衛星云圖輔助預測遙感衛星軌道下的覆蓋區域的展示，更加有效更加準確的計算影像有效覆蓋率并展示衛星影像的有效覆蓋區域，通過考慮衛星的側擺能力參數，來支持用戶的自定義篩選影像功能。義篩選影像功能。義篩選影像功能。

【技術實現步驟摘要】
全球衛星影像搜索引擎數據爬取與歸一化方法及系統


[0001]本專利技術屬于衛星影像
，尤其涉及全球衛星影像搜索引擎數據爬取與歸一化方法及系統。

技術介紹

[0002]衛星遙感影像是重要的地理空間數據，近年來隨著衛星遙感技術的飛速發展，世界各國紛紛發射了一系列搭載不同傳感器的遙感衛星，采集了多平臺、多傳感器、多波段、多時空分辨率的遙感影像，數據體量爆發式增長，數據的種類和結構也越來越復雜。與此同時，衛星遙感影像已經在農業、林業、水利、交通、國土、環保、住建等多領域得到了廣泛應用。各行各業對衛星遙感影像的多樣性需求日益增長。因此獲取全球多源海量衛星影像數據，并按統一標準規范錄入數據庫，對各行業應用和相關科學研究具有十分重要的意義。
[0003]現有的軟件往往只提供幾顆或某幾個系列的衛星影像數據，未對全球海量的多源衛星影像進行有效的集成，且較少顧忌到不同數據源影像的異構問題，未劃分統一的標準規范對影像統一入庫，大大降低了影像匯總成果的可讀性。傳統的衛星影像有效覆蓋率方法大多是在相關平臺搜索和查詢對應的遙感影像，在通過影像快視圖查看整體的覆蓋情況，操作過程復雜，且無法獲取精確的有效覆蓋率值。且目前現有軟件未計算衛星影像有效覆蓋率，需要用戶通過快視圖逐圖查看，時間成本顯著增加。目前的軟件未考慮衛星側擺角對衛星成像效果質量的影響，需要用戶自行逐幅挑選所需角度的影像，極大影響工作效率。且現有的軟件只提供了較為單一的數據檢索功能，不能滿足各用戶的個性化需求，且存在興趣區域影像分割不精確的問題。

技術實現思路
r/>[0004]本專利技術實施例的目的在于提供全球衛星影像搜索引擎數據爬取與歸一化方法及系統，旨在解決
技術介紹
中提出的問題。
[0005]為實現上述目的，本專利技術實施例提供如下技術方案：
[0006]全球衛星影像搜索引擎數據爬取與歸一化方法，所述方法具體包括以下步驟：
[0007]使用大數據實時獲取程序，從全球各衛星官方平臺實時獲取最新發布的遙感衛星影像數據，并將所述遙感衛星影像數據根據數據來源初步分類歸檔存入本地數據庫；
[0008]利用超算中心的算力，在閑置時段對分類歸檔存入本地數據庫的所述遙感衛星影像數據進行精細分類處理；
[0009]構建統一標準規范，將精細分類處理之后的所述遙感衛星影像數據進行屬性信息一致性整合；
[0010]識別計算所述遙感衛星影像數據中各個衛星影像的視圖偏轉角度，根據所述視圖偏轉角度，將各個衛星影像進行標準角度校正，并將精細分類處理、屬性信息一致性整合和標準角度校正之后的遙感衛星影像數據上傳至服務器；
[0011]接收用戶的查詢信息，根據所述查詢信息確定用戶的興趣區域，并調取所述興趣
區域對應的遙感衛星影像數據可視化向用戶展示；
[0012]引入衛星云圖輔助衛星影像區域精準識別單朵云，顧及影像覆蓋區域內云離散分布的情況，通過每朵云的覆蓋區域與影像覆蓋區域的比值得到有效覆蓋率，利用所述有效覆蓋率和從衛星影像屬性信息中獲得衛星側擺角。
[0013]作為本專利技術實施例技術方案進一步的限定，所述使用大數據實時獲取程序，從全球各衛星官方平臺實時獲取最新發布的遙感衛星影像數據，并將所述遙感衛星影像數據根據數據來源初步分類歸檔存入本地數據庫具體包括以下步驟：
[0014]檢查目標平臺是否提供API，若有則直接調用遙感衛星影像數據，若沒有則使用大數據實時獲取程序獲取遙感衛星影像數據；
[0015]對所述遙感衛星影像數據進行數據結構分析與數據存儲；
[0016]對所述遙感衛星影像數據進行數據流分析；
[0017]對所述遙感衛星影像數據進行數據整理，并存入本地數據庫中。
[0018]作為本專利技術實施例技術方案進一步的限定，所述對分類歸檔存入本地數據庫的所述遙感衛星影像數據進行精細分類處理具體包括以下步驟：
[0019]采用基于層次的文本聚類算法對獲取的遙感衛星影像數據進行高效精準的分類；
[0020]對已分類影像進行準確性評估，確定完整準確的類別后，之后的獲取的遙感衛星影像數據按照此結果直接分類提取。
[0021]作為本專利技術實施例技術方案進一步的限定，所述構建統一標準規范，將精細分類處理之后的所述遙感衛星影像數據進行屬性信息一致性整合具體包括以下步驟：
[0022]利用顧忌空間特征的遙感影像數據一體化存儲策略、顧忌多源異構特征的衛星影像數據分段和分區存儲策略，設計統一的衛星影像數據屬性表；
[0023]采用屬性字段批量統一標準命名算法進行衛星影像屬性信息標準字段的屬性命名及修改；
[0024]根據所述衛星影像數據屬性表，動態擴充衛星影像屬性信息，對所述遙感衛星影像數據進行屬性信息一致性整合。
[0025]作為本專利技術實施例技術方案進一步的限定，所述衛星影像屬性信息標準字段包括：影像名稱、產品ID、衛星類型、傳感器類型、影像獲取日期、影像獲取時間、影像云量、景號、數據分類和wkid值。
[0026]作為本專利技術實施例技術方案進一步的限定，所述衛星影像的視圖偏轉角度的計算公式為：
[0027][0028][0029]通過標準快視圖的角點坐標按上述公式計算傾斜角度D
BD
，再計算不規范快視圖傾斜角度θ，則兩個傾斜角度的差值即為衛星影像的視圖偏轉角度。
[0030]全球衛星影像搜索引擎數據爬取與歸一化系統，所述系統包括衛星影像數據獲取單元、衛星影像數據分類單元、屬性信息一致性整合單元、衛星影像角度校正單元、興趣區域影像展示單元和衛星側擺角獲取單元，其中：
[0031]衛星影像數據獲取單元，用于使用大數據實時獲取程序，從全球各衛星官方平臺
實時獲取最新發布的遙感衛星影像數據，并將所述遙感衛星影像數據根據數據來源初步分類歸檔存入本地數據庫；
[0032]衛星影像數據分類單元，用于利用超算中心的算力，在閑置時段對分類歸檔存入本地數據庫的所述遙感衛星影像數據進行精細分類處理；
[0033]屬性信息一致性整合單元，用于構建統一標準規范，將精細分類處理之后的所述遙感衛星影像數據進行屬性信息一致性整合；
[0034]衛星影像角度校正單元，用于識別計算所述遙感衛星影像數據中各個衛星影像的視圖偏轉角度，根據所述視圖偏轉角度，將各個衛星影像進行標準角度校正，并將精細分類處理、屬性信息一致性整合和標準角度校正之后的遙感衛星影像數據上傳至服務器；
[0035]興趣區域影像展示單元，用于接收用戶的查詢信息，根據所述查詢信息確定用戶的興趣區域，并調取所述興趣區域對應的遙感衛星影像數據可視化向用戶展示；
[0036]衛星側擺角獲取單元，用于引入衛星云圖輔助衛星影像區域精準識別單朵云，顧及影像覆蓋區域內云離散分布的情況，通過每朵云的覆蓋區域與影像覆蓋區域的比值得到有效覆蓋率，利用所述有效覆蓋率和從衛星影像屬性信息中獲得衛星側擺角。
[0037]與現有技術相比，本專利技術的有益效果是：
[0038]本發本文檔來自技高網...

【技術保護點】

【技術特征摘要】
1.全球衛星影像搜索引擎數據爬取與歸一化方法，其特征在于，所述方法具體包括以下步驟：使用大數據實時獲取程序，從全球各衛星官方平臺實時獲取最新發布的遙感衛星影像數據，并將所述遙感衛星影像數據根據數據來源初步分類歸檔存入本地數據庫；利用超算中心的算力，在閑置時段對分類歸檔存入本地數據庫的所述遙感衛星影像數據進行精細分類處理；構建統一標準規范，將精細分類處理之后的所述遙感衛星影像數據進行屬性信息一致性整合；識別計算所述遙感衛星影像數據中各個衛星影像的視圖偏轉角度，根據所述視圖偏轉角度，將各個衛星影像進行標準角度校正，并將精細分類處理、屬性信息一致性整合和標準角度校正之后的遙感衛星影像數據上傳至服務器；接收用戶的查詢信息，根據所述查詢信息確定用戶的興趣區域，并調取所述興趣區域對應的遙感衛星影像數據可視化向用戶展示；引入衛星云圖輔助衛星影像區域精準識別單朵云，顧及影像覆蓋區域內云離散分布的情況，通過每朵云的覆蓋區域與影像覆蓋區域的比值得到有效覆蓋率，利用所述有效覆蓋率和從衛星影像屬性信息中獲得衛星側擺角。2.根據權利要求1所述的全球衛星影像搜索引擎數據爬取與歸一化方法，其特征在于，所述使用大數據實時獲取程序，從全球各衛星官方平臺實時獲取最新發布的遙感衛星影像數據，并將所述遙感衛星影像數據根據數據來源初步分類歸檔存入本地數據庫具體包括以下步驟：檢查目標平臺是否提供API，若有則直接調用遙感衛星影像數據，若沒有則使用大數據實時獲取程序獲取遙感衛星影像數據；對所述遙感衛星影像數據進行數據結構分析與數據存儲；對所述遙感衛星影像數據進行數據流分析；對所述遙感衛星影像數據進行數據整理，并存入本地數據庫中。3.根據權利要求1所述的全球衛星影像搜索引擎數據爬取與歸一化方法，其特征在于，所述對分類歸檔存入本地數據庫的所述遙感衛星影像數據進行精細分類處理具體包括以下步驟：采用基于層次的文本聚類算法對獲取的遙感衛星影像數據進行高效精準的分類；對已分類影像進行準確性評估，確定完整準確的類別后，之后的獲取的遙感衛星影像數據按照此結果直接分類提取。4.根據權利要求1所述的全球衛星影像搜索引擎數據爬取與歸一化方法，其特征在于，所述構建統一標準規范，將精細分類處理之后的所述遙感衛星影像數據進行屬性信息一致性整合具體包括以下步驟：利用顧忌空間特征的遙感影像數據一體化存儲策略、顧忌多源異構特征的衛星...

【專利技術屬性】
技術研發人員：雷帆，謝玲琳，曹里，楊凱鈞，魏繼德，吳燁，曾海波，張哲，熊偉，師俊峰，蔣琦，楊亮亮，賈慶仁，王強，胡芳，謝祥安，張澤旭，
申請(專利權)人：中國人民解放軍國防科學技術大學，
類型：發明
國別省市：