[發明專利]一種高寒草地數據處理方法及管理系統在審
| 申請號: | 201810312021.5 | 申請日: | 2018-04-09 |
| 公開(公告)號: | CN108763273A | 公開(公告)日: | 2018-11-06 |
| 發明(設計)人: | 胡月明;曄沙 | 申請(專利權)人: | 華南農業大學 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30 |
| 代理公司: | 佛山市廣盈專利商標事務所(普通合伙) 44339 | 代理人: | 李俊 |
| 地址: | 510642 廣*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 草地 管理系統 數據存儲 數據分析 數據處理 數據管理系統 數據結構 構建 倉庫 | ||
1.一種高寒草地數據處理方法,其特征在于,包括以下步驟
將原始高寒草地數據導入至高寒草地數據管理系統;
設計高寒草地數據主題表,并基于所述高寒草地數據主題表在所述高寒草地數據Hadoop分布式文件系統中構建Hive數據存儲倉庫;
對所述高寒草地數據主題表之間進行表關聯處理。
2.如權利要求1所述的高寒草地數據處理方法,其特征在于,所述高寒草地數據處理方法還包括以下步驟:
搭建所述高寒草地數據管理平臺。
3.如權利要求2所述的高寒草地數據處理方法,其特征在于,所述高寒草地數據處理方法還包括以下步驟:
基于用戶需求進行高寒草地數據分析;
輸出高寒草地數據分析結果。
4.如權利要求1所述的高寒草地數據處理方法,其特征在于,所述設計高寒草地數據主題表包括以下步驟,篩選所述高寒草地數據字段,篩選條件為:
是否為草地生態退化評價所需數據字段;
是否能通過字段數據分析挖掘對草地生態未來趨勢性問題進行預測;
字段數據間是否具有關聯性。
5.如權利要求4所述的高寒草地數據處理方法,其特征在于,所述高寒草地數據主題表包括監測站主題表、草地類型主題表、生物量主題表、氣象主題表、水文主題表;每個主題表中具有多個字段。
6.如權利要求1所述的高寒草地數據處理方法,其特征在于,所述原始高寒草地數據包括歷史高寒草地數據和實時高寒草地數據;
所述導入原始高寒草地數據至高寒草地數據管理平臺包括以下步驟;
從歷史數據庫中提取歷史高寒草地數據并導入至所述高寒草地數據Hadoop分布式文件系統;
導入實時高寒草地數據。
7.如權利要求6所述的高寒草地數據處理方法,其特征在于,基于Sqoop工具將所述歷史高寒草地數據從歷史數據庫導入至所述高寒草地數據Hadoop分布式文件系統。
8.如權利要求7所述的高寒草地數據處理方法,其特征在于,所述導入實時高寒草地數據包括以下步驟:
基于監測站站點采集實時高寒草地數據;
對所述實時高寒草地數據進行文本化處理,每條實時高寒草地數據中不同字段的信息采用制表符分隔,不同高寒草地數據之間采用換行符分隔;
將文本化處理后的實時高寒草地數據導入至所述高寒草地數據Hadoop分布式文件系統。
9.如權利要求1所述的高寒草地數據處理方法,其特征在于,所述導入初始高寒草地數據至高寒草地數據管理系統還包括以下步驟:
基于所述高寒草地數據獲取的監測站點所在行政單位的行政區域代碼對所述高寒草地數據進行分區,同一個行政區的所有高寒草地數據位于同一分區內。
10.一種高寒草地數據管理系統,其特征在于,所述高寒草地數據管理系統包括
數據存儲層:用于儲存原始高寒草地數據,包括有多個數據節點,所述多個數據節點分布式共同儲存有原始高寒草地數據;
數據分析層:用于基于Hive從所述數據存儲層中提取信息;
用戶接口模塊:用于與用戶進行交互。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于華南農業大學,未經華南農業大學許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/201810312021.5/1.html,轉載請聲明來源鉆瓜專利網。





