農(nóng)業(yè)數(shù)據(jù)數(shù)據(jù)源分布廣、時(shí)效性強(qiáng)、類型多樣、結(jié)構(gòu)復(fù)雜和獲取困難等特點(diǎn).這決定了農(nóng)業(yè)大數(shù)據(jù)的收集和應(yīng)用具有復(fù)雜性和挑戰(zhàn)性。構(gòu)建農(nóng)業(yè)大數(shù)據(jù)應(yīng)用的架構(gòu)體系,對(duì)于集成、挖掘和使用在農(nóng)業(yè)生產(chǎn)和應(yīng)用中產(chǎn)生的大量數(shù)據(jù),具有較高的指導(dǎo)意義。農(nóng)業(yè)大數(shù)據(jù)服務(wù)是一個(gè)全新的研究領(lǐng)域。以農(nóng)業(yè)大數(shù)據(jù)中心建設(shè)為例,需要對(duì)平臺(tái)的總體架構(gòu)、功能設(shè)計(jì)及技術(shù)實(shí)現(xiàn)進(jìn)行系統(tǒng)的規(guī)劃實(shí)施,從而實(shí)現(xiàn)大數(shù)據(jù)服務(wù)的隨需應(yīng)變、標(biāo)準(zhǔn)化和自動(dòng)化,對(duì)于促進(jìn)和探索大數(shù)據(jù)在農(nóng)業(yè)方面的應(yīng)用具有一定的現(xiàn)實(shí)意義。
中交路橋科技基于農(nóng)田農(nóng)業(yè)應(yīng)用管理需求,搭建農(nóng)業(yè)大數(shù)據(jù)中心,通過數(shù)據(jù)中心的頂層設(shè)計(jì)和共建共享,實(shí)現(xiàn)產(chǎn)業(yè)數(shù)據(jù)資源的集中采集、統(tǒng)一管理和綜合利用,并為大數(shù)據(jù)分析與深度應(yīng)用提供依據(jù)。高標(biāo)準(zhǔn)農(nóng)田建設(shè)大數(shù)據(jù)中心是平臺(tái)的基礎(chǔ)和核心,提供各類涉農(nóng)數(shù)據(jù)(生產(chǎn)、監(jiān)管、服務(wù)等)的匯聚和共享、交換和綜合利用服務(wù),具備區(qū)域歷史縱向及空間橫向的數(shù)據(jù)查詢、分析、管理等功能,成為政府產(chǎn)業(yè)指導(dǎo)和“三農(nóng)”服務(wù)科學(xué)決策依據(jù)。
數(shù)據(jù)中心是平臺(tái)的基礎(chǔ)和核心,本模塊的主要任務(wù)是對(duì)農(nóng)業(yè)大數(shù)據(jù)中心進(jìn)行基礎(chǔ)數(shù)據(jù)庫的設(shè)計(jì)和建設(shè),依托于數(shù)據(jù)標(biāo)準(zhǔn)和資源目錄的規(guī)范要求,建立基地農(nóng)業(yè)專項(xiàng)數(shù)據(jù)庫,實(shí)現(xiàn)不同類別的數(shù)據(jù)進(jìn)行專項(xiàng)存儲(chǔ)與交換,并為大數(shù)據(jù)分析決策與深度應(yīng)用提供基礎(chǔ)。
1、數(shù)據(jù)中心倉(cāng)建設(shè)
· 數(shù)據(jù)采集:通過對(duì)資源目錄的梳理與標(biāo)準(zhǔn)建設(shè),規(guī)范數(shù)據(jù)建設(shè)體系,對(duì)數(shù)據(jù)通過多種方式進(jìn)行采集和處理,建設(shè)數(shù)據(jù)倉(cāng)庫,按需歸集農(nóng)田農(nóng)業(yè)數(shù)據(jù)資源,解決數(shù)據(jù)收集、匯總問題。
· 數(shù)據(jù)清洗:數(shù)據(jù)清理是將數(shù)據(jù)庫精簡(jiǎn)以除去重復(fù)記錄,并使剩余部分轉(zhuǎn)換成標(biāo)準(zhǔn)可接收格式的過程。數(shù)據(jù)清理標(biāo)準(zhǔn)模型是將數(shù)據(jù)輸入到數(shù)據(jù)清理處理器,通過一系列步驟“清理”數(shù)據(jù),然后以期望的格式輸出清理過的數(shù)據(jù)。數(shù)據(jù)清理從數(shù)據(jù)的準(zhǔn)確性、完整性、一致性、唯一性、適時(shí)性、有效性幾個(gè)方面來處理數(shù)據(jù)的丟失值、越界值、不一致代碼、重復(fù)數(shù)據(jù)等問題。
· 數(shù)據(jù)治理:數(shù)據(jù)治6理完成數(shù)據(jù)的抽取、清洗、轉(zhuǎn)換、整合、傳輸、加載等操作,通過數(shù)據(jù)處理模塊(ETL)和數(shù)據(jù)存儲(chǔ)子系統(tǒng)將農(nóng)業(yè)資源數(shù)據(jù)庫的全量數(shù)據(jù)按照主題維度與數(shù)據(jù)分層的要求進(jìn)行整合,建設(shè)數(shù)據(jù)質(zhì)量可追蹤管理的數(shù)據(jù)倉(cāng)。
2、領(lǐng)導(dǎo)駕駛艙
在農(nóng)田原有信息化基礎(chǔ)建設(shè)的基礎(chǔ)上,利用計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)、數(shù)據(jù)庫(數(shù)據(jù)倉(cāng)庫)技術(shù)、地理信息系統(tǒng)技術(shù)、WEB技術(shù)、多媒體技術(shù)等,搭建領(lǐng)導(dǎo)駕駛艙,實(shí)現(xiàn)農(nóng)業(yè)資源監(jiān)管、產(chǎn)業(yè)發(fā)展調(diào)控,實(shí)現(xiàn)對(duì)農(nóng)業(yè)事件的管理和調(diào)度,為管理人員辦公提供高效的手段,提高效率,從而提高農(nóng)業(yè)產(chǎn)量。
(1)數(shù)字產(chǎn)業(yè)一張圖
通過農(nóng)田數(shù)字產(chǎn)業(yè)一張圖對(duì)農(nóng)田產(chǎn)業(yè)資源數(shù)據(jù)進(jìn)行整合分析與展示,為農(nóng)田產(chǎn)業(yè)結(jié)構(gòu)調(diào)整和布局規(guī)劃提供直觀的數(shù)據(jù)支撐。以量化指標(biāo)系統(tǒng)衡量產(chǎn)業(yè)發(fā)展?fàn)顩r,為產(chǎn)業(yè)良性發(fā)展提供數(shù)據(jù)保障,推動(dòng)生態(tài)農(nóng)田農(nóng)業(yè)產(chǎn)業(yè)智能化數(shù)字化發(fā)展。包括規(guī)模化種植面積、產(chǎn)業(yè)主體、主體分析、農(nóng)作物種植類型、農(nóng)作物種植產(chǎn)量、年產(chǎn)量趨勢(shì)變化等。
(2)智慧物聯(lián)一張圖
通過高標(biāo)準(zhǔn)農(nóng)田智慧物聯(lián)一張圖對(duì)基地建設(shè)的智能裝備監(jiān)測(cè)數(shù)據(jù)進(jìn)行統(tǒng)計(jì)與分析,形成對(duì)基地負(fù)責(zé)人管理分析有意義的數(shù)據(jù)分析平臺(tái),展現(xiàn)基地設(shè)備的建設(shè)分布、監(jiān)測(cè)數(shù)據(jù)等,提供對(duì)基地設(shè)備規(guī)劃布局與各區(qū)域生產(chǎn)環(huán)境監(jiān)測(cè)農(nóng)事建議管理的數(shù)據(jù)分析支撐。主要展示設(shè)備在線情況、在線分布、蟲情數(shù)量、病蟲害分析、告警情況、病蟲害趨勢(shì)、病蟲害總覽、防治建議等。
(3)農(nóng)田監(jiān)管一張圖
以可視化的形式直觀展示基地種植情況、設(shè)備分布及環(huán)境監(jiān)測(cè)數(shù)據(jù)概覽。運(yùn)用地理信息可視化配置技術(shù),將地塊、傳感器、設(shè)備以色塊和圖標(biāo)的形式標(biāo)定在地圖上,形成可視化的基地實(shí)景圖。結(jié)合農(nóng)業(yè)物聯(lián)設(shè)備,基于IoT、智能算法、數(shù)據(jù)分析等能力,提供專業(yè)可靠的環(huán)境實(shí)時(shí)監(jiān)測(cè)服務(wù)、異常傳感數(shù)據(jù)告警、設(shè)備遠(yuǎn)程控制、數(shù)據(jù)分析應(yīng)用服務(wù)。方便農(nóng)業(yè)生產(chǎn)管理者查看基地信息,及時(shí)了解基地種植情況,為農(nóng)業(yè)生產(chǎn)管理者在基地的科學(xué)種植,合理決策方面提供有力的數(shù)據(jù)基礎(chǔ)。