從事大數據行業的朋友應該都知道大數據已經上升到了國家戰略高度,2015年8月31日,國務院印發了《促進大數據發展行動綱要》。旨在通過建立“用數據說話、用數據決策、用數據管理、用數據創新”的管理機制,實現基于數據的科學決策。
目前,我國每年善生并被存儲的數據總量超過800EB,相當于全人類講過的話160倍。我國的電子政務發展指數為0.6071,排名第63位。經過這幾年的發展的,已經偶60余個地方政府出臺了城市大數據發展計劃。
政務大數據處理平臺是一款匯集大數據處理、在線分析、數據挖掘、數據模型、可視化展現于一體的綜合性大數據分析平臺。它提供了基于hadoop存儲、數據立方體與計算的OLPA可視化分析功能,使用戶通過托拉拽的簡單操作即可在亞秒級的時間內完成多維度、全方位的數據分析,并以多種可視化方式展示分析結果。
國內提供大數據平臺架構的組織機構總體上來說不是很多,主要也是由于大數據開發偏底層,技術難度太大限制了它的普及程度。但能夠提供政務大數據解決方案的也是有一些的,這里就簡單介紹下大快搜索的政務大數據解決方案,以供學習參考。
首先,通過一張圖來看一下大快搜索的政務大數據解決的總體架構:
大快政務大數據解決方案的平臺特色:
1、基于人工只能的全文搜索引擎:各種政務文件、數據和各種檔案等一并匯總,提供全維度數據可用的,分權限高速全文搜索引擎,引擎基于自然語言處理和人工智能技術,支持模糊檢索,語義檢索,并提供高安全性的查詢權限管理,可根據不同的機構、級別設置不同查詢權限。
2、政務數據綜合管理平臺:數據互聯互通,通過雙數據集動態同步技術,實現各機構的數據統一匯總,便于第一時間掌握全面動態信息。
3、政務數據資源的管理平臺:可以有效的對各種異構數據有效的管理,政府可以逐步整合和管控各種社會數據資源,為大數據產業的發展打好數據資源基礎。
4、完善的大數據分析基礎運行環境:集成了完整的Hadoop系統,可以為各種大數據應用分析系統,提供統一完善的運行環境,并有效保障信息安全和在基礎軟件層面保證系統的互聯互通。
5、系統安全:內置系統安全組件和與市政務云互聯互通的無縫銜接功能。
6、全程管控功能:系統提供對各種數據源、數據交換過程、軟件、服務等運行狀態監控,以及數據交換的全流程跟蹤功能。
7、強大的容災備份功能:基于大數據的海量數據管理能力,對原有政務系統的數據,可以做到無縫的全自動災備還原。