本項目研發目的: 1、建立以村-鄉-縣-州逐級填報審核、重點企業聯網直報、第三方數據補充校準的全州農村電商大數據采取、分析系統,全面、真實反映全州電商發展現狀,為政府提供決策依據。 2、電子商務數據具有數據量大、更迭頻率快、數據顆粒多、維度復雜,關聯性不穩定等特點。大數據技術能從龐大的數據集合中尋找、挖掘有價值的數據和規律,推動大數據技術在電子商務領域的實踐和應用,對把握電子商務行業動態,區域發展,企業經營狀況,消費者動向有直接意義;同時指導產業結構調整,科學布局有積極作用,幫助科學決策。 3、州級鄉村電商大數據平臺的建設以互聯網技術為基礎、以智慧鄉村體系建設為導向、以電子商務村級服務站管理及鄉村振興信息服務為職責,整合各類電商線上線下資源,匯總各類電商平臺數據資源的綜合管理系統。系統由電子商務大數據和智慧鄉村服務兩個模塊組成,構建一個多功能、全體系的農村電商綜合服務平臺。 4、建立州級大數據中心,對州、縣、鄉、村、企業各級實際運營數據進行數據采集、分析、展示。確保數據來源的真實性、即時性、關聯性。系統完全采用自動采集,州數據中心通過接口方式,對各業務系統的數據進行及時的采集。 性能需求分析: 1、易用性 系統基于B/S架構,對于終端用戶來說,極大簡化了安裝流程,減少系統磨合及人為阻力,保障軟件系統的成功實施以及使用;對于系統管理員來說,減少了大量用戶培訓工作,及各個系統終端軟件問題的維護工作。 2、可靠性 系統高穩健性包括系統的穩定性和數據的可靠性兩方面的含義。系統的穩定性是指發生局部硬件故障和軟件故障時有相應的旁路技術和容錯技術,任意單點故障都不影響整個系統的運行;系統的數據可靠性是指保證備份數據和共享交換數據的一致性,發生故障時,數據不損失??蓾M足系統容量彈性、成本與實施效率。 3、擴展性 系統實現數據的集中化管理,即所有數據均存放在云服務器,各客戶端均不存放任何數據,保證了數據的安全性的同時也便于數據的維護,可對下級單位出現的數據問題在服務器端直接解決,縮短了響應時間。軟件基于B/S混合架構,后臺統一管理版本、維護升級,無需對各個客戶端出現的軟件問題進行個別處理,降低了維護的難度。 4、安全性 系統安全對任何公司來說都非常重要,基于云端的大數據平臺設計,可徹底確保用戶數據的安全、穩定、可靠。可視化基于阿里云DATAV二次開發,系統安全性及穩定性有保障。 設計方案: 1、綜合建設思路 建立州級大數據中心,對州、縣、鄉、村、企業各級實際運營數據進行數據采集、分析、展示。確保數據來源的真實性、即時性、關聯性。系統完全采用自動采集,州數據中心通過接口方式,對各業務系統的數據進行及時的采集。 2、電商大數據數據源采集規劃 ①、州、縣、鄉、村各級實體線下網點日常農產品上下行的經營數據(日常交易量、物流包裹數、品牌培育情況等); ②、州縣兩級電商運營中心工作動態(電商培訓、品牌培育、物流服務等); ③、自動采集區域內重點企業(本地O2O企業)的日常交易情況; ④、自動采集各電商企業線上網店經營情況(本地平臺、jd、taobao等對接平臺) 3、API數據對接 通過API接口開發,對接國家商務部平臺,實現數據自動上報; 4、大數據分析 按區域(州縣兩級)、按業務模式(上下行、物流、追溯)、按行業(企業行業)、按企業(某類企業、某企業)、按品類(產品品類)、按品牌(公用品牌)等,以多種形式對采集數據進行匯總分析,形成數據報表(增長率、占比、月報表、季度表、年報表)。 5、大數據展示 采用DATAV可視化技術,實現數據圖表化、圖形化、立體化展示;實現州縣兩級電商運維數據的可視化展示。確保展示數據的自動更新和即時性; 電商大數據系統的構架必須遵循商務部數據接口開發規范,具體數據格式及功能模塊,遵循國家商務部業務系統。建立獨立數據庫,形成州級數據中心。數據采集之后,在本地形成數據存儲,采用API接口數據傳輸開發模式,通過API接口,實時對接傳輸到國家商務部業務系統。系統的功能建設必須滿足(州、縣、鄉、村)四級管理,各級管理用戶擁有獨立的數據采集后臺。實現區域內電商相關數據、電商相關信息采集上報。企業無需登錄國家商務部業務系統后臺,只需在本地平臺登錄,即可完成數據采集和上報。 本次系統提升,我們采取以下四個主要開發方向展開工作: 1、規范報表:規范采集數據格式和標準,采用國家大數據平臺數據格式; 2、規范API接口:遵循國家大數據平臺API接口開發規范; 3、自動生成數據分析報告:按區域、品類、時間等自動生成各類報表匯總; 4、可視化展示優化:對接實時數據,數據加工,數據可視化,滿足數字大屏開發。采用DATVA實現多維度,精細化的統計分析,秒級處理,實時采集建模,快速通過可視化圖表展示海量數據。電商運營團隊,可通過可視化大屏更加直觀、實時的看到數據變化情況,能夠第一時間做出反饋。 商務部業務系統統一平臺,只有國家級、省級、縣級、企業級共4級系統平臺。本系統的開發,形成了州級平臺,建立州級數據中心,實現州級電商大數據統籌。系統完成以下兩個主要功能: 1、建立州級統籌農村電商大數據中心,各縣級及企業上報數據,自動存儲到州級大數據平臺,形成獨立的州級數據庫,州級可查詢和管理各縣級各企業的上報數據; 2、企業日報通過API接口開發整合,企業日報上報后,自動存儲到州級平臺,并智能對接同步到國家平臺,真正實現了“企業端、縣級、州級、國家級“一次上報,多端數據同步。 |
1、功能滿足:大數據系統基于云計算技術構建成熟穩定的大數據基礎架構平臺,平臺擴展性和穩定性強,基于此平臺擴展建設某個區域云端大數據中心安全快捷,不需要在本地落地物理設備。系統將數據采集、數據清洗、數據挖掘等數據處理工作按工作流方式自動化運行,能夠監控各工作環節運行情況,并自動預警。 2、建設周期短,維護成本低:農村電商綜合服務平臺建立在云端,建設周期短。可以把更多的時間投入到更多的應用產品和數據服務上去?;谠朴嬎慵夹g建立云計算平臺,資源得到充分優化,可擴展性極強,在此基礎上建立的云端電子商務大數據中心建設成本比傳統數據中心要低很多。 3、智能檢測,動態跟蹤:監測全州700多個站點上下行、建設情況等數據,同時,通過自主研發的智能搜索引擎,自動監測大理州電子商務交易平臺,并及時納入到監測范圍。動態監測全省及各縣區市網絡零售數據,重要平臺、重要企業數據,自定義動態監測對象榜單,跟蹤數據動態處理流程,進一步突破時效的限制。 4、獲得軟件著作權2項。 |