大数据服务三农的初步分析与探索

返回 相似 举报
大数据服务三农的初步分析与探索_第1页
第1页 / 共11页
大数据服务三农的初步分析与探索_第2页
第2页 / 共11页
大数据服务三农的初步分析与探索_第3页
第3页 / 共11页
大数据服务三农的初步分析与探索_第4页
第4页 / 共11页
大数据服务三农的初步分析与探索_第5页
第5页 / 共11页
点击查看更多>>
资源描述:
TOPIC   专题 33大数据服务三农的初步分析与探索孙 忠 富 ,褚 金 翔 ,马 浚 诚 ,杜 克 明 ,郑 飞 翔中国农业科学院农业环境与可持续发展研究所,北京  100081摘要三农问题是当前中国密切关注的社会问题,大数据技术的发展为三农带来了新的机遇。首先,对大数据推动智慧农业发展的作用进行了深入分析,总结了农业大数据的基本特征、内涵及发展趋势,分析了大数据对解决三农问题的推动作用。其次,综合阐述了农业大数据发展瓶颈和主要问题,包括数据获取能力不够、系统性不强、数据挖掘与分析技术落后、数据质量控制与安全管理难度大等。最后,提出了大数据服务三农的途径,主要包括强化政府引导与推动、强化大数据技术创新等。关 键词农 业 大 数 据 ;智 慧 农 业 ;物 联 网 ;云 计 算中图分类号:S-01                  文献标识码:A                  doi: 10.11959/j.issn.2096-0271.2017028Preliminary analysis and exploration of big dataservice for agriculture, countryside and farmersAbstractThe issues of agriculture, countryside and farmers are receiving a lot of concerns in China. The development of big data technology brings new opportunities to solve the issues. Firstly, the role of big data to promote the development of wisdom agriculture was analyzed. Then, the basic characteristics, connotation and development trend of agricultural big data were summarized and the promotion of big data technology to solve the issues of agriculture, countryside and farmers was discussed. A sound exposition of the bottleneck and main problems of agricultural big data was presented. Finally, the path of big data technology serving agriculture, countryside and farmers, including governmental guidance and promotion, innovation of technology, was proposed.Key wordsagricultural big data, wisdom agriculture, internet of things, cloud computingSUN Zhongfu, CHU Jinxiang, MA Juncheng, DU Keming, ZHENG FeixiangInstitute of Environment and Sustainable Development in Agricultural, Chinese Academy of Agricultural Science, Beijing 100081, China2017028-1BIG DATA RESEARCH   大数据341  引言“ 三 农(农 业、农 村、农 民)”问 题 是现今中国社会密切关注的问题,从20世纪80年代开始,中央一号文件多次提到“三农”问题,主要包括:农民就业、收入、教育、医疗、社保土地流转、农业结构调整 、农 产 品 进 出 口 、农 村 市 场 建 设、环 境保护、经济发展、税费改革等问题,这些问题严重阻碍了农村的发展。随着农业改革的进一步深入,城乡差距日益增大,农民收入减缓,劳动力转移加剧,农村社会发 展 滞 后 ,引 发 了 农 村 一 系 列 的 问 题 ,使 得“ 三 农 ”问 题 更 加 复 杂 。要 解 决“ 三 农 ”问题,必须加强农业科技,利用信息技术加快“ 三 农 ”进 步,利 用 大 数 据 和 智 慧 的 力量 整 合 优 化“ 三 农 ”协 同 发 展 。科 技 是 农业发展的重要支撑,是国家粮食安全的有力保障,是农业现代化建设的抓手,要实现 农 业 持 续 稳 定 发 展 ,根 本 出 路 在 科 技 。必 须 抓 住 机 遇 ,深 化 改 革 ,坚 持 科 技 兴农 ,把“ 三 农 ”问 题 摆 在 更 突 出 的 位 置 ,突破体制障碍,推动农业科技进步,加大农业 投 入 ,为“ 三 农 ”问 题 的 解 决 注 入 强 劲动力。我国人口众多,农业资源总体紧缺,农业机械化综合水平较低,在农业生 产 领 域 ,电 子 、计 算 机 和 信 息 等 现 代技 术 的 应 用 还 远 未 普 及 ,由 于 耕 地 面 积不断减少和环境恶化,过度依靠资源开发、大 量 投 入 劳 动 力 、大 量 施 用 化 肥 等传统手段已无法有效提高农业产出,农业发展需要更智慧的技术打破传统农业面临的资源与环境难题。智慧型现代农业可使农业资源得到充分的科学利用 ,可 节 省 时 间 和 资 源 ,提 髙 工作效率,缓解人力资源的不足,减少不必要的浪费,最大限度地降低成本,实现农业精细化、高效化、绿色化发展。因此,发展智慧农业在许多国家已经成为一种共识 ,具 有 长 远 和 现 实 意 义 。目 前 ,以 互联网、移动互联网、物联网、大数据、云计算等技术为代表的现代信息技术,正向着数字化、网络化、智能化的方向发展,为我国农业现代化建设提供了强有力的工具。目前,我国已进入传统农业向现代农业加快转变的关键阶段,农业农村发展也 进 入 了 关 键 时 期 ,为 进 一 步 加 快 农 业现代化发展,突破制约我国农业农村发展 的 新 难 题 ,需 要 进 一 步 寻 求 新 的 思 路 、突破口。通过“互联网+农业”的模式,将现代信息技术与传统农业产业结合,通过网络将农业的各种要素整合起来,提 高 农 业 的 智 慧 水 平,才 能 突 破 资 源 与 环境 对 农 业 发 展 的 制 约 ,解 决“ 三 农 ”问 题1。物联网和云计算的普及促进了智慧农业的发展,同时也造成了数据的爆炸式增长,数据结构越来越复杂,而对数据的处 理 和 应 用 能 力 并 未 显 著 提 高 ,迫 切 需要新的技术解决这些问题,此时,大数据技术应运而生,作为信息技术的重大变革,大数据技术给信息技术的发展带来了新的方向2,3。2  农业大数据的特点大数据技术的产生将极大促进信息产业的创新发展,已经成为数据挖掘和应用的前沿技术。大数据规模大、结构复杂、内 容 多 样 ,超 出 了 现 有 的 数 据 处 理 能 力 ,因此,如何更好地处理大数据成为迫切需要解决的问题4。目 前 ,移 动 互 联 网 、物 联网和云计算等现代信息技术开始与农业深度 融 合 ,智 慧 农 业 涵 盖 的 范 围 越 来 越 广,这2016016-342016025-342016061-342017001-342017007-22017028-2TOPIC   专题 35必然会产生大量数据5。农 业 大 数 据 作 为我国大数据战略的重要组成部分,具有重要 的 战 略 意 义 。通 过 对 农 业 大 数 据 进 行 分析 ,快 速 获 得 有 价 值 的 内 容 ,从 而 对 农 业环 境 、农 产 品 、农 业 产 业 链 、农 业 市 场 进 行科学的管理和调控,达到优化农业资源配置 、服 务“ 三 农 ”的 目 的 。农业大数据就是运用大数据理论、技术和方法,解决农业或涉农领域数据的采集、存储、加工与应用等问题,是大数据理论在农业上的实践和应用。农业涉及范围广、影 响 人 口 多 、数 据 复 杂 、持 续 时 间 长 ,是 产 生 大 数 据 的 源 泉 。随 着 物 联 网 、云 计算、智慧农业的发展,农业大数据时代已经来临,但由于农业主体对象复杂,农业生产环境容易受外界干扰,因此,农业大数 据 也 有 复 杂 、多 变 、动 态 、不 确 定 等 特点,这对农业大数据的采集、整理、加工、分析应用提出了更高的要求5,6。2.1  内涵与特点农业大数据是大数据理论和技术在农 业 领 域 的 应 用 ,除 了 具 备 大 数 据 的 公 共属 性 ,还 具 有 农 业 数 据 自 身 的 特 点 。(1)数 据 来源 广农业大数据可以概括为4类:农业环境 与 资 源 大 数 据 、农 业 生 产 大 数 据 、农 业市场大数据和农业管理大数据,基本囊括从生产到销售的全过程。例如,与农业源头生产直接相关的是农业环境与资源大数据,农业环境与资源大数据又可分为3类:土地信息数据,如土地位置、地块面积 、海 拔 高 度 等 ;环 境 信 息 数 据 ,如 气 象数据、土壤水分数据、温湿度数据等;作物信息数据,如作物长势数据、病虫害发生分布情况数据等。农业生产大数据包括种植和养殖大数据。农业市场大数据包括市场供求信息、市场价格、利润等数据。农业管理大数据包括国际国内的农产品动态等信息。(2)数 据 结 构 复 杂农业大数据不仅包括文字、图形、影像等多媒体材料,还包括专家知识、模拟模型、产量数据库等非结构化数据。通常来自不同数据源的数据,甚至来自同一个数据源的数据,类似信息结构却完全不同。从农业大数据涉及的主体范围来看,包括农、林、牧、水产、兽医、园艺、土壤等整个农业科学领域,其中主要对象又涉及动物、植物、微生物、昆虫、生态等生命基础学科以及环境科学、食品 等。面对如此庞大的数据资源,从专业应用来看,应分步实施。首先,构建农业领域的专业数 据 资 源 ,然 后 ,逐 步 有 序 规 划 专 业 的 子领域数据资源,例如针对某一作物或某一领 域 的 全 过 程 数 据 采 集 、挖 掘 分 析、预 测和决策等7。(3)数 据 生 成链 长农业大数据以农业生产为中心,涵盖林业、牧业、渔业等子行业,同时涉及上下游相关产业,包括育种、化肥、农机、饲料、加工等,还包括宏观的农业经济数据,如作物产量、价格、生产数据、加工数据、灾 害 、病 虫 害 数 据 等 。上 述 各 种 数 据 的 集合,构成了整个农业产业链,包括农业生产的田间地头、市场流通、超市消费终端等各个环节,把各方数据汇总整合形成了生产 、流 通 、终 端 消 费 的 数 据 链 。(4)数 据 变异 性 大首先,影响农业生产的因素异常复杂 ,包 括 生 物 、环 境 、社 会 、经 济 等 方 面 ,都决定了对数据的采集、挖掘与分析应用的难度。其次,农业生产过程的主体是 生 物 ,易 受 外 界 环 境 和 管 理 等 因 素 制约 ,致 使 农 业 生 产 的 随 机 性 与 不 确 定 性 、多样性与变异性、个体形状与群体差异性 等 特 征 非 常 明 显 。另 外 ,整 个 农 业 生 产2017028-3BIG DATA RESEARCH   大数据36过程的很多环节,目前还未实现标准化、定量化和精准化,都容易产生数据的变异性8。2.2  主要应用领域(1)为精准农业提供数据支持精准农业的操作需要大数据的支撑,植物工厂、设施农业、大型机械生产作业时 ,需 要 大 量 的 作 物 、土 壤 、水 分 、空 气 等环境信息,同时,还要考虑品种、生产投入量 、病 虫 害 情 况 、作 物 长 势 等 影 响 ,不 同 地块的操作可能会千差万别,不同的地块、耕作深度、灌溉量、施肥量、营养元素比例都 会 有 很 大 的 不 同 ,因 此 ,必 须 要 有 丰 富 的农业基础大数据支撑。(2)为 农 产品可 追 溯 提 供了条 件对农产品从农田到餐桌实行全程的跟踪,有利于保证农产品质量,减少二次污 染 ,防 止 疾 病 的 发 生 。随 着 农 业 生 产 分工的不断细化,农产品的产业链也越来越长,追溯也变得越来越难,大数据技术的 发 展 为 农 产 品 的 可 追 溯 提 供 了条 件 ,生产端的监控可以保证农产品的产地和来源,运输环节的监控可以保证品质,加工零售端的监控可以减少污染的发生。同时,大数据可以减少生产过程中的浪费现象。(3)推动农业精准预测和管理大 数 据 在 产 品 营 销 、市 场 监 测 预 测 、生 产 资 料 管 理 、产 量 和 灾 害 预 测 、产 品 与市场供需分析等方面,发挥着巨大的作用。依托大数据采集平台以及大数据技术的分析与预测能力,根据产业动态、供需关系状况、市场经济数据、质量管理数据等信息,运用大数据技术,进行农产品预测和风险预警,并及时对外公布,积极引领市场发展。灾难管理结合大数据,将为人类预测灾难、防灾、减灾、救灾和恢复生产生活提供更大的帮助。另外,农业生产上游的种子、化肥、农药、地膜等数据,中游的气象、环境土壤、种植过程等数据以及下游的农产品加工、农产品销售等数据,都将对农业精准预测和管理起到重要的推动作用。(4)加速农业生物工程技术的发展传统的生物工程技术工作量大,耗费时间长。大数据的发展加速了生物技术的进程,过去的生物信息调查大多在温室和大田进行,现在可以通过计算机进行模拟,海量的基因信息可以利用云计算技术进行分析,建立农业生物基因大数据,进行分子设计和药物设计等,从而大大加快了生物工程技术的发展。大数据技术在植物表型(phenotyping)研究中也获得了大量应用,植物表型是指基因型和环境决定的形状、结构大小、颜色等生物体的外在性状。植物表型检测是植物表型组学研究的主要方向,可提供系统的技术数据给植物功能基因分析和环境影响研究。通过对植物表型进行实时监测 和 数 据 采 集 ,形 成 大 数 据 ,充 分 挖 掘 植物基因组对表型的影响,从而建立一套快速、准确的表型组学研究方法,为高通量、系统地研究基因组和表型组提供有力支撑。(5)优 化 农 业 资 源 配 置资源配置是农业生产中的重要环节,随着资源的安置和调配,数据也就产生了。农业大数据时代的到来更为农业资源的配置和优化提供了科学、合理高效的数据信息,例如对水资源的合理调配、品种资源分配、劳动力资源的分配等。通过对农业资源配置大数据进行分析 ,可 以 改 善 农 业 资 源 的 利 用 率 ,促 进 资源的合理分配,大力提高农业生产效率,节约农业生产资源,提高农业经济收入,改善“三农”问题。2016016-362016025-362016061-362017001-362017007-22017028-4TOPIC   专题 372.3  发展趋势伴随着物联网、云计算、移动互联网等信息技术的飞速发展,农业数据呈爆发式增长趋势。数据量级的极速增长以及数据维度的多样化发展,开启了农业大数据时代,农业大数据是农业智慧化、精准化、网络化的必然产物,是结构化、半结构化及非结 构 化 的 多 维 度 、多 粒 度 、多 模 型 、多 形 态的海量农业数据的抽象描述,其发展趋势如下。在农业生态环境监测与资源管理调度方面,利用高精度遥感设备,获得大气、水分、土壤、植被等信息,配合专家系统,实现智慧决策;利用基于物联网的精准感知技术,构建农业生产环境监控系统,实现对农业资源的自动监测,并将数据上传到云,积累大量的农业监测数据,为智慧农业提供数据支撑。在农业生产精细化管理与操作方面,从大田、设施园艺、果树生产、水产养殖、畜牧 等 子 领 域 收 集 大 量 的 数 据 ,为 智 能 化 管理和精细化操作提供数据基础,从而便于实现资源的合理利用,提高生产率。在溯源方面,通过对生产、加工、流通、销售环节的全面感知和信息融合,实现农产品的全程追溯,追溯过程中,产生大量的数据积累,最大程度地保障农产品的质量安全。在农业物流方面,利用射频识别技术(radio frequency identification,R F I D)实 现 产品 信息 的 采 集 与定位 跟 踪,采集大量的流通渠道信息数据,可大大提高 农 产 品 在 仓 储 和 货 运 中 的 效 率 ,推 动 智慧物流的发展。在农业气象灾害和病虫害自然灾害预测预报方面,整理采集灾害历史数据,总结灾害发生发展规律,提高对灾害的预测能力,提高监测预警能力,把握灾害最佳防控时机,最大程度地降低灾害风险。在农产品生产销售信息监测方面,整 合 历 史 数 据 ,开 展 农 产 品 电 子 商 务 、期 货交易等数据的采集监测,建设农产品加工采集体系,加强农产品资源信息库、国内外农产品数据库等的建设,建立覆盖全国的农产品数据库系统,实现国内外农产品生产者与消费者的精准对接,提高对接效率 ,减 少 浪 费 。3  大数据驱动“三农”发展3.1  大数据与智慧农业农业大数据是提高农村智慧化信息服务水平的主要因素。提高农村信息服务水平,不仅要加大农村信息服务基础设施的建设力度,而且要为农民提供准确的信息服务。通过整合目前已有的、分散的农村服务数据,建立农村信息服务大数据,推动数据的共享开放,从而打破信息“ 孤 岛 ”,提 高 数 据 利 用 率 。同 时 ,通 过对农村信息服务大数据的分析,掌握农民 的 信 息 需 求 偏 好。具 有 针 对 性 地 研 发新型的农村信息服务集成系统、涉农信息技术产品、涉农信息应用管理平台、农产品电子商务交易平台等9,提 高 信 息 的精准服务能力。将 大 数 据 应 用 于“ 三 农 ”,对 解 决 农 业发 展 、农 村 建 设、农 民 生 活 等 问 题 具 有 重要的推动作用。大数据是智慧农业发展的核心推动力。物联网、云计算等技术的发展 和 应 用 推 动 了 智 慧 农 业 的 进 程 ,通 过 对大 数 据 进 行 分 析 、推 理 和 挖 掘 ,发 现 规 律 ,获 得 知 识 ,产 生 智 慧 ,从 而 对 农 业 生 产 进行 智 能 化 控 制 和 决 策 管 理 。中 国 的“ 三 农 ”问题是一个非常复杂的问题,积攒的时间长,解决难度大,只有利用现代网络信息2017028-5BIG DATA RESEARCH   大数据38技 术 ,才 能 进 行 优 化 整 合,达 到 资 源 共 享的目。设施农业是当前智慧农业应用的典型代表,在设施农业温室中,通过实时采集环境监测数据,形成温室环境监控大数据。对其进行分析,可以得到相应的模型自动开启或者关闭指定设备,实现温室环境的智能调控。同时,根据水分含量数据,可以进行合理的灌溉操作,还可以根据监控大数据,对病虫害进行预测预报等10。当前,现代设施农业距离真正的智慧化还有很大的差距,需要综合考虑经济、社会、环境等多方面的因素,做出更的努力。3.2  大数据推动农业供给侧结构性改革农业大数据推动农业供给侧结构性改革,改革需要借助市场的手段实现,通过适应市场需求改善农产品的供求关系。通过建立农产品市场动态监测预警体系,获取不同区域、品种农产品市场行情数据,生产者、市民等各种消费行为数据,形成农产品市场大数据。通过对农产品市场大数据的分析,对农业生产结构进行调整 ,引 导 农 民 的 生 产 经 营 决 策 ,提 高 农 业生产经营的目的性,实现需求与供给的动态匹配。同时,可以对农产品市场进行主动性、前瞻性、针对性的调控,确保农产品市场供求关系的健康、平衡,提升决策部门的农业综合信息服务能力,从而进一步助推农业供给侧结构性改革。我国幅员辽阔,村落分散,交通不便,造成了农业基础差、农民收入水平低。在农 民 的 生 产 劳 动 和 农 业 科 研 活 动 中,积累了大量的历史数据,这些数据对于解决“三农”问题有着至关重要的作用。如果将这些历史数据加工处理成农业大数据系统和专家系统,再结合农业生产的现场信息,农民和农技专家在家就可观测到田地里的情况,从而对农业生产活动做出正确的选择。当前,在农产品流通、农业气象、农 产 品 安 全 溯 源 、病 虫 害 防 治 、土 壤 修 复、遗 传 育 种 等 多 个“ 三 农 ”领 域 ,都 可 以 利 用大数据进行智慧化管理。3.3  大数据服务“三农”的关键技术利 用 大 数 据 技 术 服 务“ 三 农 ”,是 促 进“三农”发展的重要途径。通过建立大数据系统,推动农业体制创新,提升农村信息化 服 务 水 平 ,提 高 农 民 收 入 ,加 快 农 业 现 代化发展。大数据服务“三农”的关键技术主 要 包 括 :多 源 异 构 大 数 据 获 取 技 术 、大数据与农业智能化融合技术、农业预警大数据技术、农产品溯源技术、大数据共享与服务技术等。(1)多源异构大数据获取技术通过利用地面物联网监测和遥感监测等多种手段,强化农业生产环境监测、植被生长状况监测和灾害监测;搭建农业物联网长 期 监 控 站 点 ,开 展 农 田 、林 地 、水 资 源 数据的长期定点监测与采集;通过农业大数据实时监测网络,建立农业生产智能化监测体系,从而获取农情、墒情、苗情、病虫情等多源异构大数据,为构建大数据系统,实现农业管理智能决策,提供数据支撑。(2)大数据与农业智能化融合技术推 进 农 业 物 联 网 技 术 的 应 用 ,产 生 并收集大量数据,为无人驾驶技术、无人机技术、机器人技术、自动化技术、精密机械技术、地理信息系统、导航技术、人工智能技术、图像处理技术、模式识别技术、机器视觉技术、传感器技术、LED应用技术等现代信息技术在农业中应用提供数据保障,从而加快农业生产智能化的发展进程。(3)农业预警大数据技术建设全国重点区域气象灾害、生物灾害监测站点,搭建气象灾害、动物疫情和2016016-382016025-382016061-382017001-382017007-22017028-6TOPIC   专题 39植 物 病 虫 害 上 报 和 指 挥 调 度 系 统 ,健 全 气象 灾 害 、动 物 疫 情 和 作 物 病 虫 害 监 测 体 系 ,通过农业预警大数据技术,提升智能监测、预防控制和指挥决策的智能化水平,提高监测预报的准确性。同时,基于农业预警大数据技术,建设农产品价格、产量、市场预警体系,食品安全预警体系,农业产业损害预警体系等。(4)农 产品 溯 源 技 术通过建立农产品溯源系统,实时、自动、完整地获取农产品生产过程中的环境、长势、灾害等全过程监测数据,农产品生产后 的 收 购 、仓 储 、运 输 、加 工 、销 售 等 环 节监测数据,生成相关的大数据系统,运用农产 品 溯 源 大 数 据 技 术 ,实 现 追 溯 的 精 准 定位和精准定时,从而精确、及时地查找问题的 根 源 ,实 现 有 数 可 查 、有 据 可 依 。同 时 ,建设包含农业、化肥、种子等资料的信息系统 ,建 立 健 全 制 度 规 范 ,为 农 业 监 管 机 构提供可依托的大数据系统11,12。(5)大数据共享与服务技术建立农业科技云服务平台,整合农业科研数据,完善农业专家系统,基于大数据共享与服务技术,建立共享模式,推动农业科技数据、知识的共享。汇聚农业科技系统的各方面力量,实现农业重点、难点 问 题 的 联 合 攻 关 ,形 成 农 业 科 研 、成 果转 化 、推 广 示 范 、农 民 培 训 、成 效 反 馈 等 一系列的农业大数据共享机制。4  农业大数据的主要问题与解决途径4.1  主要问题农 业 一 直 以 来 都 是 我 国 的 基 础 产 业 ,我国 农 业 面 临 着 资 源 短 缺 、气 候 灾 害 频 发 、生态安全遭到破坏、生物多样性下降等挑战。而且,农业涉及面广、数据复杂、受外界影响 大 ,当 前 的 物 联 网 技 术 又 不 够 完 善 ,传 感器种类不够丰富。因此,进一步加强以农业物 联 网 、云 计 算 、大 数 据 等 技 术 为 核 心 的 现代信息技术应用,通过现代信息技术与农业的深度融合,加强农业物联网、大数据技术 在 农 业 领 域 的 示 范 应 用 ,以 大 数 据 为 支撑,促进智慧农业的发展,是实现农业现代化的必经之路。(1)数 据 获 取 能 力差农业是大数据产生和应用的重要领域,农业大数据的来源广泛(如物联网的终端采集设备、农业网站在线资源等),导致了农业大数据的类型复杂,包括结构化数据、半结构化数据和非结构化数据等。因此,农业大数据的应用,首先要实现不同结构数据的融合。如何实现不同结构数据 的 存 储 、分 析 、处 理 和 展 示 ,将 是 农 业 大数据应用之前必须解决的问题。我国农业物 联 网 的 发 展 还 处 于 初 级 阶 段 ,数 据 获 取能力有限,生成的数据有限,不能满足智慧 农 业 对 大 数 据 的 需 求 ,也 造 成 了 当 前 的发展瓶颈。实时性是大数据分析处理中难以避免的问题之一,尤其是涉及天气、环境等时效性较强的数据时。因此,对大数据 进 行 挖 掘 分 析 时 ,必 须 考 虑 数 据 的 时 效性 ,从 而 实 现 数 据 的 最 有 效 利 用 。(2)大 数 据 挖 掘 技 术 缺 乏由于农业大数据具有数据量大、结构复杂等特点,不仅包括结构化的数据,还包括非结构化数据,结构化数据可以通过二维表结构来逻辑表达,存储在数据库里,而非结构化数据则不能用二维表逻辑来表现,非结构化数据还包括音频、视频、图片等非文本结构,采用传统的数据挖掘分析技术进行大数据开发,将会面临一系列的问题,怎样处理这些非结构化的数据,是亟待解决的问题。因此如何结合大数据的特点,研发适用于农业大数据的数据挖掘技术,如何在农业大数据2017028-7BIG DATA RESEARCH   大数据40处理的实时性和准确率之间取得平衡,如何运用模型进行数据的挖掘,如何实现大数据挖掘分析技术与农业领域的深度融合 等 问 题 ,都 将 是 农 业 大 数 据 领 域 的 研 究重点。(3)农 业大 数 据标准与安 全机制不完善农业大数据的特点决定了其多源性和复杂性,导致了农业大数据难以公开、共享,数据的安全难以保证,数据的来源和质量难以确保。与此同时,农业农村数据长期存在底数不清、核心数据缺失、数据质量不高、开发利用不够等问题,亟待解决。另外,在实际应用中,由于缺乏统一的数据标准等问题,信息“孤岛”和数据“沉睡”现象依然存在,严重影响了农业大数据 的 应 用 价 值 。同 时 ,依 据 我 国 现 有 的 信息 安 全 等 级 保 护 制 度 ,加 强 农 业 大 数 据 信息安全保障能力,是解决大数据安全的唯一出路。4.2  解决途径4.2.1  强化政府引导与推动作用从政府层面,要想推进农业大数据的发展,需要加强对大数据发展的引导,加强农业大数据相关技术人才队伍的建设,推动大数据技术及相关产业的发展,为农业大数据立法,建统一标准,推进大数据的共享开放。(1)加 强 农 业 大 数 据 顶 层 设 计与 政 策引导政府部门要做好政策引导和顶层设计,开展示范工程,提高示范力度加快推广 应 用 。相 关 决 策 部 门 应 尽 快 建 立 大 数 据平台,通过“互联网+”的思维实现大数据技术与“三农”的深度融合,促进大数据技术解决“三农”面临的问题。科研院所等大数据研究机构要时刻把握国际农业大数据的发展前沿,通过自主研发一批突破性的大数据关键技术,并积极引进国外先进技术,实 现 自 主 研 发 与 国 外 引 进 的 结 合。政 府 部 门积极设置相关应用示范项目,加强引导和推动,保障有序发展。国家发展和改革委员会为了推动大数据的发展,于2016年12月公布了一批大数据和“互联网+”领域国家工程实验室承担单位名单,清华大学联合笔者所在的研究所申请的大数据系统软件国家工程实验室成功入围。(2)推 动 大 数 据 技 术 及 相 关 产 业 的发展大数据技术的不断发展进步是大数据解决“三农”问题的关键。随着现代信息技术,如物联网、云计算、移动互联网等不断发展,大数据技术也在不断进步。在“三农 ”领 域 ,大 数 据 的 应 用 主 要 集 中 在 农 业气象预报、全球定位系统、水资源环境监测、土壤重金属污染监测、基于物联网技术的农业应用、农民生产生活应用以及农田地理信息系统,还包括环境资源、产品溯源安全、预测预报、生产资料管理、品流通和市场等领域。建设云聚工程、云殖工程、云安工程,推动大数据相关产业的发展。(3)建立大数据共享开放机制数据标准是实现共享的先决条件,数据共享是产生大数据的重要途径。通过大数 据 的 共 享 开 放 ,才 能 够 达 到 资 源 利 用 的最 大 化 ,实 现 互 惠 互 利 。要 加 强 数 据 立 法 ,为 农 业 信 息 公 开 提 供 法 律 保 障 、利 益 保障,保证知识产权不受侵犯;建立大数据联盟和统一的数据标准,通过政府协调和企 业 的 参 与 ,建 立 可 持 续 的 商 业 模 式 ,实现社会的创新管理,为解决“三农”问题提供有力的决策保障。(4)加 强 农 业 大 数 据 相 关 技 术人 才 队伍的建设人才队伍建设是实现技术发展进步的2016016-402016025-402016061-402017001-402017007-22017028-8TOPIC   专题 41重要途径,我国农业信息技术专业人才队伍 缺 乏 。因 此 ,科 研 机 构 、高 校 等 单 位 应 该加强对大数据人才的培养,为我国农业发展输送人才。同时,政府部门应鼓励农业信息化专业人才创业,开办对“三农”大数据 进 行 分 析 的 企 业 ,以 此 巩 固 大 数 据 产 业在农业上的应用。4.2.2  推动大数据技术创新大数据的发展和应用是一个复杂的过程 ,涉 及 技 术 、管 理 、政 策 等 多 个 方 面 ,必须要建立创新发展机制。以大数据技术为核心,建立农业现代化技术体系,依靠农业技术创新和组织创新,加强农业基础数据 库 构 建 、农 业 领 域 智 能 模 型 研 发、大 数据系统平台搭建,实现农业的健康有序发展。(1)突破大数据关键技术加强大数据的基础理论研究、科学方法创新,完善大数据学科体系的建设,是推进农业发展的重要抓手。当前,应进一步加强对大数据的生命周期、演化与传播规 律 ,大 数 据 获 取 、分 析 、展 示 ,多 源 非 结构化处理技术方面的研究,搭建大数据软件平台,开展大数据与人工智能、大数据与农业机械自动驾驶、农业无人机、农业操 作 机 械 手 、大 数 据 与 病 虫 害 自 动 识 别 等方面的研究。(2)夯实农业大数据基础现代农业基准大数据是指现代农业建设过程中涉及的生产、经营、管理等各种活动 所 依 赖 的 标 准 化 、基 础 性 、系 统 性 数 据 。目前,我国农业基准大数据存在数据资源少、数 据 结 构 复 杂 、数 据 深 度 不 够 、缺 乏 统一的数据标准规范等问题。为加强农业基准大数据的应用,提高其对“三农”的指导意义,应进一步加强完善农业自然资源基准大数据、现代农业生产基准大数据、现代农业市场基准大数据、现代农业管理基准大数据。建立统一的数据采集、传输、存储、共享标准,夯实我国农业发展的数据基础。(3)创新 大 数 据农 业 应用农业信息技术的发展与应用离不开相关技术理论、方法的研究与创新。大数据理论方法的研究、大数据技术的发展应用是解决“三农”问题的重要保障。数据科学已经成为了科研的第四范式,如何实现数据 科 学 与 农 业 领 域 的 深 度 融 合 ,创 新 大 数据科学的农业应用,是提高农业生产效率的重要途径。当前,需要加强数据科学与农业相关学科之间的互动及深度融合机制研究,拓展大数据计算模型、作物模型与模拟、智能控制理论与技术、农业监测预警技术的研究,加强大数据可视化呈现与精 准 化 推 送 等 方 面 的 研 究 ,为 农 业 发 展 提供理论支撑13。5  结束语大数据技术的发展,为解决“三农”问题带来了新的机遇,大数据推动了农业结 构 战 略 性 调 整 和 发 展 方 式 的 转 变 ,引 领了智慧农业的发展,但是,农大数据仍然存在很大的局限性,如数据获取能力不够 、系 统 性 不 强 、数 据 挖 掘 与 分 析 技 术 落后、数据质量控制与安全管理难度大等。因 此 ,应 进 一 步 开 展 农 业 大 数 据 智 能 学 习与分析模型系统关键技术研究,将人工智能、数据挖掘、机器学习等技术与农业领域深度融合,充分分析农业生产的特点,针对我国“三农”面临的实际问题,建立针对性的模型进行大数据分析处理,实现农业决策的智能化、精确和科学化。随着大数据技术与我国农业领域的深度融合,通过 大 数 据 解 决 我 国“ 三 农 ”面 临 的 问 题 已成 为 一 条 重 要 的 途 径 。在 新 一 轮 农 业 现 代2017028-9BIG DATA RESEARCH   大数据42化建设中,要将农业大数据纳入国家农业信 息 化 发 展 战 略 ,夯 实 智 慧 农 业 的 基 石 ,让大数据创造出真正的智慧,支撑智慧农业的稳健发展。参考文献:1  刘林森.  现代信息化推动精确农业发展J. 信息化建设, 2010(3): 51-53.LIU L S. Modern information technology promotes the development of precision agricultureJ. Informatization Construction, 2010(3): 51-53.2  程学旗, 兰艳艳. 网络大数据的文本内容分析J. 大数据. 2015, 1(1): 2015029.CHENG X Q, LAN Y Y. Text content analysis for web big data J. Big Data Research, 2015, 1(1): 2015029.3  李国杰. 对大数据的再认识J. 大数据, 2015, 1(1): 2015001.LI G J. Further understanding of big dataJ. Big Data Research, 2015, 1(1): 2015001.4  张浩然, 李中良, 邹腾飞, 等. 农业大数据综述J. 计算机科学, 2014, 41(S2): 387-392.ZHANG H R, LI Z L, ZOU T F, et al. Overview of agriculture big data researchJ. Computer Science, 2014, 41(S2): 387-392.5  孙忠富, 杜克明, 郑飞翔, 等. 大数据在智慧农业中研究与应用展望J. 中国农业科技导报, 2013, 15(6): 63-71.SUN Z F, DU K M, ZHENG F X, et al. Perspectives of research and application of big data on smart agricultureJ. Journal of Agricultural Science and Technology, 2013, 15(6): 63-71.6  许世卫, 王东杰, 李哲敏. 大数据推动农业现代化应用研究J. 中国农业科学, 2015, 48(17): 3429-3438.XU S W, WANG D J, LI Z M. Application research on big data prom
展开阅读全文

copyright@ 2018-2020 华科资源|Richland Sources版权所有
经营许可证编号:京ICP备09050149号-1
    

     京公网安备 11010502048994号