京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据匹配农业生产与流通_数据分析师考试
“农产品产量不少,消费量也不少,但是为什么价格忽高忽低?产量与消费量如何匹配?”
三年前,正是从这个问题出发,中国农业科学院农业信息研究所(以下简称农科院信息所)所长许世卫组织研究团队开始对“基于物联网技术的农业智能信息系统与服务平台”项目进行攻关。
近日,这项由科技部立项、农业部牵头组织、由许世卫担任首席科学家的“十二五”国家科技支撑计划项目顺利通过了验收。7月17日,科技部网站以“‘互联网+’和物联网助力传统农业升级”为切入点报道了这项研究成果。
该项目涵盖了现代农业的生产、农资、市场、仓储、管理等关键环节,由全国13家单位180多位研究人员历时3年共同完成。
作为国家农业信息化研究领域的“国家队”,农科院信息所承担了项目的子课题之一 ——农业生产与市场流通匹配管理及信息服务关键技术研究与示范的研究任务。
课题的研究要解决什么问题?有哪些创新与成果?近日,《中国科学报》记者就该课题进展和相关成果采访了项目首席科学家许世卫研究员。
创新农产品数据预处理技术
“农产品从生产到流通再到消费,既是物质流,也是信息流。”许世卫告诉《中国科学报》记者。
信息及时准确的监测对于农产品市场的正常运行至关重要。然而,近些年,我国农产品市场上价格暴涨或暴跌的情形并不鲜见。这一方面使农民的利益蒙受损失,另一方面,也让管理调控部门头疼不已。
如何才能提高市场信息监测预警的准确率?在许世卫看来,准确的基础数据是关键。“如果最原始的数据有误差,那么结论也很可能会出问题。”
研究农业生产与市场流通的匹配管理,恰恰就需要即时采集准确的动态数据。那么,准确的信息又从何而来呢?
“信息的获取方式一是传统人工方式,二是现代信息技术手段,还有一种是把两者结合”,许世卫告诉记者,在他们的研究中,就利用了这样的工具——“农信采”,这是农科院信息所研究团队与清华大学等高校、科研院所联合,历时多年攻关研制出的农产品市场信息采集利器。
这种只有手机大小的设备,却能解决信息采集中的大问题,尤其当前农业信息采集中的标准化与时效性问题。
“以苹果为例,虽然卖的都是苹果,但是品种、大小、品质等具体信息都不一样,如果只统计苹果的价格,就解读不出精确的信息。”许世卫说。而农信采植入农业部行业标准,对品种进行了细化;采用了GPS空间信息匹配、无线传输等技术,将市场、品种、价格等信息即时传到后台,实现农产品流通环节信息的及时输送。
尤其是针对农信采获取的数据与已有的海量农产品市场数据的融合问题,团队创新了农产品市场数据预处理技术,建立数据清理优化模型,识别数据采集中遇到的数据缺失与噪声,从而自动模拟缺失数据、清除异常数据与纠正错误数据。设备通过科学界定农产品种类、规范信息流程、预设信息误差提醒等对农产品市场信息采集进行了革命性提升。
该技术被广泛应用到市场信息采集工作中,先后在天津、河北、福建、广东、海南等11个省市,针对田头市场、批发市场、零售市场,选择粮食、蔬菜、水果、油料、肉类、蛋类、奶类和水产品8大类主要农产品的市场信息采集开展了推广应用。
研究农产品市场产销匹配管理
在夯实了数据基础之后,研究团队针对鲜活农产品产销匹配难度大、市场波动强等问题,对农产品市场产销匹配管理评价进行了研究。
经过资料统计和亲自调研,研究人员决定选取北京市、上海市和重庆市等基础数据比较完备的城市日常消费的若干主要蔬菜为研究对象,构建了生产与市场流通匹配管理评价模型。
他们选择运用灰色关联度、核密度估计等分析方法,分别从蔬菜生产、消费的数量、品种、时间、空间多个角度,构建了蔬菜生产与市场流通匹配管理评价模型,对各大城市蔬菜生产与流通消费的匹配情况进行了全面评估,重点分析了当前我国蔬菜产地转换、流通方式情况,对蔬菜产地销地之间的运输时间、交通状况、运输成本以及季节性匹配等问题进行了深入探讨。
同时,研究团队还完成了区域农产品不同种类消费量预测研究,突破区域农产品供需预测技术。 研究主要从产品的消费类型、不同农产品消费之间的互补替代关系,以及地区差异等3个方面进行了创新的分析和预测,将多种农产品的消费需求放在统一的分析框架下进行分析,从而实现了中国31个省区各种农产品的具体消费需求情况研究。
在多领域取得突破
“我们这个课题又分为5个小课题,每个课题都有5名以上高级职称人员组成的研究团队。”许世卫告诉《中国科学报》记者,项目研究的内容非常丰富。
历时3年的研究中,信息所的研究团队在匹配管理评估研究、农业生产极值监测预警技术研究、农产品市场流通感知与信息处理研究、跨平台匹配管理决策分析系统研制、农产品产销全程服务平台开发研究等方面均取得了多项成果。
以匹配管理评估研究为例,研究团队对农产品市场全息信息规范表达与编码技术进行了研究。团队提出了畜产品全息信息处理技术,依据已有相关统计信息指标体系及标准规范,构建了畜禽产品、畜牧业管理机构和草原建设利用统计指标体系。基于该标准,可以进行数字化传输与智能化处理,大大提高了原有指标体系所收集信息的完备性和兼容性。
许世卫表示,下一阶段他们的研究成果和技术能够更大范围地推广应用,在已取得的成绩的基础上,努力提高技术先进性与设备的实用性。
背景阅读
“基于物联网技术的农业智能信息系统与服务平台”项目包括超大规模精准化农业核心业务集成应用平台及关键性设备与系统研究、农资管理与流通智能信息平台研究与应用示范,粮棉仓储特征监测安全与质量管理关键技术及系统应用示范、农业生产与市场流通匹配管理及信息服务关键技术研究与示范等4个课题。由中国农业科学院农业信息研究所、中国科学院合肥物质科学研究院、中国科学院遥感应用研究所、合浦果香园食品有限公司等13家科研院校、高新企业单位承担。
项目取得了多项创新性技术成果:突破了移动应用程序(App)与电子地图集成病虫害快速响应系统的关键技术,建立了自然灾害预警与历史分析系统;制定了《农资商品电子代码标准》;研发了粮棉仓密度与体积、温度与水分、虫害等传感器及组网技术,开发完成了粮棉仓储特征检测信息的安全传输、数据库管理及其信息分析预测预警平台;提出了畜产品全息信息编码方案,突破了农业生产极值监测预警技术、农产品市场流通感知与信息处理技术。获得实用新型专利授权3项,申请专利28项,获得计算机软件著作权37项。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据处理的全流程中,数据呈现与数据分析是两个紧密关联却截然不同的核心环节。无论是科研数据整理、企业业务复盘,还是日常数 ...
2026-03-06在数据分析、数据预处理场景中,dat文件是一种常见的二进制或文本格式数据文件,广泛应用于科研数据、工程数据、传感器数据等领 ...
2026-03-06在数据驱动决策的时代,CDA(Certified Data Analyst)数据分析师的核心价值,早已超越单纯的数据清洗与统计分析,而是通过数据 ...
2026-03-06在教学管理、培训数据统计、课程体系搭建等场景中,经常需要对课时数据进行排序并实现累加计算——比如,按课程章节排序,累加各 ...
2026-03-05在数据分析场景中,环比是衡量数据短期波动的核心指标——它通过对比“当前周期与上一个相邻周期”的数据,直观反映指标的月度、 ...
2026-03-05数据治理是数字化时代企业实现数据价值最大化的核心前提,而CDA(Certified Data Analyst)数据分析师作为数据全生命周期的核心 ...
2026-03-05在实验检测、质量控制、科研验证等场景中,“方法验证”是确保检测/分析结果可靠、可复用的核心环节——无论是新开发的检测方法 ...
2026-03-04在数据分析、科研实验、办公统计等场景中,我们常常需要对比两组数据的整体差异——比如两种营销策略的销售额差异、两种实验方案 ...
2026-03-04在数字化转型进入深水区的今天,企业对数据的依赖程度日益加深,而数据治理体系则是企业实现数据规范化、高质量化、价值化的核心 ...
2026-03-04在深度学习,尤其是卷积神经网络(CNN)的实操中,转置卷积(Transposed Convolution)是一个高频应用的操作——它核心用于实现 ...
2026-03-03在日常办公、数据分析、金融理财、科研统计等场景中,我们经常需要计算“平均值”来概括一组数据的整体水平——比如计算月度平均 ...
2026-03-03在数字化转型的浪潮中,数据已成为企业最核心的战略资产,而数据治理则是激活这份资产价值的前提——没有规范、高质量的数据治理 ...
2026-03-03在Excel办公中,数据透视表是汇总、分析繁杂数据的核心工具,我们常常通过它快速得到销售额汇总、人员统计、业绩分析等关键结果 ...
2026-03-02在日常办公和数据分析中,我们常常需要探究两个或多个数据之间的关联关系——比如销售额与广告投入是否正相关、员工出勤率与绩效 ...
2026-03-02在数字化运营中,时间序列数据是CDA(Certified Data Analyst)数据分析师最常接触的数据类型之一——每日的营收、每小时的用户 ...
2026-03-02在日常办公中,数据透视表是Excel、WPS等表格工具中最常用的数据分析利器——它能快速汇总繁杂数据、挖掘数据关联、生成直观报表 ...
2026-02-28有限元法(Finite Element Method, FEM)作为工程数值模拟的核心工具,已广泛应用于机械制造、航空航天、土木工程、生物医学等多 ...
2026-02-28在数字化时代,“以用户为中心”已成为企业运营的核心逻辑,而用户画像则是企业读懂用户、精准服务用户的关键载体。CDA(Certifi ...
2026-02-28在Python面向对象编程(OOP)中,类方法是构建模块化、可复用代码的核心载体,也是实现封装、继承、多态特性的关键工具。无论是 ...
2026-02-27在MySQL数据库优化中,索引是提升查询效率的核心手段—— 面对千万级、亿级数据量,合理创建索引能将查询时间从秒级压缩到毫秒级 ...
2026-02-27