
大数据匹配农业生产与流通_数据分析师考试
“农产品产量不少,消费量也不少,但是为什么价格忽高忽低?产量与消费量如何匹配?”
三年前,正是从这个问题出发,中国农业科学院农业信息研究所(以下简称农科院信息所)所长许世卫组织研究团队开始对“基于物联网技术的农业智能信息系统与服务平台”项目进行攻关。
近日,这项由科技部立项、农业部牵头组织、由许世卫担任首席科学家的“十二五”国家科技支撑计划项目顺利通过了验收。7月17日,科技部网站以“‘互联网+’和物联网助力传统农业升级”为切入点报道了这项研究成果。
该项目涵盖了现代农业的生产、农资、市场、仓储、管理等关键环节,由全国13家单位180多位研究人员历时3年共同完成。
作为国家农业信息化研究领域的“国家队”,农科院信息所承担了项目的子课题之一 ——农业生产与市场流通匹配管理及信息服务关键技术研究与示范的研究任务。
课题的研究要解决什么问题?有哪些创新与成果?近日,《中国科学报》记者就该课题进展和相关成果采访了项目首席科学家许世卫研究员。
创新农产品数据预处理技术
“农产品从生产到流通再到消费,既是物质流,也是信息流。”许世卫告诉《中国科学报》记者。
信息及时准确的监测对于农产品市场的正常运行至关重要。然而,近些年,我国农产品市场上价格暴涨或暴跌的情形并不鲜见。这一方面使农民的利益蒙受损失,另一方面,也让管理调控部门头疼不已。
如何才能提高市场信息监测预警的准确率?在许世卫看来,准确的基础数据是关键。“如果最原始的数据有误差,那么结论也很可能会出问题。”
研究农业生产与市场流通的匹配管理,恰恰就需要即时采集准确的动态数据。那么,准确的信息又从何而来呢?
“信息的获取方式一是传统人工方式,二是现代信息技术手段,还有一种是把两者结合”,许世卫告诉记者,在他们的研究中,就利用了这样的工具——“农信采”,这是农科院信息所研究团队与清华大学等高校、科研院所联合,历时多年攻关研制出的农产品市场信息采集利器。
这种只有手机大小的设备,却能解决信息采集中的大问题,尤其当前农业信息采集中的标准化与时效性问题。
“以苹果为例,虽然卖的都是苹果,但是品种、大小、品质等具体信息都不一样,如果只统计苹果的价格,就解读不出精确的信息。”许世卫说。而农信采植入农业部行业标准,对品种进行了细化;采用了GPS空间信息匹配、无线传输等技术,将市场、品种、价格等信息即时传到后台,实现农产品流通环节信息的及时输送。
尤其是针对农信采获取的数据与已有的海量农产品市场数据的融合问题,团队创新了农产品市场数据预处理技术,建立数据清理优化模型,识别数据采集中遇到的数据缺失与噪声,从而自动模拟缺失数据、清除异常数据与纠正错误数据。设备通过科学界定农产品种类、规范信息流程、预设信息误差提醒等对农产品市场信息采集进行了革命性提升。
该技术被广泛应用到市场信息采集工作中,先后在天津、河北、福建、广东、海南等11个省市,针对田头市场、批发市场、零售市场,选择粮食、蔬菜、水果、油料、肉类、蛋类、奶类和水产品8大类主要农产品的市场信息采集开展了推广应用。
研究农产品市场产销匹配管理
在夯实了数据基础之后,研究团队针对鲜活农产品产销匹配难度大、市场波动强等问题,对农产品市场产销匹配管理评价进行了研究。
经过资料统计和亲自调研,研究人员决定选取北京市、上海市和重庆市等基础数据比较完备的城市日常消费的若干主要蔬菜为研究对象,构建了生产与市场流通匹配管理评价模型。
他们选择运用灰色关联度、核密度估计等分析方法,分别从蔬菜生产、消费的数量、品种、时间、空间多个角度,构建了蔬菜生产与市场流通匹配管理评价模型,对各大城市蔬菜生产与流通消费的匹配情况进行了全面评估,重点分析了当前我国蔬菜产地转换、流通方式情况,对蔬菜产地销地之间的运输时间、交通状况、运输成本以及季节性匹配等问题进行了深入探讨。
同时,研究团队还完成了区域农产品不同种类消费量预测研究,突破区域农产品供需预测技术。 研究主要从产品的消费类型、不同农产品消费之间的互补替代关系,以及地区差异等3个方面进行了创新的分析和预测,将多种农产品的消费需求放在统一的分析框架下进行分析,从而实现了中国31个省区各种农产品的具体消费需求情况研究。
在多领域取得突破
“我们这个课题又分为5个小课题,每个课题都有5名以上高级职称人员组成的研究团队。”许世卫告诉《中国科学报》记者,项目研究的内容非常丰富。
历时3年的研究中,信息所的研究团队在匹配管理评估研究、农业生产极值监测预警技术研究、农产品市场流通感知与信息处理研究、跨平台匹配管理决策分析系统研制、农产品产销全程服务平台开发研究等方面均取得了多项成果。
以匹配管理评估研究为例,研究团队对农产品市场全息信息规范表达与编码技术进行了研究。团队提出了畜产品全息信息处理技术,依据已有相关统计信息指标体系及标准规范,构建了畜禽产品、畜牧业管理机构和草原建设利用统计指标体系。基于该标准,可以进行数字化传输与智能化处理,大大提高了原有指标体系所收集信息的完备性和兼容性。
许世卫表示,下一阶段他们的研究成果和技术能够更大范围地推广应用,在已取得的成绩的基础上,努力提高技术先进性与设备的实用性。
背景阅读
“基于物联网技术的农业智能信息系统与服务平台”项目包括超大规模精准化农业核心业务集成应用平台及关键性设备与系统研究、农资管理与流通智能信息平台研究与应用示范,粮棉仓储特征监测安全与质量管理关键技术及系统应用示范、农业生产与市场流通匹配管理及信息服务关键技术研究与示范等4个课题。由中国农业科学院农业信息研究所、中国科学院合肥物质科学研究院、中国科学院遥感应用研究所、合浦果香园食品有限公司等13家科研院校、高新企业单位承担。
项目取得了多项创新性技术成果:突破了移动应用程序(App)与电子地图集成病虫害快速响应系统的关键技术,建立了自然灾害预警与历史分析系统;制定了《农资商品电子代码标准》;研发了粮棉仓密度与体积、温度与水分、虫害等传感器及组网技术,开发完成了粮棉仓储特征检测信息的安全传输、数据库管理及其信息分析预测预警平台;提出了畜产品全息信息编码方案,突破了农业生产极值监测预警技术、农产品市场流通感知与信息处理技术。获得实用新型专利授权3项,申请专利28项,获得计算机软件著作权37项。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
2025 年,数据如同数字时代的 DNA,编码着人类社会的未来图景,驱动着商业时代的运转。从全球互联网用户每天产生的2.5亿TB数据, ...
2025-06-052025 年,数据如同数字时代的 DNA,编码着人类社会的未来图景,驱动着商业时代的运转。从全球互联网用户每天产生的2.5亿TB数据, ...
2025-05-27CDA数据分析师证书考试体系(更新于2025年05月22日)
2025-05-26解码数据基因:从数字敏感度到逻辑思维 每当看到超市货架上商品的排列变化,你是否会联想到背后的销售数据波动?三年前在零售行 ...
2025-05-23在本文中,我们将探讨 AI 为何能够加速数据分析、如何在每个步骤中实现数据分析自动化以及使用哪些工具。 数据分析中的AI是什么 ...
2025-05-20当数据遇见人生:我的第一个分析项目 记得三年前接手第一个数据分析项目时,我面对Excel里密密麻麻的销售数据手足无措。那些跳动 ...
2025-05-20在数字化运营的时代,企业每天都在产生海量数据:用户点击行为、商品销售记录、广告投放反馈…… 这些数据就像散落的拼图,而相 ...
2025-05-19在当今数字化营销时代,小红书作为国内领先的社交电商平台,其销售数据蕴含着巨大的商业价值。通过对小红书销售数据的深入分析, ...
2025-05-16Excel作为最常用的数据分析工具,有没有什么工具可以帮助我们快速地使用excel表格,只要轻松几步甚至输入几项指令就能搞定呢? ...
2025-05-15数据,如同无形的燃料,驱动着现代社会的运转。从全球互联网用户每天产生的2.5亿TB数据,到制造业的传感器、金融交易 ...
2025-05-15大数据是什么_数据分析师培训 其实,现在的大数据指的并不仅仅是海量数据,更准确而言是对大数据分析的方法。传统的数 ...
2025-05-14CDA持证人简介: 万木,CDA L1持证人,某电商中厂BI工程师 ,5年数据经验1年BI内训师,高级数据分析师,拥有丰富的行业经验。 ...
2025-05-13CDA持证人简介: 王明月 ,CDA 数据分析师二级持证人,2年数据产品工作经验,管理学博士在读。 学习入口:https://edu.cda.cn/g ...
2025-05-12CDA持证人简介: 杨贞玺 ,CDA一级持证人,郑州大学情报学硕士研究生,某上市公司数据分析师。 学习入口:https://edu.cda.cn/g ...
2025-05-09CDA持证人简介 程靖 CDA会员大咖,畅销书《小白学产品》作者,13年顶级互联网公司产品经理相关经验,曾在百度、美团、阿里等 ...
2025-05-07相信很多做数据分析的小伙伴,都接到过一些高阶的数据分析需求,实现的过程需要用到一些数据获取,数据清洗转换,建模方法等,这 ...
2025-05-06以下的文章内容来源于刘静老师的专栏,如果您想阅读专栏《10大业务分析模型突破业务瓶颈》,点击下方链接 https://edu.cda.cn/g ...
2025-04-30CDA持证人简介: 邱立峰 CDA 数据分析师二级持证人,数字化转型专家,数据治理专家,高级数据分析师,拥有丰富的行业经验。 ...
2025-04-29CDA持证人简介: 程靖 CDA会员大咖,畅销书《小白学产品》作者,13年顶级互联网公司产品经理相关经验,曾在百度,美团,阿里等 ...
2025-04-28CDA持证人简介: 居瑜 ,CDA一级持证人国企财务经理,13年财务管理运营经验,在数据分析就业和实践经验方面有着丰富的积累和经 ...
2025-04-27