
新价值大数据解决城市大问题_数据分析师
城市化进程让人们在享受现代文明成果的同时,也带来了交通拥堵、能耗增加、空气恶化等问题。而随着大数据分析技术的发展,大数据也能运用在城市管理与环境治理之中。2014年5月,环境保护部信息中心与微软(中国)签订了谅解备忘录,双方将共同优化Urban Air(基于城市大数据计算城市大气质量的计算模型),进一步研发该模型为政府环境管理服务的功能,共同探讨并践行大数据在环保领域的业务化应用。
近日,2014全国环境信息技术与应用交流会在海口举行,围绕“十二五”环境信息化任务目标和国内外环境信息技术发展趋势,大会通过主题报告、高峰对话、专题论坛等形式,就“改革促融合,信息强环保”的主题进行广泛交流和经验分享。那么,大数据将如何在环境信息领域创新应用,该应用将对环境治理发挥怎样的作用?会上,记者采访了微软亚洲研究院主管研究员郑宇博士,为大家揭开大数据里的秘密。
微软Urban Air
气象部门已经能够对于天气的变化做到较为准确的预报,而这种对于规律的认知,现已延伸到了与人类生活同样密切的其他方面。“今天几点出门锻炼健康?”“下班后哪条道路会更拥堵?”“明天城市里哪一片区域PM2.5会比较高?”……“这些看似不可预知的事件,利用大数据都可以进行精确模拟和预测。”郑宇说。
“我不是环境专家,这些对于环境保护方面的分析全部基于对异构数据的研究。”郑宇举例说,在同一时刻、同一城市的不同地方,空气质量受到交通流量、工业排放、道路密度等因素影响差别会很大,这些因素在城市不同地方都不一样,这让我们很难精确地判断一个没有建空气质量监测站点的地方,空气质量到底如何,它不能用平均值来替代,因为是非线性的。
“怎么做呢?我们用两部分的大数据做实时的细粒度空气质量分析,第一部分是已有空气质量监测站点实时和历史观测数据。第二部分加了其他数据源,其中第一个就是气象条件,比如说刮风、下雨、风速、气压、湿度等;第二个是交通流量,比如这个区域里面车的平均速度是多少;第三个是该区域人的移动性,有多少人进出这个区域;最后是这个区域里面的兴趣点分布,比如有多少厂矿,有多少个电影院、酒吧、红绿灯等。”郑宇说,有了这样的异构数据之后我们就可以建立一个地方的数据分布,以及这个地方空气质量观测值的网络模型,最后得到一公里乘一公里范围内的细粒度。
郑宇表示,基于这样的数据分析,就可以为管理决策者们提供科学依据。“我们可以做实时城市空气质量和污染物排放预警,比如这一区域产生大量的污染,我们可以对周边的老百姓进行预警。除此外,在做交通限流管控的时候可以更加精确。因为某些区域并不是因为车辆产生的尾气排放导致的污染物,我们只需要在某个特定时间段对某个区域做单双号限行即可,没有必要做全城限行。”
郑宇说,以上的例子说得就是城市计算中异构数据的融合问题,这也是大数据的核心问题。除了常用的环境数据之外,我们需要更多其他的异构数据源,可能看上去和环境数据并不直接相关,但是能够帮助我们解决环境的问题。对此,环保部信息中心主任程春明表示赞同,他认为如何更好地融合和利用城市中的异构数据,对环境信息化工作至关重要。郑宇表示环保部信息中心对于双方的研究合作给予了大力的支持,除京津冀及周边地区,未来双方希望在全国环保重点城市推广Urban Air模型。
在2014全国环境信息技术与应用交流会上,环保部信息中心副主任徐富春作了数据科学方面的专题报告,并分享了信息中心与微软等企业在数据技术(Data Technology)方面的交流与合作,以及在城市空气主要污染物时空分布计算上的探索和实践。徐富春表示,数据科学是信息化新的发展方向,数据驱动是一种新的信息化思维模式,以环境信息化为例,我们应该运用数据驱动推动环境管理优化升级和转型,“但这还需要大家形成一个数据共识去推动这一工作,各地区、各部门需要积累或者建立数据清单和数据资源,建立起跨地区跨部门的合作平台,更好的让大数据为环境管理和决策提供服务。”
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
数据清洗工具全景指南:从入门到进阶的实操路径 在数据驱动决策的链条中,“数据清洗” 是决定后续分析与建模有效性的 “第一道 ...
2025-08-29机器学习中的参数优化:以预测结果为核心的闭环调优路径 在机器学习模型落地中,“参数” 是连接 “数据” 与 “预测结果” 的关 ...
2025-08-29CDA 数据分析与量化策略分析流程:协同落地数据驱动价值 在数据驱动决策的实践中,“流程” 是确保价值落地的核心骨架 ——CDA ...
2025-08-29CDA含金量分析 在数字经济与人工智能深度融合的时代,数据驱动决策已成为企业核心竞争力的关键要素。CDA(Certified Data Analys ...
2025-08-28CDA认证:数据时代的职业通行证 当海通证券的交易大厅里闪烁的屏幕实时跳动着市场数据,当苏州银行的数字金融部连夜部署新的风控 ...
2025-08-28PCU:游戏运营的 “实时晴雨表”—— 从数据监控到运营决策的落地指南 在游戏行业,DAU(日活跃用户)、MAU(月活跃用户)是衡量 ...
2025-08-28Excel 聚类分析:零代码实现数据分群,赋能中小团队业务决策 在数字化转型中,“数据分群” 是企业理解用户、优化运营的核心手段 ...
2025-08-28CDA 数据分析师:数字化时代数据思维的践行者与价值推动者 当数字经济成为全球经济增长的核心引擎,数据已从 “辅助性信息” 跃 ...
2025-08-28ALTER TABLE ADD 多个 INDEX:数据库批量索引优化的高效实践 在数据库运维与性能优化中,索引是提升查询效率的核心手段。当业务 ...
2025-08-27Power BI 去重函数:数据清洗与精准分析的核心工具 在企业数据分析流程中,数据质量直接决定分析结果的可靠性。Power BI 作为主 ...
2025-08-27CDA 数据分析师:数据探索与统计分析的实践与价值 在数字化浪潮席卷各行业的当下,数据已成为企业核心资产,而 CDA(Certif ...
2025-08-27t 检验与 Wilcoxon 检验:数据差异比较的两大统计利器 在数据分析中,“比较差异” 是核心需求之一 —— 如新药疗效是否优于旧药 ...
2025-08-26季节性分解外推法:解锁时间序列预测的规律密码 在商业决策、资源调度、政策制定等领域,准确的预测是规避风险、提升效率的关键 ...
2025-08-26CDA 数据分析师:数据治理驱动下的企业数据价值守护者 在数字经济时代,数据已成为企业核心战略资产,其价值的释放离不开高 ...
2025-08-26基于 SPSS 的 ROC 曲线平滑调整方法与实践指南 摘要 受试者工作特征曲线(ROC 曲线)是评估诊断模型或预测指标效能的核心工具, ...
2025-08-25神经网络隐藏层神经元个数的确定方法与实践 摘要 在神经网络模型设计中,隐藏层神经元个数的确定是影响模型性能、训练效率与泛 ...
2025-08-25CDA 数据分析师与数据思维:驱动企业管理升级的核心力量 在数字化浪潮席卷全球的当下,数据已成为企业继人力、物力、财力之后的 ...
2025-08-25CDA数据分析师与数据指标:基础概念与协同逻辑 一、CDA 数据分析师:数据驱动时代的核心角色 1.1 定义与行业价值 CDA(Certified ...
2025-08-22Power Query 移动加权平均计算 Power Query 移动加权平均设置全解析:从原理到实战 一、移动加权平均法的核心逻辑 移动加权平均 ...
2025-08-22描述性统计:CDA数据分析师的基础核心与实践应用 一、描述性统计的定位:CDA 认证的 “入门基石” 在 CDA(Certified Data Analy ...
2025-08-22