京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据发展谨防"一哄而上" 警惕大数据应用陷阱
作为近几年来最热门的网络概念之一,大数据在多个领域的落地显示出其巨大优势,如出行类APP在城市中为用户提供快速的车辆调度,又如谷歌智能系统阿尔法围棋在人机围棋大战中获胜。然而大数据应用喜忧参半亦是事实,曾作为大数据具备革命性潜力证明的谷歌流感趋势近几年的预测结果并不尽如人意。
大数据是否被过度热炒?现行大数据分析是否可靠?这些疑问在大数据已作为国家战略被写进“十三五”规划纲要的当下迫切需要得到解答。北京大学国家发展研究院教授沈艳在接受海外网专访时强调,在明确大数据局限性和可行性的基础上,大数据产业才能够扎实发展。
警惕大数据应用陷阱
尽管大数据的定义见仁见智,但其海量的数据规模、动态的数据体系、多样的数据类型等是业界的共识。沈艳表示,大数据能够以前所未有的精细度描画世界,如运用得当,能够帮助人们快速刻画新旧经济更替,给予产业发展方向以可视化指导,并为政府决策提供参考。
但是,大数据应用也面临陷阱,沈艳表示,“有一种看法认为,有了大数据就有了总体,就不再需要科学抽样了。”这种“大数据自大”倾向之所以值得警惕,一方面在于,数据反映的信息可能只是总体的一部分;另一方面,总体可能会在时间推移中发生变化。例如,“使用谷歌搜索流感相关信息的用户”和“美国流感人群”这个总体并不完全重合,因此用后者预测流感趋势存在先天不足。
陷阱的出现与大数据的收集方式息息相关。沈艳指出,传统数据或者来自问卷调查,或者即便是经营活动留下的数据,也往往有规范标准,使得数据含义前后可比。而大数据更多是生产经营等各类活动的附属产品,当服务于主营业务的系统架构不断变化,数据生成规律将随之变化。而数据分析方很可能对此全然不知或不能深刻体会,沿用以往的分析方法,就很容易产生结论的偏差。
分析大数据需要人才
“当新技术来临,尤其是面对经济新旧转型,我们迫切需要新的增长点,很容易未经深究就相信新技术的力量。但实际上只有在清晰地知道它各种各样局限的基础上,我们才能去用它。”这是沈艳对当前大数据运用的看法。
对比美国大数据产业图景(分为架构、分析、应用三部分),沈艳发现,“十三五”规划中大数据战略的内容集中在架构和应用部分,比如加快政府数据开放共享,进行海量数据采集、存储、清洗、分析发掘、可视化等领域关键技术攻关。
她指出,应加强对大数据分析的重视,包括回归问题本源,进行数据可行性分析等,也表示并非所有企业都有能力进行大数据分析。“数据分析具有门槛,要防止一哄而上、不管是否适合自己都要赶上潮流。”沈艳坦言,即便没有遵循科学规范的分析方法,一些大数据产品也能够在一定程度上解决问题,但是其商业模式是否真正可行、是否能够持续很难确认。而且若导致重要领域出现问题,可能产生重大损失。
而目前的一大桎梏是大数据分析人才的紧缺。沈艳认为,人才培养触及产业健康发展的核心,大数据发展亟须既懂关键技术又懂专业领域的跨界人才。此外,国家还需对决策者和民众有相应的培训投入。
采访中,沈艳仍然对大数据前景充满信心,她期待大数据产业帮助中国的新经济成长起来,让中国持续成为世界经济的引擎。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在回归分析中,因子(即自变量)的筛选是构建高效、可靠回归模型的核心步骤——实际分析场景中,往往存在多个候选因子,其中部分 ...
2026-04-13在机器学习模型开发过程中,过拟合是制约模型泛化能力的核心痛点——模型过度学习训练数据中的噪声与偶然细节,导致在训练集上表 ...
2026-04-13在数据驱动商业升级的今天,商业数据分析已成为企业精细化运营、科学决策的核心手段,而一套规范、高效的商业数据分析总体流程, ...
2026-04-13主讲人简介 张冲,海归统计学硕士,CDA 认证数据分析师,前云南白药集团资深数据分析师,自媒体 Python 讲师,全网课程播放量破 ...
2026-04-13在数据可视化与业务分析中,同比分析是衡量业务发展趋势、识别周期波动的核心手段,其核心逻辑是将当前周期数据与上年同期数据进 ...
2026-04-13在机器学习模型的落地应用中,预测精度并非衡量模型可靠性的唯一标准,不确定性分析同样不可或缺。尤其是在医疗诊断、自动驾驶、 ...
2026-04-10数据本身是沉默的,唯有通过有效的呈现方式,才能让其背后的规律、趋势与价值被看见、被理解、被运用。统计制图(数据可视化)作 ...
2026-04-10在全球化深度发展的今天,跨文化传播已成为连接不同文明、促进多元共生的核心纽带,其研究核心围绕“信息传递、文化解读、意义建 ...
2026-04-09在数据可视化领域,折线图是展示时序数据、趋势变化的核心图表类型之一,其简洁的线条的能够清晰呈现数据的起伏规律。Python ECh ...
2026-04-09在数据驱动的时代,数据分析早已不是“凭经验、靠感觉”的零散操作,而是一套具备固定逻辑、标准化流程的系统方法——这就是数据 ...
2026-04-09长短期记忆网络(LSTM)作为循环神经网络(RNN)的重要改进模型,凭借其独特的门控机制(遗忘门、输入门、输出门),有效解决了 ...
2026-04-08在数据分析全流程中,数据质量是决定分析结论可靠性的核心前提,而异常值作为数据集中的“异类”,往往会干扰统计检验、模型训练 ...
2026-04-08在数字经济飞速发展的今天,数据已渗透到各行各业的核心场景,成为解读趋势、优化决策、创造价值的核心载体。而数据分析,作为挖 ...
2026-04-08在数据分析全流程中,数据处理是基础,图形可视化是核心呈现手段——前者负责将杂乱无章的原始数据转化为干净、规范、可分析的格 ...
2026-04-07在数据分析与统计推断中,p值是衡量假设检验结果显著性的核心指标,其本质是在原假设(通常为“无效应”“无差异”)成立的前提 ...
2026-04-07在数字经济深度渗透的今天,数据已成为企业生存发展的核心资产,企业的竞争本质已转变为数据利用能力的竞争。然而,大量来自生产 ...
2026-04-07Python凭借简洁的语法、丰富的生态库,成为算法开发、数据处理、机器学习等领域的首选语言。但受限于动态类型、解释性执行的特性 ...
2026-04-03在深度学习神经网络中,卷积操作是实现数据特征提取的核心引擎,更是让模型“看懂”数据、“解读”数据的关键所在。不同于传统机 ...
2026-04-03当数字化转型从企业的“战略口号”落地为“生存之战”,越来越多的企业意识到,转型的核心并非技术的堆砌,而是数据价值的深度挖 ...
2026-04-03在日常办公数据分析中,数据透视表凭借高效的汇总、分组功能,成为Excel、WPS等办公软件中最常用的数据分析工具之一。其中,“计 ...
2026-04-02