京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据国家战略还需跨过几道坎_数据分析师培训
大数据时代的到来,让“数据即资产”成为新的全球大趋势,国家竞争焦点正从对资本、土地、人口、资源/能源的争夺转向对大数据的争夺,大数据颠覆性地改变全球战略格局、国际安全态势、国家治理架构和资源配置模式,引发了巨大的经济社会变革。对于中国而言,只有将大数据上升为国家重大发展战略、上升为提升国家治理体系与治理能力现代化的层面才会实现“变道超车”。
大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理。换言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。
全球数据正呈现出惊人的增长态势。根据IBM公司估算,人类自有史以来至2003年所创造的信息量为5EB,而到2011年,人类每两天就能产生5EB的信息量。ID C认为,数据产生成本的下降、投资规模的增加和数据存储能力的增长,最终导致了全球数据增速符合“大数据摩尔定律”,即全球数据量大约每两年翻一番。预计到2020年,全球需要管理的数据量将达到35ZB,是2010年的29倍。
从中国情况看,随着信息化普及程度和应用水平的提升,金融、交通、电信等重点行业和医保、社保、海关等重要领域已经实现或逐步实现了大量、海量业务数据的集中。中国拥有全球第一的人口数、互联网用户数和移动互联网用户数,大数据前景广阔,是全球最重要的大数据市场之一,已经成为名副其实的“世界数据中心”。根据工业和信息化部电子科学技术情报研究所的调查,2011年中国电信、金融、医疗、文化等国家重要基础数据总量约为900PB。中国移动互联网流量在过去18个月中增加了10倍,占到全球互联网流量的10%;淘宝网每天交易达数千万笔,其单日数据产生量超过50TB,存储量超过40PB;百度每天大约要处理60亿次搜索请求,数据量达到几十PB,每日新增数据10TB;上海证券交易所每秒处理近9万笔业务,每日成交笔数达到3亿笔以上;中国联通用户上网记录达每秒83万条,即每月1万亿条,对应数据量为每月300TB。
然而,相比领先国家,中国仍面临诸多战略风险与挑战阻碍大数据在国家治理层面上的应用:
一是缺乏比较明晰的大数据战略顶层设计,大数据作为战略性资源地位尚未凸显,作为基础性资产、以及国家/国民财富的重要地位尚未凸显,特别是与之适应的生产关系、制度安排等仍处于空白。
二是条块分割体制壁垒和“信息孤岛”,阻碍国家治理中的数据开放和共享。围墙里的大数据注定成为死数据。目前我国金融信用信息基础数据库已为1859.6万户企业和其他组织及8.2亿自然人建立了信用档案,但这些数据第三方机构很难获得。长期以来,由于条块分割管理体制限制,各级政府部门间的信息网络往往自成体系、相互割裂,数据难以实现互通共享,导致政府掌握的大数据大都处于割裂、闲置和休眠状态。同时,由于政府部门业务管理信息系统开发和建设的“部门化”,政府信息系统出现“系统林立”和分裂状态,公共信息资源重复采集现象严重。
三是传统治理思维和治理体制在大数据时代明显不适应,数据治国的意识较为滞后。世界范围内,大数据正重构政府、市场、社会三者之间关系模式,使国家治理结构实现从国家独大的治理结构转向多元共治,然而,我国不少政府部门尚未意识到利用大数据改造传统政府治理和政府流程再造的革命性影响。
四是法治建设滞后,维护“数据主权”、数据资产的法律标准框架严重缺失,缺乏有效的大数据思维和法律框架。
五是全球大数据战略博弈升级,我国面临较大数据安全与数据防御风险。当前,借助大数据革命,美国等发达国家全球数据监控能力升级,造成我国数据安全和数据防御风险上升。根据“棱镜门”事件披露的信息,美国政府和大数据公司紧密结成“美国数据情报联合体”,共同对全球数据空间进行整体性监控分析,构筑“数据霸权”。美国“八大金刚”几乎渗透到中国政府、海关、邮政、金融、铁路、民航等各个领域,给国家治理带来异常严峻的数据安全隐患。
大数据革命才刚刚开始,这是一场涉及利益深刻调整的革命。笔者建议尽快打破“碎片化”格局,规划“大数据治国”中长期路线图与实施重点、目标、路径,统筹布局,加快大数据发展核心技术研发,推进开放、共享以及安全方面的相关立法与标准制定,建立大数据产业的市场化资源配置模式,以及“互联互通、共享共治”的制度体系,真正抢占新的全球科技革命和产业革命的战略机遇期,重构国家综合竞争优势。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
一、为什么要区分这两种分布 在数据分析和统计学中,拿到一组数据后第一件事通常就是看它的分布形态。分布形态决定了你能用什么 ...
2026-10-15一、问题现象 在实际使用 Excel 透视表做数据分析时,经常会遇到这样的情况:数据源表格里明明新增了一行或一列金额数据,数据源 ...
2026-10-15核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-10-15一、什么是预测式发货 预测式发货(Anticipatory Shipping)是亚马逊于2013年12月获得授权的一项美国专利(专利号 US 8,615,473 ...
2026-10-14一、SQL在金融量化体系中的定位 量化投资的本质是用数据驱动决策,而数据处理贯穿量化研究的全生命周期。从原始行情数据清洗、因 ...
2026-10-14核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-10-14CDA数据分析师 出品 作者:李诗怡 四层结构 · 零件与房子 · 六大易错点 一、什么是指标体系 定义:指标体系是整套完整框架 ...
2026-10-13写在开头 先还原一个你大概率见过的场面。 立项会上有人说:我们得做用户画像。 于是团队关进会议室,白板写满便利贴,两小时后 ...
2026-10-13 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-10-13在统计学与数据分析研究中,相关性分析分为数值变量分析与分类变量分析两大类。针对身高、销量、分数等连续数值变量,通常采用皮 ...
2026-10-12在Power BI可视化分析体系中,常规表格仅能展示枯燥的数值数据,存在数据对比不直观、强弱规律不突出、维度交叉分析低效等问题。 ...
2026-10-12 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-10-12在传统零售行业同质化竞争激烈、大众营销转化率持续走低的背景下,依托经验与直觉的粗放式营销逐渐失效。美国塔吉特百货(Target ...
2026-10-10随着智能客服、数字化服务、用户精细化运营的快速普及,传统零散、非标准化的客户服务数据与业务体系逐渐难以支撑高效服务治理。 ...
2026-10-10 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-10-10CDA数据分析师 出品 作者:李诗怡 定义区别 · 场景举例 · 指标分类 · 计算方法 知识体系总览 模块 包含内容 一、核 ...
2026-10-09在数据分析工作流中,业务数据大多存储在各类关系型数据库内,例如MySQL、PostgreSQL、SQLite等。Pandas是Python生态中主流的数 ...
2026-10-09在数字化精细化运营时代,海量用户存在需求差异、行为差异、价值差异与偏好差异。如果企业采用“一刀切”的统一营销、统一服务、 ...
2026-10-09 很多数据分析师拿到数据就开始清洗、建模,但当被问到“这批数据属于什么类型——结构化还是非结构化?分类变量还是数值变量 ...
2026-10-09指标体系是企业数字化分析、业务监控、经营决策的核心基础框架,是将零散数据转化为可衡量、可对比、可落地业务价值的关键体系。 ...
2026-10-08