京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据将怎样改变互联网
随着大数据产业蓬勃发展,大数据技术及应用逐渐渗透、融入社会各个领域,并且推动互联网等产业加快转型升级。如何充分释放和利用大数据蕴含的巨大价值,无疑成为当下的热门议题。
传统行业“掘金”大数据
怎样给大数据下定义?“通俗地说,大数据就是量很大的数据,大到单个计算机无法处理。”工业和信息化部软件司司长陈伟此前在接受采访时介绍,目前,全球数据量每18个月就会翻倍,而由于产业链涉及数据采集、存储、分析、挖掘以及流通服务,大数据不仅改变着互联网的商业模式,而且还将重构互联网产业格局,并将人类带入互联网的全新时代。
经过多年积累,现在不少保险公司已占有大量线下数据,并圈定大批低赔付人群样本。作为互联网企业代表的百度,正与保险公司发展“深交”,通过对保险公司数据科学建模,利用人工智能算法海量计算,将这批具备相同特征的群体挖掘出来,寻找低赔付人群的准确性已超过了85%。
随着“双11”电商节临近,快递业紧锣密鼓地开始准备“迎战”。与保险行业类似,物流行业也在积极拥抱大数据。阿里巴巴利用菜鸟物流雷达预警,去年“双11”货品预测率达到90%,“双11”期间2.78亿订单仅用10天时间便已发送到位。
“因物流与商家供需信息不匹配,前年或者更早时货物送达时间甚至超过1个月,有人‘双12’还没收到‘双11’的货品……”阿里数据经济研究中心秘书长潘永花进一步介绍,结合商家销售数据和物流公司快递数据综合分析,可为物流公司提供智能物流解决方案。
伴随人们大步迈进互联网时代,各传统行业不断争相拥抱“大数据+”,云、网、端逐渐成为各行业重要基础设施体系。潘永花认为,从“端”的角度来看,除智能终端外,还有越来越多的App;从“网”角度来说,互联网、物联网、云和大数据都将是核心资源,而正是基于云、网、端的基础,才有了“互联网+”各种行业的化学反应。
巧用数据资源释放大能量
有人说,“IT”代表着过去,“DT”才代表着未来。这里所说的“DT”正是指的数据技术。也就是说,当下大数据核心技术成了诸多产业的发展驱动力。“人们逐渐意识到,数据是推动产业发展的动力,也将为今后各行业提供全新服务。它不再仅是业务的附属品!”Teradata天睿公司大中华区副总裁姜欣表示。
根据大数据产业发展需求,不少互联网企业不仅巧用大数据助力自身发展,而且也尝试逐渐向外界开放数据资源,推动传统企业在“互联网+”的大潮下转型升级。
“大数据与行业数据融合,可以产生‘核聚变’,迸发出新能量。”百度公司高级副总裁王劲告诉记者,百度正通过大数据技术识别各类目标客群,进行多维度分析客群搜索趋势、搜索行为、兴趣偏好,助力企业了解行业趋势、加强用户洞察、提升营销效果;此外,系列数据资源还能为网上舆情提供实时监控分析。
王劲介绍:“随着互联网用户趋于交互方式寻找服务需求,百度大数据预测未来5年使用语音、图像来表达需求的比例将超过50%。百度在语音识别、图像识别、自然语言处理等前沿技术领域,正在有针对性地进行重点突破。”
从政府角度看,如果能盘活政府机构大量数据资源,将更有利于融合并利用外部智慧,提升政府公共服务创新能力,提升社会运行效率。“政务大数据可让公众、企业深入参与政府治理,使政府与公众充分互动,实现政府对公众服务的精准化、个性化,使政府从单纯的管理角色向多元共治方向变革。”潘永花说。
大数据瓶颈消除在望
“目前,大数据产业发展主要遇到的障碍是数据的共享与互通,以及如何保障数据安全。”百度有关负责人表示。
潘永花坦言,目前我国大数据人才缺口大,相关的创新创业人才有待培养,而且我国也缺乏像发达国家一样的“大数据国家战略”以及“开放政府政策”,在标准、规范方面还存有各自为政的尴尬。
陈伟指出,国务院印发的《促进大数据发展行动纲要》提出要“加快政府数据开放共享,推动资源整合,提升治理能力”,此举不仅开启了数据共享的大门,而且也对各行业、各企业间进行数据互通起到引导示范作用,将有利于打破数据共享互通中的发展障碍。
同时,数据安全、数据共享等话题同样备受关注。“这是一场‘革命’,将对各行各业带来深刻影响,甚至改变我们的思维方式,但同时它也引发‘数据暴政’的担忧……”牛津大学教授维克多·梅耶-舍恩伯格在《大数据》中的这句经典话语,曾被业界津津乐道。
为保证数据安全,技术层面不容忽视。“从大数据存储、应用、管理以及隐私保护等方面应层层把关,有针对性地应对安全威胁。”王劲告诉记者,目前,百度综合采用随机干扰、散列、K-匿名、泛化等多种隐私保护手段,对用户数据实现了完全的数据脱敏处理,再供应业务方和合作伙伴进行使用,防止用户隐私泄露。
有人时常提及,“数据安全三分靠技术,七分靠管理”。潘永花对此也深表认同:“从运营管理层面上说,互联网企业须对数据安全有严格规范标准,建立数据安全保障策略以及各项应急机制。”
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在分类变量关联分析中(如 “吸烟与肺癌的关系”“性别与疾病发病率的关联”),卡方检验 P 值与 OR 值(比值比,Odds Ratio)是 ...
2025-11-05CDA 数据分析师的核心价值,不在于复杂的模型公式,而在于将数据转化为可落地的商业行动。脱离业务场景的分析只是 “纸上谈兵” ...
2025-11-05教材入口:https://edu.cda.cn/goods/show/3151 “纲举目张,执本末从。” 若想在数据分析领域有所收获,一套合适的学习教材至 ...
2025-11-05教材入口:https://edu.cda.cn/goods/show/3151 “纲举目张,执本末从。” 若想在数据分析领域有所收获,一套合适的学习教材至 ...
2025-11-04【2025最新版】CDA考试教材:CDA教材一级:商业数据分析(2025)__商业数据分析_cda教材_考试教材 (cdaglobal.com) ...
2025-11-04在数字化时代,数据挖掘不再是实验室里的技术探索,而是驱动商业决策的核心能力 —— 它能从海量数据中挖掘出 “降低成本、提升 ...
2025-11-04在 DDPM(Denoising Diffusion Probabilistic Models)训练过程中,开发者最常困惑的问题莫过于:“我的模型 loss 降到多少才算 ...
2025-11-04在 CDA(Certified Data Analyst)数据分析师的工作中,“无监督样本分组” 是高频需求 —— 例如 “将用户按行为特征分为高价值 ...
2025-11-04当沃尔玛数据分析师首次发现 “啤酒与尿布” 的高频共现规律时,他们揭开了数据挖掘最迷人的面纱 —— 那些隐藏在消费行为背后 ...
2025-11-03这个问题精准切中了配对样本统计检验的核心差异点,理解二者区别是避免统计方法误用的关键。核心结论是:stats.ttest_rel(配对 ...
2025-11-03在 CDA(Certified Data Analyst)数据分析师的工作中,“高维数据的潜在规律挖掘” 是进阶需求 —— 例如用户行为包含 “浏览次 ...
2025-11-03在 MySQL 数据查询中,“按顺序计数” 是高频需求 —— 例如 “统计近 7 天每日订单量”“按用户 ID 顺序展示消费记录”“按产品 ...
2025-10-31在数据分析中,“累计百分比” 是衡量 “部分与整体关系” 的核心指标 —— 它通过 “逐步累加的占比”,直观呈现数据的分布特征 ...
2025-10-31在 CDA(Certified Data Analyst)数据分析师的工作中,“二分类预测” 是高频需求 —— 例如 “预测用户是否会流失”“判断客户 ...
2025-10-31在 MySQL 实际应用中,“频繁写入同一表” 是常见场景 —— 如实时日志存储(用户操作日志、系统运行日志)、高频交易记录(支付 ...
2025-10-30为帮助教育工作者、研究者科学分析 “班级规模” 与 “平均成绩” 的关联关系,我将从相关系数的核心定义与类型切入,详解 “数 ...
2025-10-30对 CDA(Certified Data Analyst)数据分析师而言,“相关系数” 不是简单的数字计算,而是 “从业务问题出发,量化变量间关联强 ...
2025-10-30在构建前向神经网络(Feedforward Neural Network,简称 FNN)时,“隐藏层数目设多少?每个隐藏层该放多少个神经元?” 是每个 ...
2025-10-29这个问题切中了 Excel 用户的常见困惑 —— 将 “数据可视化工具” 与 “数据挖掘算法” 的功能边界混淆。核心结论是:Excel 透 ...
2025-10-29在 CDA(Certified Data Analyst)数据分析师的工作中,“多组数据差异验证” 是高频需求 —— 例如 “3 家门店的销售额是否有显 ...
2025-10-29