京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据时代真的主打“数据”吗
在不久前的双十一狂欢购物节,许多人购买自己心仪的物品只需要短短几分钟。与传统的逛几条街进多家商场试穿、淘货模式不同,大数据支撑下,人们要做的只是网上浏览、对比、点击选择。甚至有的时候,连“淘货”的步骤都省了,网络会悄无声息地在大数据的分析下推送用户喜欢的产品。
大数据正在为人们的生活提供种种便利,读书、购物、存储等的时间大大缩短,关于大数据的讨论已经渗透到经济、社会、生活各个领域,一天一天,一年一年,工程师们发现一个惊人的现实:大数据已经开始独立于人,在人类社会加自然界的二元空间之外,形成单独的信息空间。
在11月17日北京举办的数字化知识服务科学与工程2015国际高端研讨会上,中国工程院院士潘云鹤表示,“五十年以前人类还是二元空间,那时候的信息还依靠人来发出,信息来自于人类社会。人写书,人开会交流,人使用媒体,计算机的信息都是人输进去的。后来人们开始把信息进行互联,有了互联网、移动通信和搜索技术,信息通过互联网开始直接来自于物理世界,去年相关调查发现,网络信息60%不是人发送的,而是爬虫发送的,绝大部分网络上信息的流量不是被人所占用,而是被机器人所占用,这是非常令人惊讶的时代。”潘云鹤说。
大数据时代真的主打“数据”吗?许多国家开始着手对“数据”做文章。2001年中国政府和美国自然科学基金开始进入一项国际合作项目:数字图书馆。目标是让所有人不论何时何地都能通过互联网访问到全人类的知识,这个项目一共实现了250万册图书的数字化。
“虽然项目一开始是为了向全世界提供图书和资料,但是后来发现它不但可以借书,而且可以有很多新的服务,比如通过它可以实现在网上访问名胜古迹,里面有敦煌石窟数字化三维造型,比如该项目把中国900多个书法家4000多件作品进行了数字化,因此它可以帮助全世界学习汉语和书法的人练习书法,也可以用它进行书法的设计。”潘云鹤说。
甚至有浙江大学的一个博士生利用大数据编成了一本“红楼菜谱”,而他所要做的就是把《红楼梦》当中各种各样的烹调内容和各种各样的菜谱联系在了一起,把电视台中各种关于烹调的过程找出来,还把植物学和农业当中植物种植方式和营养的内容找出来。
“我们发现海量数据如果能彼此打通,从这中间可以产生出大量新的知识,我们把彼此联通的海量知识称为数据海,图书馆如果拥有数字海的话就可能发展成为数字图书馆,就和原有的图书馆具有完全不同的性能。”潘云鹤说。
因此,大数据时代不是只“主打”一组组的数据,这些数据可以产生更多的功能,仅仅挖掘大数据是不够的,应该从大数据走向大知识。
在研讨会上,记者了解到浙江大学正在将中医大数据变为新的知识。他们把各种各样的方剂、疾病、医生、病人互相打通,将互联网、数字图书馆、专业数据联系起来,进行深度的搜索。这样一来,既可以研究中药里某种化合物的成分,还可以对药材进行各种各样的鉴别,对药材如何组合进行分析,这对于医生探索新的药方有非常大的帮助。
正是基于大数据到大知识的探索,中国工程院在2014年成立了国际工程科技知识中心,希望把多个数字图书馆、多个专业数据库和世界上各种各样跟工程科技有关的网站连在一起,让大量的数据形成数据海,用数据海的特点从不同角度获得新的知识和新的认识。
潘云鹤说:“国际工程科技知识中心将为各个院士提供研究我国战略所需要的知识,中心发展到一定程度后向全体工程师们开放,让我国的工程师利用其开发新的产品,了解全世界在该领域的研究进程。此外,这个中心还要承担支持我国的产业转型的重任。”
中国工程院院长周济在研讨会上表示,大数据与智能终端、移动互联等相互结合,进一步推动了信息化和工业化的深度融合,进一步开拓了技术创新与经济发展的模式,进一步提升了政治统领和行业发展的决策科学化水平,我们正在经历新一轮以大数据为主的信息革命和产业变革。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
机器学习的本质,是让模型通过对数据的学习,自主挖掘规律、实现预测与决策,而这一过程的核心驱动力,并非单一参数的独立作用, ...
2026-03-27在SQL Server数据库操作中,日期时间处理是高频核心需求——无论是报表统计中的日期格式化、数据筛选时的日期类型匹配,还是业务 ...
2026-03-27在CDA(Certified Data Analyst)数据分析师的能力体系与职场实操中,高维数据处理是高频且核心的痛点——随着业务场景的复杂化 ...
2026-03-27在机器学习建模与数据分析实战中,特征维度爆炸、冗余信息干扰、模型泛化能力差是高频痛点。面对用户画像、企业经营、医疗检测、 ...
2026-03-26在这个数据无处不在的时代,数据分析能力已不再是数据从业者的专属技能,而是成为了职场人、管理者、创业者乃至个人发展的核心竞 ...
2026-03-26在CDA(Certified Data Analyst)数据分析师的能力体系中,线性回归是连接描述性统计与预测性分析的关键桥梁,也是CDA二级认证的 ...
2026-03-26在数据分析、市场研究、用户画像构建、学术研究等场景中,我们常常会遇到多维度、多指标的数据难题:比如调研用户消费行为时,收 ...
2026-03-25在流量红利见顶、获客成本持续攀升的当下,营销正从“广撒网”的经验主义,转向“精耕细作”的数据驱动主义。数据不再是营销的辅 ...
2026-03-25在CDA(Certified Data Analyst)数据分析师的全流程工作中,无论是前期的数据探索、影响因素排查,还是中期的特征筛选、模型搭 ...
2026-03-25在当下数据驱动决策的职场环境中,A/B测试早已成为互联网产品、运营、营销乃至产品迭代优化的核心手段,小到一个按钮的颜色、文 ...
2026-03-24在统计学数据分析中,尤其是分类数据的分析场景里,卡方检验和显著性检验是两个高频出现的概念,很多初学者甚至有一定统计基础的 ...
2026-03-24在CDA(Certified Data Analyst)数据分析师的日常业务分析与统计建模工作中,多组数据差异对比是高频且核心的分析场景。比如验 ...
2026-03-24日常用Excel做数据管理、台账维护、报表整理时,添加备注列是高频操作——用来标注异常、说明业务背景、记录处理进度、补充关键 ...
2026-03-23作为业内主流的自助式数据可视化工具,Tableau凭借拖拽式操作、强大的数据联动能力、灵活的仪表板搭建,成为数据分析师、业务人 ...
2026-03-23在CDA(Certified Data Analyst)数据分析师的日常工作与认证考核中,分类变量的关联分析是高频核心场景。用户性别是否影响商品 ...
2026-03-23在数据工作的全流程中,数据清洗是最基础、最耗时,同时也是最关键的核心环节,无论后续是做常规数据分析、可视化报表,还是开展 ...
2026-03-20在大数据与数据驱动决策的当下,“数据分析”与“数据挖掘”是高频出现的两个核心概念,也是很多职场人、入门学习者容易混淆的术 ...
2026-03-20在CDA(Certified Data Analyst)数据分析师的全流程工作闭环中,统计制图是连接严谨统计分析与高效业务沟通的关键纽带,更是CDA ...
2026-03-20在MySQL数据库优化中,分区表是处理海量数据的核心手段——通过将大表按分区键(如时间、地域、ID范围)分割为多个独立的小分区 ...
2026-03-19在商业智能与数据可视化领域,同比、环比增长率是分析数据变化趋势的核心指标——同比(YoY)聚焦“长期趋势”,通过当前周期与 ...
2026-03-19