
广义大数据论与狭义大数据论_数据分析师
导读:对于大数据的认识,可以用“两个论”来概括。狭义大数据论和广义大数据论。而世界上所有已有的和将有的关于大数据的理论和应用,也都可以用这两个论进行归类。
一份名为《中国大数据技术与产业发展白皮书》(下简称白皮书)的报告于去年12月发布。一时间引起了业内人士的广泛关注。这份由20多家单位和60多名专家共同完成的报告,在一定程度上反映了中国大数据领域的共识。在这份报告中,对于2015年大数据发展的趋势做出了预测。据我总结,这份预测可以用这几个词来概括:探索、突破、跨界、融合。
对于大数据,不光是中国,欧美国家也还处于一个探索的阶段。这个探索的阶段,在广度上,将随着大数据收集及分析技术的进步快速扩张;而在深度上,却将随着大数据收集能力的爆炸式增长而明显放缓。大数据技术尚处于一个极其初级的阶段。目前的一切探索,也不过是处于大数据基础层面上的探索。当基础层面的探索让我们对于大数据的了解更进一步时,突破将会产生。
白皮书中讲到的2015年中国将会面临的大数据突破,实际上,只是单方面的、狭义的突破。我们能够在短时期内迎来的任何方向上的突破,都只是在技术层面上的突破。互联网的出现,伴随着技术几何倍地发展。这种技术上的突破给我们社会带来的冲击,远远没有近年来对互联网的认识的提高所带来的突破显著。互联网从出现一直到近两年,始终停留在一个技术的发展期。真正对于互联网能够做什么,我们的认识也才刚开始从基础层面上升到初级认知水平。而这看似细微的提升,导致了无数新型的产业的发展,也导致了互联网金融的出现。所以我敢预言,随着人类对于互联网的认识进一步的加深,互联网金融将会取得比现阶段高出十倍乃至百倍的成就。而大数据将在互联网金融的浪潮中扮演一个至关重要的角色。
那么随着我们对于大数据认识的加深,技术的突破将不足以支持人类的发展。一个全方位、全领域的突破将是不可避免的。我们对于大数据能力的认识将会有一个质的飞跃。到那个时候,无数由大数据而催生的行业将迅速崛起,传统的商业模式将逐渐被取代。甚至人类现阶段的一切科学,将突破桎梏,取得难以想象的成就。
在这个对于大数据认识的初级阶段,一个明显的趋势已经能够清楚地被发现。各行各业,由于大数据的出现,开始打破原本存在的行业之间的壁垒。越来越多的公司开始进行所谓的跨界。从一直疯传的苹果收购特斯拉,到百度开始做餐饮。这一个个看似奇葩的跨界,实际上在大数据的支持下,是绝对能够碰撞出惊人火花的。任意一个公司,如果能够拥有尖端的大数据技术,就能够轻易地进入任何一个行业,并取得成功。
大数据的魅力就是如此地让人着迷。
白皮书中提到2015年大数据行业将会沿着一个融合的趋势前进。我认为,大数据的推广将使得商业运作与科学技术融合,使得企业部门间相互融合,使得学科与学科相互融合。德温特资本市场的成功,恰恰是利用了大数据将商业运作与印第安纳大学博伦教授的科学研究成果相融合,从而预测了大盘的走势。这种商业与科技的融合将会越来越紧密。同时,大数据也使得企业内部的运作趋于融合。大数据技术能够被应用于企业内部的所有部门,无论是营销还是人力,无论是财务还是风控,各部门在大数据的统一调度下,将如一部精密的机器,不断地创造利润。
现在,大家在谈到大数据的时候,普遍都在谈云计算、算法、关系数据库、非关系数据库,大家也都在谈Hadoop、NoSQL。而我认为,我们一定不要忽视智慧的作用。所以我一直在谈掌控大数据、谈用大数据探求规律。白皮书里面多次提到了云计算、Hadoop。这些技术当然是先进的,也将会是未来几年发展的主流。但是,如果我们退一步来想,每个人都在从自己的角度、自己的行业出发来思考大数据、来探索大数据,那么到底对于大数据本体的认知,能否得到本质上的提升?
经历了互联网的出现和发展的我们,应该能够清楚的认识到,对于互联网本体的认知,将决定企业是否能够把握先机。假设有人能提前5年认识到互联网的未来中将会出现互联网金融。那么这个人必将引领这互联网金融的浪潮。
我对于大数据的认识,可以用“两个论”来概括。狭义大数据论和广义大数据论。在从今起的文章中,我将仔细地分析这两个论。我对于大数据的所有认知,全部可以归结到这两个论中。而世界上所有已有的和将有的关于大数据的理论和应用,也都可以用这两个论进行归类。
何为狭义大数据论?何为广义大数据论?
要弄清楚这两个东西,我们先要明白,这里讲的狭义与广义,并不代表认知程度的宽窄,也不代表其本身的思维深度。我讲的狭义与广义,只是用来将大数据理论做以区分。从本质上来讲,这两种论的本源是一样的。而我们如果能够掌握这其中任何一论,都能成为这个地球上数一数二的大数据、乃至于商业社会、甚至人类精神的领袖。
狭义大数据,指的是我们当今社会的一切科学、一切领域所能够运用到的所有大数据。这一类大数据,无论被探索应用的多么深、多么广泛,都被归为狭义大数据。换句话说,人类科学能够探索应用的一切大数据,都算是狭义大数据。狭义大数据论是指,狭义大数据将引领人类社会飞速发展,各行各业也都将在这个狭义大数据剧变的浪潮中被颠覆,同时得到质的飞跃。
而要弄清楚广义大数据论,我们就先要明白一个基本的定律。那就是这个世界上存在的山川河流、日月星辰、花鸟鱼虫、飞禽走兽,乃至人类思维念头、外太空的细微震动,我们生活的这个维度、乃至于所有维度的一切事物,都是大数据。上到宇宙的运动,下到质子活动,全都能够被细化成为一组组的数据。而这浩瀚的数据量,绝对超过了人类科学的探知能力与探知范围。广义大数据论是指,通过对广义大数据的探索,人类最终能够探明宇宙、人生的真相。广义大数据论能够指导人类利用大数据对宇宙的奥秘,对人类自身奥秘进行探知。
驾驭广义大数据,就能掌握自然规律、社会规律,就能拥有宇宙、人生无上的智慧。
广义大数据论,是突破了人类所定义的科学与宗教范围的一种存在。而这种存在必将颠覆我们人类对于这个世界的一切认知。
边金阳:作家,被誉为中国的哈利波特,纽约大学在读硕士,致力于把人类最高的智慧与大数据相结合,从而真正驾驭和掌控大数据。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
随机森林算法的核心特点:原理、优势与应用解析 在机器学习领域,随机森林(Random Forest)作为集成学习(Ensemble Learning) ...
2025-09-05Excel 区域名定义:从基础到进阶的高效应用指南 在 Excel 数据处理中,频繁引用单元格区域(如A2:A100、B3:D20)不仅容易出错, ...
2025-09-05CDA 数据分析师:以六大分析方法构建数据驱动业务的核心能力 在数据驱动决策成为企业共识的当下,CDA(Certified Data Analyst) ...
2025-09-05SQL 日期截取:从基础方法到业务实战的全维度解析 在数据处理与业务分析中,日期数据是连接 “业务行为” 与 “时间维度” 的核 ...
2025-09-04在卷积神经网络(CNN)的发展历程中,解决 “梯度消失”“特征复用不足”“模型参数冗余” 一直是核心命题。2017 年提出的密集连 ...
2025-09-04CDA 数据分析师:驾驭数据范式,释放数据价值 在数字化转型浪潮席卷全球的当下,数据已成为企业核心生产要素。而 CDA(Certified ...
2025-09-04K-Means 聚类:无监督学习中数据分群的核心算法 在数据分析领域,当我们面对海量无标签数据(如用户行为记录、商品属性数据、图 ...
2025-09-03特征值、特征向量与主成分:数据降维背后的线性代数逻辑 在机器学习、数据分析与信号处理领域,“降维” 是破解高维数据复杂性的 ...
2025-09-03CDA 数据分析师与数据分析:解锁数据价值的关键 在数字经济高速发展的今天,数据已成为企业核心资产与社会发展的重要驱动力。无 ...
2025-09-03解析 loss.backward ():深度学习中梯度汇总与同步的自动触发核心 在深度学习模型训练流程中,loss.backward()是连接 “前向计算 ...
2025-09-02要解答 “画 K-S 图时横轴是等距还是等频” 的问题,需先明确 K-S 图的核心用途(检验样本分布与理论分布的一致性),再结合横轴 ...
2025-09-02CDA 数据分析师:助力企业破解数据需求与数据分析需求难题 在数字化浪潮席卷全球的当下,数据已成为企业核心战略资产。无论是市 ...
2025-09-02Power BI 度量值实战:基于每月收入与税金占比计算累计税金分摊金额 在企业财务分析中,税金分摊是成本核算与利润统计的核心环节 ...
2025-09-01巧用 ALTER TABLE rent ADD INDEX:租房系统数据库性能优化实践 在租房管理系统中,rent表是核心业务表之一,通常存储租赁订单信 ...
2025-09-01CDA 数据分析师:企业数字化转型的核心引擎 —— 从能力落地到价值跃迁 当数字化转型从 “选择题” 变为企业生存的 “必答题”, ...
2025-09-01数据清洗工具全景指南:从入门到进阶的实操路径 在数据驱动决策的链条中,“数据清洗” 是决定后续分析与建模有效性的 “第一道 ...
2025-08-29机器学习中的参数优化:以预测结果为核心的闭环调优路径 在机器学习模型落地中,“参数” 是连接 “数据” 与 “预测结果” 的关 ...
2025-08-29CDA 数据分析与量化策略分析流程:协同落地数据驱动价值 在数据驱动决策的实践中,“流程” 是确保价值落地的核心骨架 ——CDA ...
2025-08-29CDA含金量分析 在数字经济与人工智能深度融合的时代,数据驱动决策已成为企业核心竞争力的关键要素。CDA(Certified Data Analys ...
2025-08-28CDA认证:数据时代的职业通行证 当海通证券的交易大厅里闪烁的屏幕实时跳动着市场数据,当苏州银行的数字金融部连夜部署新的风控 ...
2025-08-28