京公网安备 11010802034615号
经营许可证编号:京B2-20210330
这些关于大数据的事情 你都要看清楚
大数据是当今一个最热门的话题,我们每一个人都无法置身其外。就像几年前出现的云计算一样,大数据已经引起市场的广泛关注;同样,企业迫切需要对大数据下定义。大数据缺少一个标准且普及性的定义,至少不像NIST对云的定义那样,能被人们广泛接受。
大数据的定义是:一种新一代的技术和架构,具备高效率的捕捉、发现和分析能力,能够经济地从类型繁杂、数量庞大的数据中挖掘出色价值。
大数据已经成为各类大会的重要议题,管理人士们都不愿错过这一新兴趋势。毫无疑问,当未来企业尝试分析现有海量信息以推动业务价值增值时,必定会采用大数据技术。
另一方面,正如其它新兴趋势一样,也有很多人怀疑大数据的效用。事实上,当一种技术成为广泛争论的焦点时,必定会招致一些质疑和批评。
关于大数据的重要价值有两种截然不同的观点。不过双方的共同之处在于,两种观点都对大数据存在一些误解,并对大数据的本质模糊不清。
误解1:大数据仅意味着数量庞大
“大数据”的名称本身就带有误导性,好像数据库的大小就是问题所在。但是这并非唯一的因素。英特尔欧洲、中东与非洲地区(EMEA)战略市场推广总监AlanPriestley认为,大数据还有其它要素,最明显的是数据类型繁杂,且数据要求快速交付。此外,企业还需要第一时间了解数据是否准确。
误解2:社交媒体最重要
很多关于大数据的讨论都集中在社交媒体数据对企业的影响。人们持有这种观点并不难理解:多数媒体的关注重点是获取客户最新信息这一传统业务。而现在,则意味着查找社交媒体互动,诸Twitter、Facebook、Insta-gram等等。但是,Priestley指出,企业最常见的还是机器生成的数据,包括网络日志、数据中心日志以及其它信息等。
他表示:“如今航空业也可以借助大数据的强大力量。例如,他们可以利用并分析航空旅行数据以预测可能存在的问题。而在过去,他们只能在数小时的飞行或发生故障之后检查引擎。谁也不希望故障发生,但要是等到故障发生以后才检查引擎,就已经太晚了。“借助大数据分析,他们可以跟踪引擎的振动。通过检查生成的数据,他们能够在数据发现异常时及时发出告警,安排检查引擎。”
误解3:大数据就是Hadoop
很多大数据的讨论都集中在Hadoop。Apache项目的知名度当然最高,它也是首个能够分析并存储非结构化数据,以从中获取价值的工具。但是,它并不是唯一的工具。Priestley表示:“有人认为只要开始使用Hadoop就万事无忧了,其实不然,传统数据仓库依然有存在的空间。人们需要保留现有的IT基础设施。”
Priestley指出Hadoop的吸引力在于,企业只需比较小的开销就可以获得大量信息。他补充说:“你可以在Apache下载Hadoop,它是一款免费软件并可在标准服务器上运行。其它替代方案就是购买Oracle或Teradata等公司的集成解决方案。但对于很多企业而言,这可能不是一个可行的选择,除非他们能够充分意识到通过分析数据可获得的优势。”
误解4:希望量化投资回报(ROI)
企业都喜欢硬性数字。首席信息官(CIO)一般喜欢这样说:迁移至大数据的成本是X,将能够在三年内节省Y。事实上,大数据并非如此。从大数据计划中获得清晰的投资回报(ROI)是非常难的。正如Priestley指出的,大量的大数据实施是“假设信息”,很难界定。
客户关系管理(CRM)等对企业的影响可以快速测量得出。但与此不同的是,计划采用大数据的企业必须接受这一差别。此外,企业针对重大项目的投资回报(ROI)的思维方式也似乎正在发生变化。以前企业认为ROI始终是一种可以轻松测量的有形资产,并且业务优势必定会超过支出成本。但现在情况开始有所转变。
最近,Claranet针对企业的云迁移方式进行了一项调查。调查结果表明,超过四分之一的受访者视ROI为决策因素之一,而79%的受访者认为ROI计算并不能真实反映业务优势。虽然该调查主要针对云迁移,但是由此可以合理推测,大数据迁移的情形也不会有太大差别。这二者均代表着一次未来的技术飞跃。
误解5:结果不可保证
大数据是个未知数。您正在做的就是分析无法估量、难以确定的数字。从本质上来说,大数据是不容易理解或者是抽象的。否则,您也就无需大数据技术了。因此,企业必须认识到他们无法保证结果的准确性。企业试图获得结果和找到假设的支持数据是徒劳无益的。在上述示例中,航空公司可能希望飞机每50万飞行小时维护一次,但是如果飞机每20万飞行小时就从空中坠落的话,航空公司的设想就将毫无意义。
如果说人们对大数据存在一些误解,那么,有关大数据的一些关键事实则需要不太看好大数据的企业去认真理解。
关键事实1:需要不同技能
多数观察家都认同数据科学家短缺这一点。麦肯锡公司预测,到2019年,全球将缺少高达19万可处理大数据的科学家。原因不难发现。处理大数据项目需要完全不同于处理现有数据仓库实施的技能。而且它还不仅仅限于数据处理,还要求能够将数据转换为可执行的建议。
“Hadoop中有一个称为MapReduce的工具。它需要Java编程技能,而这并不是当今很多数据分析师具有的技能。”Priestley举例说到。而事情还不止如此。处理大数据的理想人员还需要了解业务流程、Java和统计知识,甚至还可能需要一些SQL技能。这是个大问题,因此很多人也认为数据科学家的短缺将成为大数据技术采用的一个重要阻碍。
关键事实2:明确您的目标
虽然企业不应当试图探究确定的结果,但是他们应当明确企业目标,一个需要实现的目标。例如,大数据可提高绩效的途径之一是收集更加准确的信息,包括个人数据、客户行为和购买决策等。
麦肯锡公司发现,数字之大令人震惊。这家企业咨询公司声称,如果美国医疗产业采用大数据,全美医疗费用将削减8%。另外,麦肯锡公司提到,通过减少诈骗诉讼和增加税收,欧洲公共部门在运行效率方面可节省一千亿欧元。
关键事实3:人是推动因素
大数据项目需要有人推动。技术并非关键问题。这不是指那些具有上述数据科学家技能的一些人,而是指那些能提出明确目标与需求,并能执行决策的一些人。
这些人并不需要特殊的管理技能。这些责任可能落在首席财务官(CFO)、首席信息(CIO)甚至首席执行官(CEO)的肩上,但最终,需要有一个人担负此重任。正如Priestley所指出的:“大数据不仅仅是技术挑战,它还是业务挑战。企业需要了解这一点。对此,使用模式很重要。而在此方面,企业可以有很多种模式,并以不同方式进行建模。”
关键事实4:不仅仅是数据
大数据分析有三大要素:数据本身,数据分析,以及结果的呈现。拥有数据本身并没有实际意义。数据本身就已存在。重要的是如何处理、分析数据并呈现重要信息,以将数据转变为重要价值。开展大数据项目需要周密规划。最好是从小规模起步,先实施单个项目,然后逐步扩展规模。数据采集之后需要进行详细的结果分析。
关键事实5:大数据涉及所有人
很多关于大数据的讨论都聚焦在大型组织上,对于这些庞大的官僚机构来说,令人窒息的海量数据已经制约了组织的有效运行。很多率先采用大数据技术的组织都属于这一范畴,不过它们并不是唯一的受益者。
各类企业都希望获得评估隐藏数据并归纳模式的技能。有些小型企业需要处理大量工业数据。这些公司可能希望超越Excel进行客户分析,寻找客户购买模式。例如,如果您的饭店菜单上曾经有一道特色鱼,但后来取消了。那么当这道菜再次出现在菜单上可供顾客点用的时候,您就可以使用电子邮件通知之前曾经点过这道菜的所有顾客。或者,如果您是一个酒商,您的库存里有某种葡萄酒正在酿造期,当它们即将出库时,您可以提醒这种酒的爱好者。
总而言之,无论您青睐还是拒绝,大数据都已经成为一种事实。现在我们要追溯事实,探索真相…
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数字化商业环境中,数据已成为企业优化运营、抢占市场、规避风险的核心资产。但商业数据分析绝非“堆砌数据、生成报表”的简单 ...
2026-01-20定量报告的核心价值是传递数据洞察,但密密麻麻的表格、复杂的计算公式、晦涩的数值罗列,往往让读者望而却步,导致核心信息被淹 ...
2026-01-20在CDA(Certified Data Analyst)数据分析师的工作场景中,“精准分类与回归预测”是高频核心需求——比如预测用户是否流失、判 ...
2026-01-20在建筑工程造价工作中,清单汇总分类是核心环节之一,尤其是针对楼梯、楼梯间这类包含多个分项工程(如混凝土浇筑、钢筋制作、扶 ...
2026-01-19数据清洗是数据分析的“前置必修课”,其核心目标是剔除无效信息、修正错误数据,让原始数据具备准确性、一致性与可用性。在实际 ...
2026-01-19在CDA(Certified Data Analyst)数据分析师的日常工作中,常面临“无标签高维数据难以归类、群体规律模糊”的痛点——比如海量 ...
2026-01-19在数据仓库与数据分析体系中,维度表与事实表是构建结构化数据模型的核心组件,二者如同“骨架”与“血肉”,协同支撑起各类业务 ...
2026-01-16在游戏行业“存量竞争”的当下,玩家留存率直接决定游戏的生命周期与商业价值。一款游戏即便拥有出色的画面与玩法,若无法精准识 ...
2026-01-16为配合CDA考试中心的 2025 版 CDA Level III 认证新大纲落地,CDA 网校正式推出新大纲更新后的第一套官方模拟题。该模拟题严格遵 ...
2026-01-16在数据驱动决策的时代,数据分析已成为企业运营、产品优化、业务增长的核心工具。但实际工作中,很多数据分析项目看似流程完整, ...
2026-01-15在CDA(Certified Data Analyst)数据分析师的日常工作中,“高维数据处理”是高频痛点——比如用户画像包含“浏览次数、停留时 ...
2026-01-15在教育测量与评价领域,百分制考试成绩的分布规律是评估教学效果、优化命题设计的核心依据,而正态分布则是其中最具代表性的分布 ...
2026-01-15在用户从“接触产品”到“完成核心目标”的全链路中,流失是必然存在的——电商用户可能“浏览商品却未下单”,APP新用户可能“ ...
2026-01-14在产品增长的核心指标体系中,次日留存率是当之无愧的“入门级关键指标”——它直接反映用户对产品的首次体验反馈,是判断产品是 ...
2026-01-14在CDA(Certified Data Analyst)数据分析师的业务实操中,“分类预测”是高频核心需求——比如“预测用户是否会购买商品”“判 ...
2026-01-14在数字化时代,用户的每一次操作——无论是电商平台的“浏览-加购-下单”、APP的“登录-点击-留存”,还是金融产品的“注册-实名 ...
2026-01-13在数据驱动决策的时代,“数据质量决定分析价值”已成为行业共识。数据库、日志系统、第三方平台等渠道采集的原始数据,往往存在 ...
2026-01-13在CDA(Certified Data Analyst)数据分析师的核心能力体系中,“通过数据建立模型、实现预测与归因”是进阶关键——比如“预测 ...
2026-01-13在企业数字化转型过程中,业务模型与数据模型是两大核心支撑体系:业务模型承载“业务应该如何运转”的逻辑,数据模型解决“数据 ...
2026-01-12当前手游市场进入存量竞争时代,“拉新难、留存更难”成为行业普遍痛点。对于手游产品而言,用户留存率不仅直接决定产品的生命周 ...
2026-01-12