京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据时代是相信数据科学还是领导的感觉
即使企业有开发大数据的能力(其实大部分并没有这个能力),他们还总是喜欢使用未经测试的想当然的想法,而非利用数据科学来做决策。视觉分析公司Atheon Analytics的总经理Guy Cuthbert认为,即使是在那些使用数据的公司中,许多仍然会有选择性的支持那些已经被认可的观点,而非真正数据验证的事实,而利用数据本身,只是靠想法制定决策的一种伪装罢了。
最近Actian公司在伦敦参加的一个圆桌会议上,Cuthbert谈到,数据科学涉及到提出假设和检验假设的方法,但他所遇到的大多数商品零售企业都绕过了这两个方法。
他说:我能一口气说出许多零售商的可怕故事,这些故事都有一个共同点,即这些零售商相信客户存在一个特定的行为方式,因为他们在开张的那一天就有人这么告诉他们了。他们从了没有真正质疑过这些说法而去探究真实的情况品类的真实情况、国家中特定地区的情况,或尺码的情况。数不清的案例表明,人们轻信别人告诉他们的东西,但却不去自己探究真正的事实是什么样的。
我们做了很多工作,想要把各种组织从‘想法驱动’改变为‘数据驱动’,让它们开始采用事实和假设的科学方法,而不是‘想当然’。Cuthbert说。
Cuthbert说,自己曾经努力帮助过许多公司,以让它们理解它们的产品的绩效表现,但这些公司都无法被认为具有分析能力。按照他的推测,全球的商业企业中大概只有百分之一甚至是只有千分之一是真正的数据驱动的。
Cuthbert说:我见过大量的依靠直觉运营的企业并不了解原来数据还可以产生决策。我也听过太多高管们滔滔不绝地喷出了各种各样的其实没有什么‘营养’的想法。因此,如果数据绘制者或者数据科学家去做一些事情,去教商人们他们的组织中所蕴含的那些令人着迷数据及背后的事实,他们就会开始自觉地去认识它们了。
然而,让业务揭穿企业中的一些(不真实)的神话并开始接受现实,接受以数据为基础的结论,并非易事。
在我们向人们展示我们的观点时,常遇到一些充满火药味的‘回击’,他们当面指责我们,说我们所说的是彻头彻尾的缪论。Cuthbert说。
另外一个问题是即使公司试图科学地使用数据,他们关注的点也过于聚焦而狭隘。
大多数与我们合作的公司关注已知的东西,他们总是着眼于诸如‘我们希望明年的收入增加6%,让我们确保能搞定6%’之类的东西。Cuthbert说。
他们没有去寻找增长30%或者120%的机会。我们很多工作只是浮于表面,或者展示那些他们其实自己也没有弄懂的一套东西。
不幸的是,尽管技术进步让我们能够非常容易地处理数十亿条数据,但分析本身,却必须依靠与人力完成。
机器缺乏灵感,这是造成机器学习以及其他计算机技术与人类思维鸿沟巨大的现时原因。Cuthbert说,灵感来自于人类懂得如何从数据中找出隐含的信息。
大数据分析公司Actian(之前叫Ingres)的CEO Steve Shine说,一直到现在,为了满足大数据所需要的开发技能,他们拥有一组特定的高预算的客户,这些客户需要他们的这些技能完成项目。
在过去的三四年中,如果你在任何的一个地方接触过hadoop项目,你就会意识到,能够写一个高效的MapReduce程序并使hadoop高效运行是一个相当牛逼的技能。Shine说,这种技能被技术社区热切地保护了起来,却并没有扩散,但最近的12个月内发生了戏剧性的变化。大家都接受了一个事情,即需要让利用新的技术变得更加容易。
我们把人们带回上世纪80年代,那时如果你能有现在通过代码来获取所有的数据和发现新见解的能力,你将会变得有多么的多产。
但现在新的问题是,大数据技术在迅猛扩散,各种版本的Hadoop、NoSQL,以及提供和整合数据的新方法层出不穷。
没有一个CIO因为把这些东西能够‘粘合’在一起而获得奖励。企业并不在乎你多快多好的把这些粘合在一起。企业也不在乎你到底能多快的帮助他找到客户流失数据。Shine说。
然而,现在的技术允许企业从他们通常的生产数据中发现意想不到的商业潜力。
Shine援引了他在福利和工资服务行业中的一个客户的情况,对于工资变化、毕业生和参与者的信息,这个客户自己处理数据后得到的信息,甚至要比政府提供的信息更能准确描绘宏观经济。
他说:那些看起来传统的组织,实际上已经有一个业务,即他们意识到如果它们以数据为中心,并且利用数据,以及尽可能地结合其它他们能获得的数据,他们就能够基本做出比现在他们能做出来的东西更具根本价值的东西,他说。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据分析、业务监控、质量检测与风险管控工作中,数据波动性是衡量数据稳定性、业务健康度、结果可信度的核心依据。数据波动代 ...
2026-08-18很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当导致 ...
2026-08-18在数据分析、业务评价、产品评级、用户分层与综合决策场景中,单一指标往往无法全面、客观地评价事物整体水平。现实中的评价对象 ...
2026-08-18在数理统计、假设检验、数据分析与机器学习领域中,卡方分布(χ²分布)是继正态分布、t分布之后最重要的连续型概率分布之一。 ...
2026-08-17在Python数据清洗、文本校验、账号密码规则校验、脏数据过滤、字符串规整化处理中,正则表达式是最高效、最常用的文本匹配工具。 ...
2026-08-17 很多分析师每天和数据打交道,但当被问到“标签是什么”“标签和指标有什么区别”“标签体系如何设计”时,却常常答不上来。 ...
2026-08-17手游行业具备用户迭代快、竞争激烈、用户粘性易流失的典型特征。随着新游持续上线、玩家审美升级、玩法疲劳等问题出现,存量用户 ...
2026-08-14在数字化产品运营、商业数据分析、业务增长管理中,零散的指标统计无法支撑系统性的业务决策。单一的点击率、转化率、销量数据只 ...
2026-08-14 很多数据分析师每天都在写SQL,但当被问到“数据查询语言(DQL)的本质是什么”“SELECT语句中各子句的书写顺序与实际执行顺 ...
2026-08-14在数据库数据分析、数据清洗、报表统计与业务查询场景中,日期时间是最高频、最核心的基础字段。数据库中存储的日期格式多样,包 ...
2026-08-13在数据统计分析与数据清洗工作中,箱线图是一种简洁高效、客观性强的数据可视化图表,能够直观呈现数据集的分布特征、离散程度和 ...
2026-08-13 很多数据分析师写过无数个SELECT查询,但当被问到“如何新建一张表来固化中间数据”“创建视图和创建物理表有什么区别”“视 ...
2026-08-13在自动化办公、数据采集、定时统计、日志清理、系统监控等场景中,程序往往需要按照固定时间间隔重复执行指定任务,这种运行机制 ...
2026-08-12在数据分析日常工作中,Excel数据筛选是数据清洗、数据提取、样本筛选的核心基础操作。传统Excel手动筛选、函数筛选方式,面对多 ...
2026-08-12 很多数据分析师精通Excel函数和数据透视表,但当被问到“数据从哪里来”“表和视图有什么区别”“数据库管理系统和SQL是什么 ...
2026-08-12在数据分析、统计建模、数据挖掘与商业调研过程中,原始数据往往无法做到绝对干净规整。受系统故障、人工录入失误、设备误差、突 ...
2026-08-11在数据分析工作中,聚类分析是典型的无监督学习方法,核心作用是依据数据自身的多维特征,将相似样本自动划分为若干类别,实现“ ...
2026-08-11 很多企业团队并非缺乏指标,而是陷入“指标失控”:仪表盘上堆满实时跳动的数据,却无法回答“当前瓶颈在哪、下一步该做什么 ...
2026-08-11AB实验是互联网产品迭代、营销优化、功能升级的核心科学验证手段,通过流量随机分组、对照组与实验组对比,科学验证策略、功能、 ...
2026-08-10在MySQL数据库优化中,索引是提升查询效率、降低数据库IO开销、优化系统性能的核心手段。普通单列索引仅适配简单查询场景,面对 ...
2026-08-10