
大数据时代是相信数据科学还是领导的感觉
即使企业有开发大数据的能力(其实大部分并没有这个能力),他们还总是喜欢使用未经测试的想当然的想法,而非利用数据科学来做决策。视觉分析公司Atheon Analytics的总经理Guy Cuthbert认为,即使是在那些使用数据的公司中,许多仍然会有选择性的支持那些已经被认可的观点,而非真正数据验证的事实,而利用数据本身,只是靠想法制定决策的一种伪装罢了。
最近Actian公司在伦敦参加的一个圆桌会议上,Cuthbert谈到,数据科学涉及到提出假设和检验假设的方法,但他所遇到的大多数商品零售企业都绕过了这两个方法。
他说:我能一口气说出许多零售商的可怕故事,这些故事都有一个共同点,即这些零售商相信客户存在一个特定的行为方式,因为他们在开张的那一天就有人这么告诉他们了。他们从了没有真正质疑过这些说法而去探究真实的情况品类的真实情况、国家中特定地区的情况,或尺码的情况。数不清的案例表明,人们轻信别人告诉他们的东西,但却不去自己探究真正的事实是什么样的。
我们做了很多工作,想要把各种组织从‘想法驱动’改变为‘数据驱动’,让它们开始采用事实和假设的科学方法,而不是‘想当然’。Cuthbert说。
Cuthbert说,自己曾经努力帮助过许多公司,以让它们理解它们的产品的绩效表现,但这些公司都无法被认为具有分析能力。按照他的推测,全球的商业企业中大概只有百分之一甚至是只有千分之一是真正的数据驱动的。
Cuthbert说:我见过大量的依靠直觉运营的企业并不了解原来数据还可以产生决策。我也听过太多高管们滔滔不绝地喷出了各种各样的其实没有什么‘营养’的想法。因此,如果数据绘制者或者数据科学家去做一些事情,去教商人们他们的组织中所蕴含的那些令人着迷数据及背后的事实,他们就会开始自觉地去认识它们了。
然而,让业务揭穿企业中的一些(不真实)的神话并开始接受现实,接受以数据为基础的结论,并非易事。
在我们向人们展示我们的观点时,常遇到一些充满火药味的‘回击’,他们当面指责我们,说我们所说的是彻头彻尾的缪论。Cuthbert说。
另外一个问题是即使公司试图科学地使用数据,他们关注的点也过于聚焦而狭隘。
大多数与我们合作的公司关注已知的东西,他们总是着眼于诸如‘我们希望明年的收入增加6%,让我们确保能搞定6%’之类的东西。Cuthbert说。
他们没有去寻找增长30%或者120%的机会。我们很多工作只是浮于表面,或者展示那些他们其实自己也没有弄懂的一套东西。
不幸的是,尽管技术进步让我们能够非常容易地处理数十亿条数据,但分析本身,却必须依靠与人力完成。
机器缺乏灵感,这是造成机器学习以及其他计算机技术与人类思维鸿沟巨大的现时原因。Cuthbert说,灵感来自于人类懂得如何从数据中找出隐含的信息。
大数据分析公司Actian(之前叫Ingres)的CEO Steve Shine说,一直到现在,为了满足大数据所需要的开发技能,他们拥有一组特定的高预算的客户,这些客户需要他们的这些技能完成项目。
在过去的三四年中,如果你在任何的一个地方接触过hadoop项目,你就会意识到,能够写一个高效的MapReduce程序并使hadoop高效运行是一个相当牛逼的技能。Shine说,这种技能被技术社区热切地保护了起来,却并没有扩散,但最近的12个月内发生了戏剧性的变化。大家都接受了一个事情,即需要让利用新的技术变得更加容易。
我们把人们带回上世纪80年代,那时如果你能有现在通过代码来获取所有的数据和发现新见解的能力,你将会变得有多么的多产。
但现在新的问题是,大数据技术在迅猛扩散,各种版本的Hadoop、NoSQL,以及提供和整合数据的新方法层出不穷。
没有一个CIO因为把这些东西能够‘粘合’在一起而获得奖励。企业并不在乎你多快多好的把这些粘合在一起。企业也不在乎你到底能多快的帮助他找到客户流失数据。Shine说。
然而,现在的技术允许企业从他们通常的生产数据中发现意想不到的商业潜力。
Shine援引了他在福利和工资服务行业中的一个客户的情况,对于工资变化、毕业生和参与者的信息,这个客户自己处理数据后得到的信息,甚至要比政府提供的信息更能准确描绘宏观经济。
他说:那些看起来传统的组织,实际上已经有一个业务,即他们意识到如果它们以数据为中心,并且利用数据,以及尽可能地结合其它他们能获得的数据,他们就能够基本做出比现在他们能做出来的东西更具根本价值的东西,他说。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
随机森林算法的核心特点:原理、优势与应用解析 在机器学习领域,随机森林(Random Forest)作为集成学习(Ensemble Learning) ...
2025-09-05Excel 区域名定义:从基础到进阶的高效应用指南 在 Excel 数据处理中,频繁引用单元格区域(如A2:A100、B3:D20)不仅容易出错, ...
2025-09-05CDA 数据分析师:以六大分析方法构建数据驱动业务的核心能力 在数据驱动决策成为企业共识的当下,CDA(Certified Data Analyst) ...
2025-09-05SQL 日期截取:从基础方法到业务实战的全维度解析 在数据处理与业务分析中,日期数据是连接 “业务行为” 与 “时间维度” 的核 ...
2025-09-04在卷积神经网络(CNN)的发展历程中,解决 “梯度消失”“特征复用不足”“模型参数冗余” 一直是核心命题。2017 年提出的密集连 ...
2025-09-04CDA 数据分析师:驾驭数据范式,释放数据价值 在数字化转型浪潮席卷全球的当下,数据已成为企业核心生产要素。而 CDA(Certified ...
2025-09-04K-Means 聚类:无监督学习中数据分群的核心算法 在数据分析领域,当我们面对海量无标签数据(如用户行为记录、商品属性数据、图 ...
2025-09-03特征值、特征向量与主成分:数据降维背后的线性代数逻辑 在机器学习、数据分析与信号处理领域,“降维” 是破解高维数据复杂性的 ...
2025-09-03CDA 数据分析师与数据分析:解锁数据价值的关键 在数字经济高速发展的今天,数据已成为企业核心资产与社会发展的重要驱动力。无 ...
2025-09-03解析 loss.backward ():深度学习中梯度汇总与同步的自动触发核心 在深度学习模型训练流程中,loss.backward()是连接 “前向计算 ...
2025-09-02要解答 “画 K-S 图时横轴是等距还是等频” 的问题,需先明确 K-S 图的核心用途(检验样本分布与理论分布的一致性),再结合横轴 ...
2025-09-02CDA 数据分析师:助力企业破解数据需求与数据分析需求难题 在数字化浪潮席卷全球的当下,数据已成为企业核心战略资产。无论是市 ...
2025-09-02Power BI 度量值实战:基于每月收入与税金占比计算累计税金分摊金额 在企业财务分析中,税金分摊是成本核算与利润统计的核心环节 ...
2025-09-01巧用 ALTER TABLE rent ADD INDEX:租房系统数据库性能优化实践 在租房管理系统中,rent表是核心业务表之一,通常存储租赁订单信 ...
2025-09-01CDA 数据分析师:企业数字化转型的核心引擎 —— 从能力落地到价值跃迁 当数字化转型从 “选择题” 变为企业生存的 “必答题”, ...
2025-09-01数据清洗工具全景指南:从入门到进阶的实操路径 在数据驱动决策的链条中,“数据清洗” 是决定后续分析与建模有效性的 “第一道 ...
2025-08-29机器学习中的参数优化:以预测结果为核心的闭环调优路径 在机器学习模型落地中,“参数” 是连接 “数据” 与 “预测结果” 的关 ...
2025-08-29CDA 数据分析与量化策略分析流程:协同落地数据驱动价值 在数据驱动决策的实践中,“流程” 是确保价值落地的核心骨架 ——CDA ...
2025-08-29CDA含金量分析 在数字经济与人工智能深度融合的时代,数据驱动决策已成为企业核心竞争力的关键要素。CDA(Certified Data Analys ...
2025-08-28CDA认证:数据时代的职业通行证 当海通证券的交易大厅里闪烁的屏幕实时跳动着市场数据,当苏州银行的数字金融部连夜部署新的风控 ...
2025-08-28