
数据分析技术热情背后的交叉因素
在“数据分析技术成为主流”(Analytics Goes Mainstream)一文中,我对目前以数据为主导的决策模式得以如此广泛应用的原因进行了解释。或许除了其应用范围外,同样令人感兴趣的还有这股数据分析技术热情背后的许多交叉因素。或许存在诸多其他因素,但我这里想介绍以下九个因素。
1. 全面质量管理(Total Quality Management,简称TQM)和六西格玛管理计划(six-sigma program)培养出一代重视严格运用数据的产品经理。六西格玛计划遭到滥用和曲解是毫无疑问的事实,但是我认为,以数据为主导的决策方式所带来的成功,极大影响了现在企业内部对高等统计式数据分析更为广泛的兴趣。
2. 数量金融学将运筹学、物理学、生物学、供应链管理学及其他领域的一些理念用于解决货币及市场问题。经过一些转变,许多数据密集型技术,比如投资组合理论,现在正从形式上的金融学科转化成日常管理的工具。
3. 正如Google公司CEO埃里克·施密特(Eric Schmidt)今年8月谈到的,现在我们两天内所产生的信息量就相当于人类自有文字记载以来至2003年的总和。显然,这个统计是以比特(bit)为计量单位的,而且Google的这一估计会由于高清视频的剧增而有所偏颇,但是这个总体观点是正确的:人们及各类组织目前产生数据的速度远超过任何人类或程序可以收集、消化或做出反应行动的速度。手机作为传感及通讯的平台作出了巨大贡献,企业应用及图像生成系统同样功不可没。现在,世界上有更多的领域以日益标准化的方式装备起各类数据仪器,其规模远超以往任何时候:Facebook的状态更新、全球定位系统(GPS)、ZigBee无线通讯技术及其他“物联网”(Internet of things)技术,以及运用于越来越多的产品上的条形码及RFID电子标签技术等等,这些只是其中的一部分。
4. 正当我们人类作为一个物种,产生以往任何时候都远远要多的数据的时候,摩尔定律(Moore's Law)及其一些推论(比如有关硬盘驱动器的克来德法则)正为我们创建起一个计算构架,使数据处理的成本效益可以比以往任何时候都高。当然,这些数据处理过程还会产生更多数据,加剧了数据过量的问题。
5. 继推行业务流程重组/企业资源计划(BPR/ERP)、互联网泡沫以及将服务导向架构作为一个业务发展主题的努力基本失败之后,供应商们目前正主推数据分析技术。数据分析技术可以用来销售服务、硬件和软件;可以用于每个垂直细分市场;适用于各种企业规模;而且与其他宏观层面的发展动向相连:智能电网(smart grids)、碳足迹、医疗成本控制、电子政务、市场营销效率、精益制造(lean manufacturing)等等。总之,许多供应商有充分的理由在其市场进入策略中重视数据分析。许多完成的投资交易增强了这个着重数据分析的承诺:SAP公司对Business Objects公司的收购是其历来规模最大的一次并购交易,而IBM、甲骨文(Oracle)、微软及Google公司都已在数据分析领域花费了数十亿美元收购相关企业。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数字化时代,用户的每一次行为 —— 从电商平台的 “浏览→加购→购买”,到视频 APP 的 “打开→搜索→观看→收藏”,再到银 ...
2025-10-11在机器学习建模流程中,“特征重要性分析” 是连接 “数据” 与 “业务” 的关键桥梁 —— 它不仅能帮我们筛选冗余特征、提升模 ...
2025-10-11在企业的数据体系中,未经分类的数据如同 “杂乱无章的仓库”—— 用户行为日志、订单记录、商品信息混杂存储,CDA(Certified D ...
2025-10-11在 SQL Server 数据库操作中,“数据类型转换” 是高频需求 —— 无论是将字符串格式的日期转为datetime用于筛选,还是将数值转 ...
2025-10-10在科研攻关、工业优化、产品开发中,正交试验(Orthogonal Experiment)因 “用少量试验覆盖多因素多水平组合” 的高效性,成为 ...
2025-10-10在企业数据量从 “GB 级” 迈向 “PB 级” 的过程中,“数据混乱” 的痛点逐渐从 “隐性问题” 变为 “显性瓶颈”:各部门数据口 ...
2025-10-10在深度学习中,“模型如何从错误中学习” 是最关键的问题 —— 而损失函数与反向传播正是回答这一问题的核心技术:损失函数负责 ...
2025-10-09本文将从 “检验本质” 切入,拆解两种方法的核心适用条件、场景边界与实战选择逻辑,结合医学、工业、教育领域的案例,让你明确 ...
2025-10-09在 CDA 数据分析师的日常工作中,常会遇到这样的困惑:某电商平台 11 月 GMV 同比增长 20%,但究竟是 “长期趋势自然增长”,还 ...
2025-10-09Pandas 选取特定值所在行:6 类核心方法与实战指南 在使用 pandas 处理结构化数据时,“选取特定值所在的行” 是最高频的操作之 ...
2025-09-30球面卷积神经网络(SCNN) 为解决这一痛点,球面卷积神经网络(Spherical Convolutional Neural Network, SCNN) 应运而生。它通 ...
2025-09-30在企业日常运营中,“未来会怎样” 是决策者最关心的问题 —— 电商平台想知道 “下月销量能否达标”,金融机构想预判 “下周股 ...
2025-09-30Excel 能做聚类分析吗?基础方法、进阶技巧与场景边界 在数据分析领域,聚类分析是 “无监督学习” 的核心技术 —— 无需预设分 ...
2025-09-29XGBoost 决策树:原理、优化与工业级实战指南 在机器学习领域,决策树因 “可解释性强、处理非线性关系能力突出” 成为基础模型 ...
2025-09-29在标签体系的落地链路中,“设计标签逻辑” 只是第一步,真正让标签从 “纸上定义” 变为 “业务可用资产” 的关键,在于标签加 ...
2025-09-29在使用 Excel 数据透视表进行多维度数据汇总时,折叠功能是梳理数据层级的核心工具 —— 通过点击 “+/-” 符号可展开明细数据或 ...
2025-09-28在使用 Pandas 处理 CSV、TSV 等文本文件时,“引号” 是最容易引发格式混乱的 “隐形杀手”—— 比如字段中包含逗号(如 “北京 ...
2025-09-28在 CDA(Certified Data Analyst)数据分析师的技能工具箱中,数据查询语言(尤其是 SQL)是最基础、也最核心的 “武器”。无论 ...
2025-09-28Cox 模型时间依赖性检验:原理、方法与实战应用 在生存分析领域,Cox 比例风险模型(Cox Proportional Hazards Model)是分析 “ ...
2025-09-26检测因子类型的影响程度大小:评估标准、实战案例与管控策略 在检测分析领域(如环境监测、食品质量检测、工业产品合规性测试) ...
2025-09-26