
大数据将改变人类解决问题的方式
哲学家康德在《纯粹理性批判》中提到,真理有分析真理和综合真理之分。简单而言,分析真理可以由逻辑论据推导出来,综合真理则需要经验证据和外部数据来证明。以往我们主要是通过分析方法来解决问题,首先建立模型和定律,然后通过逻辑推演出新的模型和定律。
Innovation Endeavors 的 Zavain Dar 提出,由于计算机系统和网络的发展,大数据崛起和 API 的蔓延将改变我们解决问题的方式。过去,我们是通过建立新颖的分析模型来推导出新发现,现在则变成了通过建设基础设施及能力,用综合化的手段去解决同样的问题。
他举例说,对于 web 排名这件事情,Google 的科学家的做法并不是通过页面和链接的关系推导出某种定理来用于更好地进行搜索,而是通过收集并综合之前的点击流和链接数据来预测未来用户希望看的东西。而 Amazon 也没有归纳出什么电子商务定律来指导了解谁将购买什么,而是通过历史的事件来优化未来的活动。
Google 和 Amazon 都是解决问题方式从分析向综合转移的早期例子,因为这两家公司的产品都是建立在数字化媒介当中的数据之上的。数据的创建、存储及用来与数据交互的接口都是数字化、自动化的。
但现在随着大数据的流行和 API 的普及,数据科学和基础设施方面的先驱已经通过建立高吞吐低时延的设施来获得渐进性、可预测的综合性创新和洞察,摒弃过去那种跃进式、但耗时长的分析性做法。
Dar 提出,要想把综合方法运用到新的领域,必须有两个基础:
1) 底层数据必须以数字化的形式存在
2) 从数据到科学家以及再从科学家返回到数据的过程必须自动化
也即整个输入输出的过程必须自动化。
从分析方法论转向综合方法论的转变其潜在意义将是巨大的。以往,这些方法局限在人工智能及信息获取等计算机科学子域,一切数字化以后,我们将不再需要预先设定的结构和公理这些知识性甚至哲学性的负担了,基础架构的普及就可以加速综合型问题解决的普及。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
K-Means 聚类:无监督学习中数据分群的核心算法 在数据分析领域,当我们面对海量无标签数据(如用户行为记录、商品属性数据、图 ...
2025-09-03特征值、特征向量与主成分:数据降维背后的线性代数逻辑 在机器学习、数据分析与信号处理领域,“降维” 是破解高维数据复杂性的 ...
2025-09-03CDA 数据分析师与数据分析:解锁数据价值的关键 在数字经济高速发展的今天,数据已成为企业核心资产与社会发展的重要驱动力。无 ...
2025-09-03解析 loss.backward ():深度学习中梯度汇总与同步的自动触发核心 在深度学习模型训练流程中,loss.backward()是连接 “前向计算 ...
2025-09-02要解答 “画 K-S 图时横轴是等距还是等频” 的问题,需先明确 K-S 图的核心用途(检验样本分布与理论分布的一致性),再结合横轴 ...
2025-09-02CDA 数据分析师:助力企业破解数据需求与数据分析需求难题 在数字化浪潮席卷全球的当下,数据已成为企业核心战略资产。无论是市 ...
2025-09-02Power BI 度量值实战:基于每月收入与税金占比计算累计税金分摊金额 在企业财务分析中,税金分摊是成本核算与利润统计的核心环节 ...
2025-09-01巧用 ALTER TABLE rent ADD INDEX:租房系统数据库性能优化实践 在租房管理系统中,rent表是核心业务表之一,通常存储租赁订单信 ...
2025-09-01CDA 数据分析师:企业数字化转型的核心引擎 —— 从能力落地到价值跃迁 当数字化转型从 “选择题” 变为企业生存的 “必答题”, ...
2025-09-01数据清洗工具全景指南:从入门到进阶的实操路径 在数据驱动决策的链条中,“数据清洗” 是决定后续分析与建模有效性的 “第一道 ...
2025-08-29机器学习中的参数优化:以预测结果为核心的闭环调优路径 在机器学习模型落地中,“参数” 是连接 “数据” 与 “预测结果” 的关 ...
2025-08-29CDA 数据分析与量化策略分析流程:协同落地数据驱动价值 在数据驱动决策的实践中,“流程” 是确保价值落地的核心骨架 ——CDA ...
2025-08-29CDA含金量分析 在数字经济与人工智能深度融合的时代,数据驱动决策已成为企业核心竞争力的关键要素。CDA(Certified Data Analys ...
2025-08-28CDA认证:数据时代的职业通行证 当海通证券的交易大厅里闪烁的屏幕实时跳动着市场数据,当苏州银行的数字金融部连夜部署新的风控 ...
2025-08-28PCU:游戏运营的 “实时晴雨表”—— 从数据监控到运营决策的落地指南 在游戏行业,DAU(日活跃用户)、MAU(月活跃用户)是衡量 ...
2025-08-28Excel 聚类分析:零代码实现数据分群,赋能中小团队业务决策 在数字化转型中,“数据分群” 是企业理解用户、优化运营的核心手段 ...
2025-08-28CDA 数据分析师:数字化时代数据思维的践行者与价值推动者 当数字经济成为全球经济增长的核心引擎,数据已从 “辅助性信息” 跃 ...
2025-08-28ALTER TABLE ADD 多个 INDEX:数据库批量索引优化的高效实践 在数据库运维与性能优化中,索引是提升查询效率的核心手段。当业务 ...
2025-08-27Power BI 去重函数:数据清洗与精准分析的核心工具 在企业数据分析流程中,数据质量直接决定分析结果的可靠性。Power BI 作为主 ...
2025-08-27CDA 数据分析师:数据探索与统计分析的实践与价值 在数字化浪潮席卷各行业的当下,数据已成为企业核心资产,而 CDA(Certif ...
2025-08-27