京公网安备 11010802034615号
经营许可证编号:京B2-20210330
“大数据”仅仅是一个数据应用先进方法
看了众多对“大数据”的说法,有人说大数据需要“全息”的数据,才能做到真正的大数据应用,才能做到理想中的BI;还有人说大数据重点是各种数据处理以及更海量数据和海量信息,从超级大的数据挖掘出的东西,往往价值很大。
不管哪种说法,我觉得他们更适合去做“科学研究”,在企业这样干,哪是个头,什么时候才能有结果啊?近期一个段子说,大数据很牛的系统框架搭建完毕,然后问你也需要解决什么业务问题?然后,就没有然后了。。。
所以我想表达的一个观点,是“大数据”仅仅是一个数据应用先进方法,什么4V非结构化处理,非结构化处理、数据挖掘、人工智能,这些N年前就有了好吧?有人说是概念炒作,我认为只说对了一小半,原因如下:
1、传统BI过于注重决策支持,没有形成数据应用闭环,这是传统BI没有解决的缺陷,而大数据提供了这个契机。从我对传统BI在过去和现在应用的了解,传统BI的应用重心99%仍然在直接和间接的决策支持,如果你和做过多年传统BI,且不了解大数据的同学问,数据分析可以直接在系统中调用,智能判断,这个你们做么?基本会回答不做,因为这不是项目范围,还有人说,这个咋做?
2、对最细粒度维度的挖掘,可以实现自动化智能的效果,而传统BI不行。大数据时代重新将技术从实施时候的“厂商”,拉回到实施人员,使得很多想象空间完全打开。如果你观察传统BI的同学,一般是IOS等几大厂商的产品(包括数据挖掘产品)和SQL足够熟悉,这种技术环境造就的团队,已经没有技术实力来实现通过多个系统接口,将数据历史数据+实时收集=〉数据挖掘=〉系统调用数据挖掘结论=〉直接影响用户体验=〉自动评估效果这样的闭环数据应用中。
例 如你发现某些特定用户来写错送货地址,传统BI能做到的是,发现有部分用户写错地址,原因是换地方了,但是按业务经理的说法,我也知道这个事情啊,写错了 就只能人工解决啊,分析出来有啥用?于是大数据可以根据写错地址的原因进行分析,可以发现有搬家、换租地方(换城市)等,那么可以根据(时间+IP)等组 合用户信息区别来自动提醒,直接解决了问题,而不是分析出一个结论,把困难交给了相关的业务经理。
3、一定得全息、全量问题发现才能算大数据,或者才能实施应用么?持这种观点的同学永远想象不到,互联网时代是能解决多少问题就有多少价值的理念。
就如上面的案例,你可以说不能解决全部填错地址的问题,但是当你发现你这样做已经解决了很多消费者的问题,挽回多方损失的时候,你就会觉得,这事还真值得去做。等你搜集到全息数据,黄花菜都凉了,而问题还不一定能解决,因为你重点是纠结这个数据到底全还是不全啊
结论:
“大数据”仅仅是一个数据应用先进方法,它的核心不是全息数据,也不是海量非结构化、结构化数据混合处理,而是是否打开了你应用数据的心扉,你是否可以用这个先进武器,解决你之前解决不了,甚至想都不敢想的问题。
大数据包含但不限于原有BI和数据挖掘的应用范围,既可以是预测,也可以是宏观报告、问题分析,还可以将问题分析和解决问题集成在系统中,将你的系统变得越来越Smart,自然用户体验会逐步提升,营销、售后问题也能有更多解决。
任何说大数据主要是在预测、关联等定义的描述,都是在限制大数据的发挥,或者给自己贴金而已,大数据不应该被某些人或团队给圈死在太局部的应用中。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
你有没有想过,手机里点外卖、刷社交软件、转一笔账,背后到底是谁在替你"记着账"? 答案其实很简单:数据库,以及跟它对话的那 ...
2026-10-07CDA数据分析师 出品 作者:李诗怡 一、数据分析四大思维 1. 对比思维:没有对比就没有分析 核心观点:单独一个数字没有意义,有 ...
2026-10-05Kimball 是方法,星型模型是它产出的形状。 很多人把"Kimball vs 星型模型"当成一道选择题——这本身就是个误会:Kimball 是动词 ...
2026-10-05写在开头 老板在微信上甩来一句: "帮我看下为什么销量跌了。" ” 你回工位,打开 SQL,开始写。查订单表、拉近三个月、按 ...
2026-10-03CDA数据分析师 出品 作者:李诗怡 1. 事实表 vs 维度表 对比维度 事实表 维度表 核心问题 记录“业务发生了什么事” 描述 ...
2026-10-02做数据聚合时,PySpark的groupBy()确实能完成统计,这也是它的本职工作。但它有一个根本性局限:每一组数据,最终只能返回一行 ...
2026-10-01热力地图是数据可视化中极具辨识度与实用性的空间分析图表,结合地理空间维度与数据密度特征,通过颜色深浅、色阶渐变直观展示数 ...
2026-09-30 很多数据分析师做过按月份的销售额趋势图,画过按天的流量折线图,但当被问到“时间序列和普通数据有什么本质区别”“季节性 ...
2026-09-30同样是“银行数据岗”,在国有大行总行数据中心、在一家城商行的零售部、在银行系金融科技子公司、在保险公司,工作内容、成长节 ...
2026-09-29在数据分析与统计学研究中,数据往往不是独立存在的,不同变量之间普遍存在相互关联、相互影响的关系。相关性统计分析是挖掘变量 ...
2026-09-29 导读:大多数人只把 dataclasses 当成偷懒工具,用来少写 __init__、__repr__ 这类魔法方法。但它的能力远不止于此。本文带 ...
2026-09-29 很多数据分析师能熟练地计算指标、搭建标签体系,但当被问到“画像到底在解决什么问题”“画像和标签是什么关系”“画像如何 ...
2026-09-29在MySQL数据库运维与业务开发中,行业普遍存在“数据达到千万级就必须分表”的说法。但在实际生产环境中,千万条数据并不是强制 ...
2026-09-28CDA数据分析师 出品 作者:李诗怡 1. 5W1H 分析法 定义:经典系统性思维框架,通过六个核心维度对问题进行全方位拆解与剖析,确 ...
2026-09-28 很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当 ...
2026-09-28CDA数据分析师 出品 作者:李诗怡 1. 用户标签体系 定义: 通过一系列高度精炼的特征标识,对用户属性、行为与偏好进行量化刻画 ...
2026-09-24Pandas是Python生态中用于表格数据处理的核心库,广泛应用于数据清洗、统计运算、报表输出、数据分析建模等场景。在处理极大数值 ...
2026-09-24随着数字经济快速发展,数据已成为核心生产要素,各行各业的业务沉淀、用户行为、设备运行、市场交易均产生海量数据。数据处理作 ...
2026-09-24 很多分析师每天和数据打交道,但当被问到“标签是什么”“标签和指标有什么区别”“标签体系如何设计”时,却常常答不上来。 ...
2026-09-24在时序数据分析中,大部分业务数据并非持续平稳变化,而是会在某些时间节点出现突然抬升、断崖下跌、趋势反转、波动异变等现象, ...
2026-09-23