京公网安备 11010802034615号
经营许可证编号:京B2-20210330
不要着急玩大数据
沸沸扬扬的“大数据(Big Data)”,把很多企业、很多人搞得魂不守舍,蠢蠢欲动,似乎只要一玩大数据,大家都可以发大财似的。
其实,你只要静下心来想一想,很多企业,似乎还没有资格去玩什么大数据。
因为,“微数据(Micro Data)”、“小数据(Small Data)”你都还没有搞清楚,你去玩什么“大数据”?
那么,什么叫微数据呢?
说简单点,所谓的微数据就是你自己的数据,如制造业普遍使用的ERP数据。很多企业,花了很多钱上了ERP,结果还是“不好使”,给客户及时交货率没有提高,呆滞库存还是数不清,库存周转率还是上不去,为什么?
很多人抱怨是上错了ERP,或者怪ERP功能不完善,更有甚者是把使用了多年的BAAN/ORACLE换成了SAP,结果呢?还是那个样儿!
这是为什么?
业务流程、组织架构没有与ERP有效结合是个很重要的原因,但ERP内部数据不准确,却是个重中之重的原因!
所以,我跟很多企业讲,其实你不需要这么昂贵的ERP,你花十分之一、甚至是百分之一的钱,用个金蝶K3或者用友的U8也就足够了,因为“一只拿着木头棒子的猴子,完全可以杀死一头拿着AK47(突击步枪)的猪”(注:这句话不是我说的,是我伟创力一个兄弟的发明),你信不信?
关键的问题是你先理清你的微数据。
微数据包括主数据(Master Data),如BOM数据,交易数据(Transactional Data),如收、发货的数据等等,但这些说白了都属于企业内部的数据,理论上是完全可控的,但你真正控制住了吗?
我的TIM审核、数据挖掘的12张表,基本都属于“微数据”的范畴,但又有几家企业能够比较完整地提取出来?
接下来才是所谓的“小数据”,见附图第二层。
小数据是指企业外部的,但是又是来自于合作伙伴的数据,如供应商的库存,客户的库存,甚至是供应商的供应商的库存,客户的客户的库存。
这些数据基本上也是可控的,但前提是需要ERP之外的工具链接,如一些供应链管理协同软件,类似E2OPEN等等。
但现在的问题是,这些小数据,对很多企业来讲也是个巨大的挑战。
我在审核很多企业的供应链管理过程中,发现一种我称之为“伪VMI”的现象。我的很多咨询客户的客户要他们做VMI(供应商管理库存),但客户的客户每天用了他们多少东西,什么时间用的,用了多少,又不告诉人家,没有任何系统对接,只有等到财务月结的时候才产生个数据,准不准也不知道,这叫什么VMI?当然,“伪VMI”还包括让供应商被动地补货,这里就不多讲了。
小数据搞不定,又会直接影响大数据分析的准确性,反之亦然,于是就乱成了一锅粥。物流的三流(物流、信息流、资金流)被讲了多少年了,但最基础的信息流,也就是数据流都搞不清楚,又哪来的物流、资金流?
小、微数据乱了套,搞大数据又有啥用?
从供应链管理的角度,基础原材料的供应市场分析应该属于所谓大数据的范畴。如,你要研究电子元器件的价格、供应走势,你就必须从大数据的角度,来研究硅、镍、铜等基础原材料的市场情况;你要研究哪款产品好卖,你就要从大数据角度,研究终端消费者的消费行为、习惯等等。
但问题是,你大数据研究的再好,你的小数据、微数据不给力,你不是该出不去货,还是出不去,该有的呆滞库存,你还还是有吗?
基础打不好,你即使能伸到“云”里去,又能怎么样呢?
从“微”到“小”,再从“小”到“大”,这是个规律啊!
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
CDA数据分析师 出品 作者:李诗怡 1. 事实表 vs 维度表 对比维度 事实表 维度表 核心问题 记录“业务发生了什么事” 描述 ...
2026-10-02做数据聚合时,PySpark的groupBy()确实能完成统计,这也是它的本职工作。但它有一个根本性局限:每一组数据,最终只能返回一行 ...
2026-10-01热力地图是数据可视化中极具辨识度与实用性的空间分析图表,结合地理空间维度与数据密度特征,通过颜色深浅、色阶渐变直观展示数 ...
2026-09-30 很多数据分析师做过按月份的销售额趋势图,画过按天的流量折线图,但当被问到“时间序列和普通数据有什么本质区别”“季节性 ...
2026-09-30同样是“银行数据岗”,在国有大行总行数据中心、在一家城商行的零售部、在银行系金融科技子公司、在保险公司,工作内容、成长节 ...
2026-09-29在数据分析与统计学研究中,数据往往不是独立存在的,不同变量之间普遍存在相互关联、相互影响的关系。相关性统计分析是挖掘变量 ...
2026-09-29 导读:大多数人只把 dataclasses 当成偷懒工具,用来少写 __init__、__repr__ 这类魔法方法。但它的能力远不止于此。本文带 ...
2026-09-29 很多数据分析师能熟练地计算指标、搭建标签体系,但当被问到“画像到底在解决什么问题”“画像和标签是什么关系”“画像如何 ...
2026-09-29在MySQL数据库运维与业务开发中,行业普遍存在“数据达到千万级就必须分表”的说法。但在实际生产环境中,千万条数据并不是强制 ...
2026-09-28CDA数据分析师 出品 作者:李诗怡 1. 5W1H 分析法 定义:经典系统性思维框架,通过六个核心维度对问题进行全方位拆解与剖析,确 ...
2026-09-28 很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当 ...
2026-09-28CDA数据分析师 出品 作者:李诗怡 1. 用户标签体系 定义: 通过一系列高度精炼的特征标识,对用户属性、行为与偏好进行量化刻画 ...
2026-09-24Pandas是Python生态中用于表格数据处理的核心库,广泛应用于数据清洗、统计运算、报表输出、数据分析建模等场景。在处理极大数值 ...
2026-09-24随着数字经济快速发展,数据已成为核心生产要素,各行各业的业务沉淀、用户行为、设备运行、市场交易均产生海量数据。数据处理作 ...
2026-09-24 很多分析师每天和数据打交道,但当被问到“标签是什么”“标签和指标有什么区别”“标签体系如何设计”时,却常常答不上来。 ...
2026-09-24在时序数据分析中,大部分业务数据并非持续平稳变化,而是会在某些时间节点出现突然抬升、断崖下跌、趋势反转、波动异变等现象, ...
2026-09-23在统计学与数据分析中,研究多组数据差异最常用的方法为单因素方差分析与事后多重比较。很多数据分析初学者容易混淆两者功能,认 ...
2026-09-23 很多数据分析师每天都在写 SQL,但当被问到“DQL 的本质是什么”“SELECT 子句的书写顺序与执行顺序为何不同”“INNER JOIN ...
2026-09-23 很多数据分析师写过无数个SELECT查询,但当被问到“如何新建一张表来固化中间数据”“创建视图和创建物理表有什么区别”“视 ...
2026-09-22CDA数据分析师 出品 作者:李诗怡 1. 金字塔原理 定义: 一种“先总后分、先结论后原因”的思考和表达方式。顶层为核心观点,中 ...
2026-09-22