
大数据让人看到更真实的历史
大数据研究不仅能预测人未来的行为,也能让我们更清晰地看清过往的历史。斯坦福大学Clark教授说,“历史只有工业革命前后之分,其他的历史细节虽然很有意思,但不关键。”为什么呢?一方面,世界人均GDP在公元1800年前的两三千年里基本没有变化,工业革命之后才逐渐上升;另一方面,工业革命之后人类生活方式、社会结构、政治形态以及文化内涵都有了本质性变革。
公元元年时世界人均GDP大约为445 美元 (按1990年美元算),到1820年上升到667美元,1800多年里只 增长 了50%。同期,西欧国家稍微好一些,但也只是从公元元年的450美元增长到1820年时的1204美元,英国作为工业革命的发源国也大致如此。而从1820年到2001年的180年里,世界人均GDP从原来的667美元增长到6049美元。由此可见,工业革命带来的收入增长的确是翻天覆地的。
工业革命之前的人类既然没有实现财富增长,那么他们都在忙些什么呢?那个时期,不管是东方还是西方,有很多改朝换代,但Clark教授认为,“用不着被那些表面的东西所误导”,在工业革命之前,人类社会一直没有走出“马尔萨斯模式”,即在生产率不变的情况下,自然灾害或战争导致人口死亡,使接下来的人均收入增加,为生育率上升、人口增长提供条件,可是人口增长后,人均土地和人均收入会减少,使生存挑战越来越大,又导致战争的发生并使接下来的人口又减少,在这个周期中循环。
Clark教授通过对英国人遗嘱研究发现,在工业革命之前,英国人的生育率跟财富水平高度正相关:越有钱的夫妻,小孩数量越众。在16世纪期间,最富的三分之一英国人死时平均还有4至6个小孩健在,中等财富的英国人离世时平均有3.5到4.5个小孩健在,而最穷的三分之一英国人离世时只有不到3个小孩活着。到18世纪末,基本情况仍然是越富有的家庭小孩数越多,只是每家的小孩数量都降到4个以下,并且各财富阶层间的小孩数量差距明显缩小。
工业革命到来之后,小孩数量就基本跟财富水平没有关系了。而从1880年到1980年的100年间,情况正好反过来:越穷的英国人,小孩数量反而越多,完全改变了工业革命之前“适者生存”、“有钱者生存”的规律。穷者还是追求小孩数量,而富者更注重小孩的质量和自己的生活品质。Clark教授发现工业革命之后,虽然穷人的小孩数更多,但富人的平均寿命更长,这可能是后者更侧重生活质量的结果。
Clark教授的研究结果对中国的历史研究也很有启发。公元元年时中国的人均GDP为450美元(跟西欧一样),到洋务运动的起点时也仅为530美元。在人们的基本生活水平几千年没有变化的情况下,那些制度与文化体系是经历了几千年的检验,还是只经历了几年、一两个朝代的考验,并不存在本质性差别。从这个意义上讲,在收入与生活方式处于静态不变的状况下,那些朝代到底叫“汉朝”、“隋朝”、“唐朝”、“宋朝”,还是“元朝”、“明朝”或“清朝”,这些细节意义不是那么大,至少没有原来我们强调的那么大。
鸦片战争敲开了国门,洋务运动把工业革命请进中国,由此真正把引发社会变革的工业技术和相配思维方式带入中国,让中国有机会走出困扰社会几千年的马尔萨斯式陷阱,结束过去重复的静态朝代更替周期。
玉米和红薯曾这样影响中国
瑞典斯德哥尔摩大学贾瑞雪教授研究中国历年农民暴动起义跟自然灾害的关系。她的量化历史研究发现:在16世纪玉米、红薯进中国前,干旱年里平均每12个州府地区就有一个发生农民起义或暴动,而玉米、红薯于16世纪引进中国后,即使在干旱年,每40个州府才有一个发生农民起义。主要原因在于这些“新世界”粮食作物对水稻有很强的补充作用。从这个意义上说,虽然红薯、玉米不像大米那么受欢迎,但是在干旱年份,如果是在暴动起义和红薯、玉米之间做选择,农民更愿意选择后者。
哥伦布发现美洲后,西班牙人先是从现在的墨西哥把玉米、红薯和土豆带回欧洲。按照学者估算,仅土豆一项就使欧洲人口在1700-1900年两百年间增长25%,使欧洲城市化率从27%到35%,并帮助催化了工业革命的发生。
这些作物随后传入中国。香港科技大学龚启圣教授和他的合作者要研究的问题主要有三个:第一,到底是因为引进了这三项农作物使中国人口从1500年的1.3亿上升到1900年的4亿,还是因为中国人口已经增长太多,到16、17世纪不得不寻找新的粮食作物?第二,如果是这些新作物激发了中国人口增长,其具体贡献有多大?第三,这些新作物是否也催化了中国的人均收入增长?
他们找到了23个省1330个县的县志,从1550年左右开始研究各县志哪年首次提到玉米,依此勾画出玉米在中国的扩散途径和持续时间。他们发现,玉米最早是经三条路径进入中国:第一条路径是丝绸之路,玉米经中亚于1560年左右进入甘肃,第二条是经印度于1563年进入云南,第三条途径是经菲律宾于1572年进入福建。
接下来,龚教授把引进了玉米的县和还没引进玉米的邻县,形成两个样本,比较这两组县每隔十年的人口密度差别。在考虑到自然灾害、战争死亡等因素之后,他们的数据分析发现:按照1776年、1820年、1851年、1890年、1910年几个时间点看,在每个时期,已经引进玉米的县人口密度明显高于没有引进玉米的县,而且一个县已经种植玉米的年份越长,其人口密度高出的就越多。种玉米的时间每多十年,其人口密度就多增5%-6%。
经过各种严格计量方法的验证,他们得出的结论为:是玉米带动了中国的人口增长,而不是人口增长压力迫使中国引进玉米、红薯。而且从1776年到1910年间,中国14.12%的人口增长是由玉米所致。而从16世纪初到20世纪初,中国粮食增量的55%是由于这三项新作物。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据成为新时代“石油”的今天,几乎每个职场人都在焦虑: “为什么别人能用数据驱动决策、升职加薪,而我面对Excel表格却无从 ...
2025-10-18数据清洗是 “数据价值挖掘的前置关卡”—— 其核心目标是 “去除噪声、修正错误、规范格式”,但前提是不破坏数据的真实业务含 ...
2025-10-17在数据汇总分析中,透视表凭借灵活的字段重组能力成为核心工具,但原始透视表仅能呈现数值结果,缺乏对数据背景、异常原因或业务 ...
2025-10-17在企业管理中,“凭经验定策略” 的传统模式正逐渐失效 —— 金融机构靠 “研究员主观判断” 选股可能错失收益,电商靠 “运营拍 ...
2025-10-17在数据库日常操作中,INSERT INTO SELECT是实现 “批量数据迁移” 的核心 SQL 语句 —— 它能直接将一个表(或查询结果集)的数 ...
2025-10-16在机器学习建模中,“参数” 是决定模型效果的关键变量 —— 无论是线性回归的系数、随机森林的树深度,还是神经网络的权重,这 ...
2025-10-16在数字化浪潮中,“数据” 已从 “辅助决策的工具” 升级为 “驱动业务的核心资产”—— 电商平台靠用户行为数据优化推荐算法, ...
2025-10-16在大模型从实验室走向生产环境的过程中,“稳定性” 是决定其能否实用的关键 —— 一个在单轮测试中表现优异的模型,若在高并发 ...
2025-10-15在机器学习入门领域,“鸢尾花数据集(Iris Dataset)” 是理解 “特征值” 与 “目标值” 的最佳案例 —— 它结构清晰、维度适 ...
2025-10-15在数据驱动的业务场景中,零散的指标(如 “GMV”“复购率”)就像 “散落的零件”,无法支撑系统性决策;而科学的指标体系,则 ...
2025-10-15在神经网络模型设计中,“隐藏层层数” 是决定模型能力与效率的核心参数之一 —— 层数过少,模型可能 “欠拟合”(无法捕捉数据 ...
2025-10-14在数字化浪潮中,数据分析师已成为企业 “从数据中挖掘价值” 的核心角色 —— 他们既要能从海量数据中提取有效信息,又要能将分 ...
2025-10-14在企业数据驱动的实践中,“指标混乱” 是最常见的痛点:运营部门说 “复购率 15%”,产品部门说 “复购率 8%”,实则是两者对 ...
2025-10-14在手游行业,“次日留存率” 是衡量一款游戏生死的 “第一道关卡”—— 它不仅反映了玩家对游戏的初始接受度,更直接决定了后续 ...
2025-10-13分库分表,为何而生? 在信息技术发展的早期阶段,数据量相对较小,业务逻辑也较为简单,单库单表的数据库架构就能够满足大多数 ...
2025-10-13在企业数字化转型过程中,“数据孤岛” 是普遍面临的痛点:用户数据散落在 APP 日志、注册系统、客服记录中,订单数据分散在交易 ...
2025-10-13在数字化时代,用户的每一次行为 —— 从电商平台的 “浏览→加购→购买”,到视频 APP 的 “打开→搜索→观看→收藏”,再到银 ...
2025-10-11在机器学习建模流程中,“特征重要性分析” 是连接 “数据” 与 “业务” 的关键桥梁 —— 它不仅能帮我们筛选冗余特征、提升模 ...
2025-10-11在企业的数据体系中,未经分类的数据如同 “杂乱无章的仓库”—— 用户行为日志、订单记录、商品信息混杂存储,CDA(Certified D ...
2025-10-11在 SQL Server 数据库操作中,“数据类型转换” 是高频需求 —— 无论是将字符串格式的日期转为datetime用于筛选,还是将数值转 ...
2025-10-10