京公网安备 11010802034615号
经营许可证编号:京B2-20210330
数据科学与火箭科学如何将人类送上火星
在最近的CNN专栏中,奥巴马总统再次证实,美国将不遗余力地实行将载人航天器送上火星的任务。如果你觉得自己面临的数据科学难题太有挑战性,那你应该想一想,用挖掘数据的方式来探究火星远征对健康的影响,是多难的一件事。
在太空中生活几年对于宇航员的肌肉张力和肺活量有多大影响?对他们来说减轻体重的安全限度是多少?载人飞船中的二氧化碳含量应有多少?每一件太空服需要配置多少传感器用来计算宇航员的关节灵活性?
想要把人类送到“前无古人”的那些地方,有大量的变量需要纳入考虑,NASA也正刻苦研究未来的火星计划所涉及的健康和安全风险。这些风险影响着制定计划时所需要作出的一系列决策——从预估的潜在机组人员数量,到设备工程、任务后勤以及燃油储备,等等,因而对这些风险的明确了解可谓是重中之重。
虽然代价高昂,但NASA从开始就很明白,他们工作的重点不在于开发一个完美的分析模型,而在于打造一个数据科学程序,使决策者在回答一些不断变动的问题时,能用到分析学的办法。但是如果你想要学习NASA的分析方式,不一定非得跟火箭科学打交道。对于那些想要从事大数据分析,或困于大数据分析的组织来说,这里有从NASA的项目中总结的几个核心要点:
别小题大做
简而言之,数据科学根本没火箭科学那么难(不信的话你看我在那做了什么)。是的,分析大数据是有挑战性,而且根据你所期望获取的见解不同,方法也可能随之变动,但是完全没必要把事情搞得太复杂,想要得到解决方案远远用不着那么复杂。
很多组织时常循环往复试着把数据搬回来分析,其实他们更应该把分析方法带进数据里去。既然称之为大数据,自然是不可能把它搬来搬去的,就算做到了,也得历经艰难险阻。这也就是分散式存储和像Hadoop那样的处理框架存在的原因——云数据的可扩展性,比起硬盘里的数据可高太多了。
对于火星计划来说,涉及到很多层次的数据需要考虑,从曾经完成过太空任务的宇航员(比如说斯考特凯丽),身上取得的健康数据,到无人航天的测试研究,再到模拟太空环境下的研究,其中之一就是休斯顿市约翰逊太空中心的人类探索研究模拟计划(HERA)。
把所有数据归整到同一个地方是关键的第一步。为此,NASA使用了高级协作式分析方法和数据共享平台对数据进行分析,这一平台的开发者是洛克希德马丁公司和几个分析伙伴,比如勇攀科技。因为省去了下载数据到单独的分析环境中的步骤,研究者们现在可以把更多的时间和精力花在提问题、解决问题,然后更好地规划火星计划上面。
发射只是开始
火箭的成功发射只是持续数年的火星远征的第一步。基于从前的经验,NASA已经做好了遇到并解决无数挑战的准备。对于数据分析项目来说亦是如此,光是部署好了模型并不意味着项目大功告成,实际上那些基于实时基础上不断完善和迭代的模型才是最有价值的分析初创。
像科学研究方法一样,充分利用分析结果需要不断地做实验检测,从失败中获取教训,然后接着进行检测。NASA想要的是快速查询供其使用的大量数据,然后把结论传回可以立足于先前结果的新模型中。所以对他们来说,数据科学程序就像一个钟摆,向前的摇摆着重于从研究者那里快速获得结论,而向后的摇摆着重于测量、评估结果、改进模型以及再次向前摇摆。
用现有的数据进行工作,而不是你所期望的数据。
在数据组有缺陷的时候,快速轻巧地改善模型的能力尤其宝贵。(而且说实话,有完全没有缺陷的数据组这回事吗?)。
对NASA来说,最大的数据挑战就是宇航员的样本库太小了,只有三千多人被NASA认定为宇航员。想要取得推断,研究者们得把从这个小样本中取得的数据挖个底朝天才行。
举例来说,基于历时五个月的太空旅行对一个35岁,120磅重的女性的影响,两年的太空旅行对一个32岁,123磅重的会有什么影响呢?对30岁、118磅的呢?此外,到现在还没有宇航员实际踏上过这个红色星球,所以对在火星上居住会有什么健康影响,相关数据还处于空白阶段(马特达蒙不算哦)。
但是NASA从去过月球的宇航员或者在空间站待过一年的宇航员那里可以知道些什么呢?如果把处于模拟太空环境的测试体的数据放入预测模型,会发生什么呢?有了支持模型配置与完善的分析工具,各组织可以试着用各种方式从数据中提取结论来做出更准确的预测,甚至在缺失关键信息的情况下也可以做到。
打破隐喻黑箱
为了火星计划,NASA不仅仅押上了纳税人的数十亿美金,还押上了宇航员的性命,为了科学与探索,这些宇航员不惜担起健康和生命安全的风险。
对于这样的一个计划,关键在于让不是数据科学博士的那些分析工作者(比如说健康研究者、设备工程师和其他策划航行任务的人员)也能够自力完成构建和展开查询、使用数据的任务。这要求商业和IT股东们的通力合作,易用易改的建模工具以及将深入了解转达给需要的人的能力。这也是NASA选择一个这样的协作分析平台的原因,这一平台可以将输出结果直接延伸至火星计划的科学家和决策者所使用的系统和应用中。
大量复杂的数据组给任何想要从事分析部署的组织带来了挑战,但是NASA驾驭数据进行了最困难的行程规划——也就是火星远征,证明了这些挑战绝不是不可逾越的。只要有了正确的工具,以及最为重要的,一致周详的解决方式,数据科学根本不像火箭科学那么吓人。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数字化商业环境中,数据已成为企业优化运营、抢占市场、规避风险的核心资产。但商业数据分析绝非“堆砌数据、生成报表”的简单 ...
2026-01-20定量报告的核心价值是传递数据洞察,但密密麻麻的表格、复杂的计算公式、晦涩的数值罗列,往往让读者望而却步,导致核心信息被淹 ...
2026-01-20在CDA(Certified Data Analyst)数据分析师的工作场景中,“精准分类与回归预测”是高频核心需求——比如预测用户是否流失、判 ...
2026-01-20在建筑工程造价工作中,清单汇总分类是核心环节之一,尤其是针对楼梯、楼梯间这类包含多个分项工程(如混凝土浇筑、钢筋制作、扶 ...
2026-01-19数据清洗是数据分析的“前置必修课”,其核心目标是剔除无效信息、修正错误数据,让原始数据具备准确性、一致性与可用性。在实际 ...
2026-01-19在CDA(Certified Data Analyst)数据分析师的日常工作中,常面临“无标签高维数据难以归类、群体规律模糊”的痛点——比如海量 ...
2026-01-19在数据仓库与数据分析体系中,维度表与事实表是构建结构化数据模型的核心组件,二者如同“骨架”与“血肉”,协同支撑起各类业务 ...
2026-01-16在游戏行业“存量竞争”的当下,玩家留存率直接决定游戏的生命周期与商业价值。一款游戏即便拥有出色的画面与玩法,若无法精准识 ...
2026-01-16为配合CDA考试中心的 2025 版 CDA Level III 认证新大纲落地,CDA 网校正式推出新大纲更新后的第一套官方模拟题。该模拟题严格遵 ...
2026-01-16在数据驱动决策的时代,数据分析已成为企业运营、产品优化、业务增长的核心工具。但实际工作中,很多数据分析项目看似流程完整, ...
2026-01-15在CDA(Certified Data Analyst)数据分析师的日常工作中,“高维数据处理”是高频痛点——比如用户画像包含“浏览次数、停留时 ...
2026-01-15在教育测量与评价领域,百分制考试成绩的分布规律是评估教学效果、优化命题设计的核心依据,而正态分布则是其中最具代表性的分布 ...
2026-01-15在用户从“接触产品”到“完成核心目标”的全链路中,流失是必然存在的——电商用户可能“浏览商品却未下单”,APP新用户可能“ ...
2026-01-14在产品增长的核心指标体系中,次日留存率是当之无愧的“入门级关键指标”——它直接反映用户对产品的首次体验反馈,是判断产品是 ...
2026-01-14在CDA(Certified Data Analyst)数据分析师的业务实操中,“分类预测”是高频核心需求——比如“预测用户是否会购买商品”“判 ...
2026-01-14在数字化时代,用户的每一次操作——无论是电商平台的“浏览-加购-下单”、APP的“登录-点击-留存”,还是金融产品的“注册-实名 ...
2026-01-13在数据驱动决策的时代,“数据质量决定分析价值”已成为行业共识。数据库、日志系统、第三方平台等渠道采集的原始数据,往往存在 ...
2026-01-13在CDA(Certified Data Analyst)数据分析师的核心能力体系中,“通过数据建立模型、实现预测与归因”是进阶关键——比如“预测 ...
2026-01-13在企业数字化转型过程中,业务模型与数据模型是两大核心支撑体系:业务模型承载“业务应该如何运转”的逻辑,数据模型解决“数据 ...
2026-01-12当前手游市场进入存量竞争时代,“拉新难、留存更难”成为行业普遍痛点。对于手游产品而言,用户留存率不仅直接决定产品的生命周 ...
2026-01-12