京公网安备 11010802034615号
经营许可证编号:京B2-20210330
作者 | Jamie Beach
编译 | AI开发者
Top 5 Insights After I Spent 100 Days Learning About Artificial Intelligence
本文的作者是 Jamie Beach,在自学人工智能 100 天以后,他分享了自己对人工智能的 5 个感悟,以下是他的全文。
2019 年 1 月底,我突然意识到,我对人工智能的理解不足。它正日益影响着我们的每一天。人工智能保护我们的收件箱免受垃圾邮件的攻击,它支持来自 Alexa 的天气更新,它使亚马逊能够向我们推荐商品,让 Netflix 给我们推荐电影。每次我们打开 twitter 或 facebook,都是人类与比我们更了解自己的人工智能的较量。但我是一个专业的技术人员,却对人工智能的真正含义知之甚少。
《连线》杂志创办人 Kevin Kelly 在一个名为「未来思考者(Future Thinkers)」的播客上接受采访时,谈到过 AI 相关的话题。他认为,我们的人工智能技术还处于起步阶段,如果有人花一点时间学习人工智能和机器学习,超越只是了解的水平,他们会发现自己只是一小部分人中的一部分。那天下班回家后,我开始了为期 100 天的「人工智能学习潜水」。
我将需要学习的所有东西都进行了分类(https://trello.com/b/g1cS5K0O/100-days-of-ai)。由于在职,很难找到业余时间,但我确实在 100 天内完成了近 200 个小时的工作。我读了 9 本书,上了 2 门 Coursera 课程(已经开始学习第三门课),听了很多播客,看了尽可能多的辅助教程。
以下是我在那段时间总结出的 5 个观点:
01.人工智能是旧的也是新的
人工智能这个词并非出自某部科幻小说。1956 年,在达特茅斯学院的一个暑期研讨会上,许多聪明人聚集在一起研究如何让机器思考。在这次聚会中产生了「人工智能」这个概念。虽然这次会议并没有研究出具有思维的机器人,但它带来的思想和技术仍然是当今人工智能的基础。
研讨会之后,人们对人工智能的不同子领域的兴趣增强。神经网络似乎很有前途,但在当时这项技术一片空白,大多数研究最终放弃了这一概念。这个时期被称为「AI 寒冬」,它持续了几十年。然而,近年来,算力和可用数据的指数增长,加上深度学习的最新进展,极大地提高了机器学习的有效性。AI 被 Andrew Ng 等专家称为「新的电力(new electricity)」。
02.人工智能等同于机器学习,但它不是终结者
「人工智能是用 powerpoint 完成的,机器学习是用 python 完成的(「AI is done in PowerPoint and machine learning in Python」)」
终结者,在流行文化中是超智能的缩影
人工通用智能(Artificial General Intelligence,简称 AGI)是一种假想的机器,它的思维方式和人类一样, 比如终结者就是这种机器人。超智能是超越人类思维能力的机器(如果读过 Nick Bostrom 的 Superintelligence,你可能会有点害怕它),但在现在,还没有这样的事物出现。到目前为止,AGI 只是一种幻想,它在未来,并且有点遥不可及。这并不意味着没人在做这件事,这也不意味着像 Max Tegmark 和 Ray Kurzweil 这样的聪明人不会广泛地谈论它并期待它。但目前人工智能的形式几乎就是机器学习 —— 一个 AI 的子领域。
机器学习的基本原理如下:
第一步:把一个问题变成一个预测问题。换句话说,给定输入参数(特征),预测结果。你可以预测一栋房子的价格,或者是拍摄时给定的摄像位置。
第二步:定义算法或者系统,做出决策。这里有很多方法,如线性回归,神经网络,深度学习,支持向量机,递归神经网络,卷积神经网络,生成性对抗网络等等。每种算法都可以用于一种特殊的预测问题。要预测房屋成本,线性回归模型就足够了;预测电影剧本将使用一个递归神经网络(RNN);预测不存在的人的面部图像使用生成性对抗网络(GAN)。
第三步:获取大量的训练数据。通常情况下,数据越多,效果越好。对于房价,要获取数千行数据,其中包含这些房屋出售的特征和实际价格(标签)。对于字符识别,需要获取大量的字符图片并相应地进行标注。
第四步:训练模型。提供训练数据,计算误差,调整并重复,直到误差最小化。梯度下降和反向传播是这里的重要概念。
假设误差已经达到最小,模型就可以接受新的特征,并预测结果。这个结果通常非常准确——比人类更精确。
03.没有魔法,只有数学
我刚在谷歌上找到的公式
在开始这 100 天之前,我知道机器学习会涉及到数学,但我并不知道会需要多少数学知识。了解微积分和矩阵代数对任何人来说都是非常有益的,幸运的是,你不需要是数学专业的学生就可以学会这些,而且机器学习的框架也在不断地迭代,变得越来越易用。
一些重要的框架,包括 Google 的 Tensorflow、Microsoft 的 ML.NET 和 PyTorch 为程序、数学和算法添加了抽象层。甚至还有额外的抽象层,比如于 Tensorflow 上面的 Keras。
此外,相关人员正通过提供机器学习模型作为一项服务,或创建自动化的程序(如 AutoML 和 Auto-Keras),使机器学习更加容易上手。
04.偏差是个大问题
「真正的安全问题是,如果我们给这些系统提供有偏差的数据,系统就会有偏差」——John Giannandrea。
机器学习中的偏差是个大问题。Amy Webb 的书「The Big Nine」中有好几个章节都提到了这个问题。测试数据的全面性和多样性是非常重要的,但这往往是缺乏的。
1956 年以来的「人工智能的奠基人」
Amy 使用 ImageNet 语料库作为有固定偏差的例子,它里面有超过 1400 万张标记图片,其中一半以上是在美国产生作的。当然,ImageNet 并不是唯一一个有偏差的例子。
当一个数据集中包含了「护士」的女性形象或「首席执行官」的男性形象时会发生什么?当皮肤癌图像数据只使用浅肤色样本时会发生什么?如果这些模型真正进入我们的日常生活时,就会产生严重的后果。随着 ML 模型的全民化继续进行,我们往往在不知道用于训练的测试数据是什么样的情况下,就使用预先制作的模型,这种偏差持续存在,并可能放大。
研究人员很清楚这一问题,九大公司(G-MAFIA + BAT)都有和指导原则来说明减少工程文化偏差的必要性。但这不是故意的。没有人会故意在模型中加入偏差,即使是出于善意,偏差也是不可避免的。
因此,我们都必须了解机器学习的工作原理,以及它是如何影响我们的——它是如何为 Twitter 和 Facebook 提供能量的,这些能量会搅动我们自己的神经元,从而影响我们对世界的看法。
05.机会如此之多
全球人工智能衍生业务价值预测(单位:十亿美元),数据来源:Gartner(2018 年 4 月)
Kevin Kelly 是对的。我们还处在人工智能和机器学习的早期。是的,有很多应用程序已经渗透到我们的生活中,但仍然有很多很多的机会。
机器学习能够、已经和将会彻底改变一切。在过去的 100 天里,我读过的许多书中有一本叫「Manna」,作者是 Marshall Brian。这是一本科幻小说,它描述了一个近乎乌托邦的社会,机器和自动化承担了所有的工作,人类可以随心所欲地生活。不需要 AGI,只需要机器学习。这样的生活离我们到底还有多远?
我预见到未来 Instagram 名人和 YouTube 博主甚至都不是真实的,但却拥有数以千万计的追随者,他们发布的内容完全由 GAN 和 RNN 生成。由机器学习驱动的新的娱乐模式将会诞生,从电影脚本到栩栩如生的超现实的三维模型都是由机器学习模型创建的。忘了面试工作吧。当你自己的个人数据记录可以与所有当前职位空缺的公司数据档案相匹配时,又何必费心呢?从癌症治疗到餐厅晚餐,再到实时生成的音乐,一切都可以使用 ML 个性化地产生。自动驾驶的出租车、基于 RNN 的文案服务、自动化服务协议、自动化法庭裁决、个性化生活改善策略、无人机交付、基于人工智能的投资,这些都是无止境的、有形的,而且几乎都是目前的热门领域。
人工智能和机器学习也可能在全文明水平上影响人类,帮助缓解存在的风险,如气候变化、战争、疾病甚至小行星撞击地球。
世界即将变得不同。我们可能会注意到这一点,也可能不会。人工智能将推动这一变化,而且它已经开始在我们身上蔓延。
正如 Kevin Kelly 所说,
未来发生得很慢,但会突然爆发(the future happens slowly and then all at once)。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在神经网络模型搭建中,“最后一层是否添加激活函数”是新手常困惑的关键问题——有人照搬中间层的ReLU激活,导致回归任务输出异 ...
2025-12-05在机器学习落地过程中,“模型准确率高但不可解释”“面对数据噪声就失效”是两大核心痛点——金融风控模型若无法解释决策依据, ...
2025-12-05在CDA(Certified Data Analyst)数据分析师的能力模型中,“指标计算”是基础技能,而“指标体系搭建”则是区分新手与资深分析 ...
2025-12-05在回归分析的结果解读中,R方(决定系数)是衡量模型拟合效果的核心指标——它代表因变量的变异中能被自变量解释的比例,取值通 ...
2025-12-04在城市规划、物流配送、文旅分析等场景中,经纬度热力图是解读空间数据的核心工具——它能将零散的GPS坐标(如外卖订单地址、景 ...
2025-12-04在CDA(Certified Data Analyst)数据分析师的指标体系中,“通用指标”与“场景指标”并非相互割裂的两个部分,而是支撑业务分 ...
2025-12-04每到“双十一”,电商平台的销售额会迎来爆发式增长;每逢冬季,北方的天然气消耗量会显著上升;每月的10号左右,工资发放会带动 ...
2025-12-03随着数字化转型的深入,企业面临的数据量呈指数级增长——电商的用户行为日志、物联网的传感器数据、社交平台的图文视频等,这些 ...
2025-12-03在CDA(Certified Data Analyst)数据分析师的工作体系中,“指标”是贯穿始终的核心载体——从“销售额环比增长15%”的业务结论 ...
2025-12-03在神经网络训练中,损失函数的数值变化常被视为模型训练效果的“核心仪表盘”——初学者盯着屏幕上不断下降的损失值满心欢喜,却 ...
2025-12-02在CDA(Certified Data Analyst)数据分析师的日常工作中,“用部分数据推断整体情况”是高频需求——从10万条订单样本中判断全 ...
2025-12-02在数据预处理的纲量统一环节,标准化是消除量纲影响的核心手段——它将不同量级的特征(如“用户年龄”“消费金额”)转化为同一 ...
2025-12-02在数据驱动决策成为企业核心竞争力的今天,A/B测试已从“可选优化工具”升级为“必选验证体系”。它通过控制变量法构建“平行实 ...
2025-12-01在时间序列预测任务中,LSTM(长短期记忆网络)凭借对时序依赖关系的捕捉能力成为主流模型。但很多开发者在实操中会遇到困惑:用 ...
2025-12-01引言:数据时代的“透视镜”与“掘金者” 在数字经济浪潮下,数据已成为企业决策的核心资产,而CDA数据分析师正是挖掘数据价值的 ...
2025-12-01数据分析师的日常,常始于一堆“毫无章法”的数据点:电商后台导出的零散订单记录、APP埋点收集的无序用户行为日志、传感器实时 ...
2025-11-28在MySQL数据库运维中,“query end”是查询执行生命周期的收尾阶段,理论上耗时极短——主要完成结果集封装、资源释放、事务状态 ...
2025-11-28在CDA(Certified Data Analyst)数据分析师的工具包中,透视分析方法是处理表结构数据的“瑞士军刀”——无需复杂代码,仅通过 ...
2025-11-28在统计分析中,数据的分布形态是决定“用什么方法分析、信什么结果”的底层逻辑——它如同数据的“性格”,直接影响着描述统计的 ...
2025-11-27在电商订单查询、用户信息导出等业务场景中,技术人员常面临一个选择:是一次性查询500条数据,还是分5次每次查询100条?这个问 ...
2025-11-27