京公网安备 11010802034615号
经营许可证编号:京B2-20210330
数据科学家和人工智能爱好者Dhilip Subramanian
数据科学、机器学习和人工智能是近几年来的热门领域。许多人想成为数据科学家,并通过大学、在线课程或自学投入巨大努力来提升他们的技能。然而,在现实世界中,在工作和解决业务问题方面有很多挑战。作为一名数据科学家,非技术技能同样重要。在这个博客中,我分享了我作为一名数据科学家在工作中遇到的个人经验。
现实世界中有很多挑战,学生在大学里不一定要面对。在学校里,他们通常会得到一个结构化的问题和一个流行的数据集,最终得到精确的解决方案。然而,行业中的问题往往是非结构化的和复杂的。对这个问题的任何假设都会在现实世界中适得其反。在深入分析之前,最好完全了解业务问题。理解业务问题需要对问题及其领域进行更多的研究,计划,向客户提出正确的问题,并与团队成员进行讨论。
数据科学是关于逻辑思维,在解决问题时产生更多的想法和创造力。因此,团队合作在数据科学中扮演着重要的角色。多维度而不是单维度思考也是必要的。团队成员可能来自不同的背景,拥有不同的技能。采取每个小组成员的力量,并相应地分配工作。这帮助我用不同的方法解决了这个问题,并学到了新的东西。
另一个关键技能是做一个好的倾听者。数据科学是关于共享和协作的。基本上,这个人需要理解团队中其他人的观点。很多时候,其他团队成员提出了好的想法,这些想法可能是独特的,为了在项目中成功地实施,有必要倾听和理解它们。正如我上面所说,数据科学不是一个人的表演,它总是一个团队的努力。
数据科学或AI是一个快速发展的领域,因此,总会有一些新的和至关重要的东西需要学习。很难记住所有的东西,文档帮助我克服了这个挑战。此外,它帮助我明确了自己的思维过程。我曾经记录我的学习,分析,模型过程,实验和代码。此外,我把失败的实验和原因写得很详细,这有助于我从长远来看提高我的想法。除此之外,它还帮助我改进了我的沟通和对概念的详细理解。你甚至可以记录你学到的或遇到的小事,这些小事从长远来看会有很大的不同。使用您自己方便的工具来记录。
在敏捷环境中工作让我在每个冲刺开始时都有明确的计划、优先级和方向。拥有敏捷的心态有助于应对变化和处理不确定性。如果你遇到了不确定性,尝试选择,收集反馈并不断改进。这也给了我一个与不同团队合作的机会。在每个sprint结束时,以机器学习模型的形式向涉众展示最小可行产品(MVP)有助于我以更好的形式塑造我的项目。此外,每个sprint结束时的反馈帮助我纠正错误并高效地交付项目。
讲故事是数据科学的重要组成部分。我们正在处理数据,创建一个模型,并找到洞察力。但是,这个模型在商业术语中说明了什么?换句话说,这个模型是如何为公司赚钱或解决问题的?利益相关者和管理层对P值或任何其他统计数据都不感兴趣。这里的主要挑战是以一种吸引人的方式用更简单的术语向非技术观众解释模型。通过一个小故事来解释模型的一种方法。这是我去年学到的最大的东西之一。始终,包括良好的可视化,它有助于传达的信息作为一个故事。讲故事是一门艺术,它需要时间和大量的练习。
我们总是使用传统的PPT向客户或利益相关者展示我们的工作。我们为什么不创建一个web应用程序或仪表板来解释我们的模型输出,而不是PPT呢?创建web应用程序或仪表板显示了对项目的承诺,并与涉众和客户建立了联系。
版本控制是每个人都包括在工作流中的重要事情。它有助于集中管理代码,而不是将其保存到PC/Laptop或外部驱动器中。这样,每当您在任何位置处理新项目时,都可以参考代码或文档。
在过去的8个月里,我显著地提高了我的编码技能。我在工作和比赛中学到的一件事是编写函数式或面向对象的代码,以获得最大的代码重用性。这将有助于在未来的项目中使用代码,并减少当前项目的时间。每当我提到stackoverflow或google时,我都会记录代码函数,这有助于我学习编码方面的新知识。始终遵循最佳实践,并保持代码阅读器友好。
数据科学是计算机科学、统计学、机器学习和领域专业知识的融合。因此,它需要有处理不同步骤的技能,从清理数据到解释最终模型并部署它。不要被吓倒,你不可能在一天内掌握数据科学。因此,如果您陷入困境,请随时寻求帮助,通过这些帮助您将获得更多知识,并最终使您对自己的方法充满信心。
人工智能是IT行业的新热点,让我们直面这样一个事实:所有这些都不可能在短时间内被任何人同化。决定从战略上采取行动,每天投入一两个小时学习新概念和解决新问题,包括学习新算法、编码、阅读博客、做个人项目等。除此之外,我强烈建议阅读非技术书籍,这些书籍对流程和讲故事技巧有很大帮助,这将是我们继续前进的一个有用的特征。
在我最初的日子里,我的印象是,在这个分析的世界里,每个人都是一切的主人。但后来我意识到我的假设是错误的。我明白这对这里的每个人来说都是一个不断学习的过程。在这个游戏中保持最新的核心是激情、好奇心和渴望了解更多。无论是机器学习、深度学习还是NLP,解决复杂问题的总是激情。
免责声明-此博客包含我的个人经历。如果这些信息对你有所帮助,我很想听听。
感谢阅读!
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数字化运营中,“凭感觉做决策” 早已成为过去式 —— 运营指标作为业务增长的 “晴雨表” 与 “导航仪”,直接决定了运营动作 ...
2025-10-24在卷积神经网络(CNN)的训练中,“卷积层(Conv)后是否添加归一化(如 BN、LN)和激活函数(如 ReLU、GELU)” 是每个开发者都 ...
2025-10-24在数据决策链条中,“统计分析” 是挖掘数据规律的核心,“可视化” 是呈现规律的桥梁 ——CDA(Certified Data Analyst)数据分 ...
2025-10-24在 “神经网络与卡尔曼滤波融合” 的理论基础上,Python 凭借其丰富的科学计算库(NumPy、FilterPy)、深度学习框架(PyTorch、T ...
2025-10-23在工业控制、自动驾驶、机器人导航、气象预测等领域,“状态估计” 是核心任务 —— 即从含噪声的观测数据中,精准推断系统的真 ...
2025-10-23在数据分析全流程中,“数据清洗” 恰似烹饪前的食材处理:若食材(数据)腐烂变质、混杂异物(脏数据),即便拥有精湛的烹饪技 ...
2025-10-23在人工智能领域,“大模型” 已成为近年来的热点标签:从参数超 1750 亿的 GPT-3,到万亿级参数的 PaLM,再到多模态大模型 GPT-4 ...
2025-10-22在 MySQL 数据库的日常运维与开发中,“更新数据是否会影响读数据” 是一个高频疑问。这个问题的答案并非简单的 “是” 或 “否 ...
2025-10-22在企业数据分析中,“数据孤岛” 是制约分析深度的核心瓶颈 —— 用户数据散落在注册系统、APP 日志、客服记录中,订单数据分散 ...
2025-10-22在神经网络设计中,“隐藏层个数” 是决定模型能力的关键参数 —— 太少会导致 “欠拟合”(模型无法捕捉复杂数据规律,如用单隐 ...
2025-10-21在特征工程流程中,“单变量筛选” 是承上启下的关键步骤 —— 它通过分析单个特征与目标变量的关联强度,剔除无意义、冗余的特 ...
2025-10-21在数据分析全流程中,“数据读取” 常被误解为 “简单的文件打开”—— 双击 Excel、执行基础 SQL 查询即可完成。但对 CDA(Cert ...
2025-10-21在实际业务数据分析中,我们遇到的大多数数据并非理想的正态分布 —— 电商平台的用户消费金额(少数用户单次消费上万元,多数集 ...
2025-10-20在数字化交互中,用户的每一次操作 —— 从电商平台的 “浏览商品→加入购物车→查看评价→放弃下单”,到内容 APP 的 “点击短 ...
2025-10-20在数据分析的全流程中,“数据采集” 是最基础也最关键的环节 —— 如同烹饪前需备好新鲜食材,若采集的数据不完整、不准确或不 ...
2025-10-20在数据成为新时代“石油”的今天,几乎每个职场人都在焦虑: “为什么别人能用数据驱动决策、升职加薪,而我面对Excel表格却无从 ...
2025-10-18数据清洗是 “数据价值挖掘的前置关卡”—— 其核心目标是 “去除噪声、修正错误、规范格式”,但前提是不破坏数据的真实业务含 ...
2025-10-17在数据汇总分析中,透视表凭借灵活的字段重组能力成为核心工具,但原始透视表仅能呈现数值结果,缺乏对数据背景、异常原因或业务 ...
2025-10-17在企业管理中,“凭经验定策略” 的传统模式正逐渐失效 —— 金融机构靠 “研究员主观判断” 选股可能错失收益,电商靠 “运营拍 ...
2025-10-17在数据库日常操作中,INSERT INTO SELECT是实现 “批量数据迁移” 的核心 SQL 语句 —— 它能直接将一个表(或查询结果集)的数 ...
2025-10-16