如何避免机器学习模型过拟合？

2023-07-03

标题：机器学习模型过拟合的预防与应对策略 导言： 在机器学习领域，过拟合是一个常见的问题，它指的是模型在训练数据上表现出色，但在新数据上的泛化能力较差。过拟合可能导致模型过度依赖噪声或不相关的特征，从而 ...

有哪些常用的机器学习算法？

2023-06-30

机器学习是计算机科学中的一个分支，它利用统计学、人工智能和计算机科学等领域的知识和技术，通过训练模型从数据中提取有用的信息。机器学习算法可以大致分为三类：监督学习、非监督学习和半监督学习。在本文中，我 ...

如何处理不平衡数据集？

2023-06-15

不平衡数据集是指在分类问题中，某些类别的样本数量远远少于其他类别的样本数量。这种情况可能会导致机器学习模型的训练和评估出现偏差，从而影响其性能和准确性。因此，在处理不平衡数据集时，需要采取一系列的方法 ...

XGBoost做分类问题时每一轮迭代拟合的是什么？

2023-04-18

XGBoost（eXtreme Gradient Boosting）是一种强大的集成学习算法，常用于解决分类和回归问题。它是一种基于决策树的机器学习算法，在解决分类问题时，每一轮迭代拟合的是残差。本文将对XGBoost分类问题中每一轮迭代 ...

catboost原理介绍，与lightgbm和xgboost比较优劣？

2023-04-03

CatBoost是一种基于梯度提升树的机器学习算法，它在处理分类和回归问题时都具有优秀的性能。CatBoost最初由Yandex团队开发，在2017年推出，并迅速受到了广泛关注和应用。 CatBoost与LightGBM和XGBoost都属于GBDT（Gr ...

xgboost是用二阶泰勒展开的优势在哪？

2023-03-31

XGBoost（eXtreme Gradient Boosting）是一种高效而强大的机器学习算法，它在大规模数据集上的性能表现非常出色。其中，使用二阶泰勒展开是XGBoost的重要优势之一，下面将详细介绍。 首先，我们来了解一下什么是泰勒 ...

机器学习算法中 GBDT 和 XGBOOST 的区别有哪些？

2023-03-22

Gradient Boosting Decision Tree (GBDT) 和 Extreme Gradient Boosting (XGBoost) 都是目前机器学习领域中非常流行的算法。两种算法都采用了 boosting 方法来提高分类或回归效果，但在实现细节上还是有一些区别的 ...

数据科学家如何在全球就业市场竞争

2022-02-28

数据科学家的就业市场比以往任何时候都更加活跃，并有望在未来几年迅速增长。美国劳工统计局预测，到2026年，可用职位数量将增加约28%。 公司正在向市场研究和商业分析投入大量资金，为长期数据科学家和该领域 ...

CDA Level Ⅲ 数据分析认证考试模拟题库（第九期）

2021-08-05

不过，在出题前，要公布上一期Level Ⅲ 中36-40题的答案，大家一起来看！ 42、A 44、B A.会将数据缩放到0-1范围之内 C.作用是将不同量纲数据的量纲进行统一 47.常见的缺失值填充方法有填充默认值 ...

对数据科学家来说最重要的算法和统计模型

2018-05-31

对数据科学家来说最重要的算法和统计模型 作为一个在这个行业已经好几年的数据科学家，在LinkedIn和QuoLa上，我经常接触一些学生或者想转行的人，帮助他们进行机器学习的职业建议或指导方面相关的课程选择。一 ...

学习R语言，一篇文章让你从懵圈到入门

2016-10-06

学习R语言，一篇文章让你从懵圈到入门 在实际工作中，每个数据科学项目各不相同，但基本都遵循一定的通用流程。具体如下： 数据科学工作流程     数据导入     数据整理 &nb ...

XGBoost算法的这3类参数，你知道吗？

2020-07-09

XGBoost是诞生于2014年2月的一种专攻梯度提升算法的机器学习函数库，它有很好的学习效果，速度也非常快，与梯度提升算法在另一个常用机器学习库scikit-learn中的实现相比，XGBoost的性能可以提升10倍以上。还有，X ...

如何正确选择线性回归、逻辑回归、决策等机器学习算法

2020-05-27

机器学习既是艺术又是科学。但当您查看机器学习算法时，没有一种解决方案或一种适合所有情况的算法。有几个因素会影响您选择哪种机器学习。 有些问题非常具体，需要采取独特的方法。例如，如果您使用推荐系统， ...

机器学习python算法应用，监督学习、无监督学习等！

2020-05-25

本系列文章主要介绍机器学习在实践中的应用，介绍利用 python 的生态环境，使用机器学习的算法来解决工程实践中的问题，而不是介绍算法本身。本系列文章参考了《机器学习Python实践》，会通过例子一步一步地引导大 ...

38个常用Python库：数值计算、可视化、机器学习等8大领域都有了

2019-11-29

作者 | 李明江 张良均 周东平 张尚佳 来源 | 大数据DT Python作为一个设计优秀的程序语言，现在已广泛应用于各种领域，依靠其强大的第三方类库，Python在各个领域都能发挥巨大的作用。 ...

一文读懂机器学习分类算法（附图文详解）

2019-09-25

作者 | Badreesh Shetty 整理 | 大数据文摘 说起分类算法，相信学过机器学习的同学都能侃上一二。 可是，你能够如数家珍地说出所有常用的分类算法，以及他们的特征、优缺点吗？比如说， ...

梯度下降算法详解

2019-07-16

原创 | CDA数据分析研究院，转载需授权 介绍 如果说在机器学习领域有哪个优化算法最广为认知，用途最广，非梯度下降算法莫属。梯度下降算法是一种非常经典的求极小值的算法，比如在线性回归里我 ...

机器学习中涉及到的算法有哪些（下）

2019-03-26

从上一篇文章中我们可以看出，机器学习涉及到的很多算法，其实这些算法都是非常实用的，也正是由于这些算法，我们的机器学习才能够解决很多问题，那么大家还知道机器学习有哪些算法呢？下面我们就给大家 ...

机器学习中各个算法的优缺点（一）

2019-03-13

由于人工智能的火热，现在很多人都开始关注人工智能的各个分支的学习。人工智能由很多知识组成，其中人工智能的核心——机器学习是大家格外关注的。所以说，要想学好人工智能就必须学好机器学习。其中机 ...

在实际项目中，如何选择合适的机器学习模型

2018-08-20

在实际项目中，如何选择合适的机器学习模型 在这个文章中，我们主要面向初学者或中级数据分析师，他们对识别和应用机器学习算法都非常感兴趣，但是初学者在面对各种机器学习算法时，都会遇到一个问题是 “在实 ...