机器学习中的特征选择

2018-03-21

机器学习中的特征选择 特征选择是一个重要的数据预处理过程，获得数据之后要先进行特征选择然后再训练模型。主要作用：1、降维 2、去除不相关特征。 特征选择方法包含：子集搜索和子集评价两个问题。 子集搜 ...

大数据的四个典型特征

2018-03-02

大数据的四个典型特征 大数据(Big Data)是指“无法用现有的软件工具提取、存储、搜索、共享、分析和处理的海量的、复杂的数据集合。”业界通常用4个V(即Volume、Variety、Value、Velocity)来概括大数据的特征。 ...

数据挖掘中的特征选择问题

2018-02-26

数据挖掘中的特征选择问题 特征工程包括特征选择和特征提取。数据和特征决定了机器学习的上限，而模型和算法只是逼近这个上限而已。通常而言，特征选择是指选择获得相应模型和算法最好性能的特征集，工程上常 ...

一些常见的特征选择方法

2018-02-25

一些常见的特征选择方法 现实中产生的特征维度可能很多，特征质量参差不齐，不仅会增加训练过程的时间，也可能会降低模型质量。因此，提取出最具代表性的一部分特征来参与训练就很重要了。 通常有特征 ...

python实现图片处理和特征提取详解

2018-01-22

python实现图片处理和特征提取详解 这是一张灵异事件图。。。开个玩笑，这就是一张普通的图片。 毫无疑问，上面的那副图画看起来像一幅电脑背景图片。这些都归功于我的妹妹，她能够将一些看上去奇怪的 ...

物联网大数据被激发的三个特征

2017-10-24

物联网大数据被激发的三个特征 虽然数据本身是客观存在的，但是它的范畴是随着文明的进程不断变化和扩大的。在万物互联时代，大数据的几个重要特征将会被成倍放大，并最终形成特殊的应用场景及商业模式。 ...

大数据四大特征，知道2个算你厉害

2017-10-04

大数据四大特征，知道2个算你厉害 \"大数据\"一词被炒的火热，但直到现在也没有达成一个统一的概念。 有一位通过4个V的特征描述，给大数据做了个定义。 第一个特征，是数据体量够大，从TB级别，跃升到PB ...

行业大数据的发展及其特征

2017-07-28

行业大数据的发展及其特征 每一个新兴的行业都将经历一个从概念到应用的过程,大数据技术最终的目的还是应用。2016年开始，大数据企业不再谈技术和概念,谈的是商业案例和数据价值.越来越多的数据案例被挖 ...

机器学习中的特征—特征选择的方法以及注意点

2017-07-04

机器学习中的特征—特征选择的方法以及注意点 关于机器学习中的特征我有话要说 在这次校园招聘的过程中，我学到了很多的东西，也纠正了我之前的算法至上的思想，尤其是面试百度的过程中，让我渐渐意识到 ...

利用R语言的Boruta包进行特征选择

2017-06-09

利用R语言的Boruta包进行特征选择 变量选择是模型构建的一个重要方面，每个分析人员都必须学习。毕竟，它有助于排除相关变量、偏见和不必要噪音的限制来建立预测模型。 许多分析新手认为，保持所有（或更多 ...

sas单变量的特征分析

2017-03-31

sas单变量的特征分析 大炮，我有个烦恼，我领导最近老叫我单变量结合因变量分析，但是都是分段分析，我总是写proc sql然后group by ,但是这个过程好无聊啊，有木有什么新的代码，让我可以分析的快点啊。 最 ...

主成分分析（PCA）特征选择算法详解

2017-03-12

主成分分析（PCA）特征选择算法详解 1. 问题 真实的训练数据总是存在各种各样的问题： 1、 比如拿到一个汽车的样本，里面既有以“千米/每小时”度量的最大速度特征，也有“英里/小时”的最大速度特征，显 ...

机器学习中特征选择概述

2017-03-11

机器学习中特征选择概述 1. 背景 1.1 问题 在机器学习的实际应用中，特征数量可能较多，其中可能存在不相关的特征，特征之间也可能存在相关性，容易导致如下的后果：  （1） 特征个数越多，分析特征 ...

聊一聊特征学习在用户偏好预测中的应用

2017-03-02

本文聊聊如何利用客户购买行为预测其偏好。 为了基于客户购买行为预测其偏好，可以利用机器学习中比较新兴的稀疏编码和稀疏限制性玻尔兹曼机将原始数据变换成稀疏高纬表示。这些特征学习技巧独立于预测模 ...

大数据的三个特征

2017-02-28

大数据的三个特征 一、大数据同时也是快数据。 一方面，数据形成越来越快，海量数据在规模上呈现加速度扩大的趋势;另一方面，数据“沉没”越来越快，海量数据中有很大部分迅速离开新知识和信息机制的作用空 ...

数据分析师的分布、特征、薪酬、技能及教育背景概览

2017-01-20

数据分析师的分布、特征、薪酬、技能及教育背景概览 醒来发现自己成了数据分析师是怎样的一种体验？今天我们要说的是数据分析师，这个随着大数据发展走入我们视野的职业，应该可以算得上是程序员的一个进化分支 ...

大数据的四个基本特征

2016-10-27

大数据的四个基本特征 大数据(bigdata)是指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。　　 1. 数据量大。TB，PB，乃至EB等数据量的数据需要进行数据分析处理。　　 ...

基于数据挖掘的汽车行业客户行为特征分析

2016-10-23

基于数据挖掘的汽车行业客户行为特征分析 以汽车行业为载体，通过对具体业务需求的理解与梳理，转化为数据分析问题，进行数据建模，将输出的结果应用到业务中，对业务提供支持（建议，预测，判断等等）。当然 ...

大数据的四大特征

2016-10-10

大数据的四大特征 说起大数据，人们得第一反应是大，而麦肯锡全球研究所给出的定义是：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速 ...

成为一位卓越数据科学家必须要具备四大特征

2016-09-26

成为一位卓越数据科学家必须要具备四大特征 对于那些希望在大数据时代掘金的公司来说，成功的关键是找到数据科学家， 并围绕数据科学家搭建团队。如今优秀的数据科学家一将难求， 而卓越的数据科学家更是灿若晨 ...