箱形图以及python实践

2017-10-25

箱形图以及python实践 最近在接触kaggle的竞赛示例，练习了一下，感觉受益匪浅。同时，心中也有个问题。拿到数据之后第一件事是什么？分析数据的情况？怎么分析？分析之后如何去处理数据呢？等等一些数据分析 ...

Excel-箱线图（数据分布）分析

2017-10-25

Excel-箱线图（数据分布）分析 箱线图（Boxplot）也称箱须图（Box-whisker Plot），它是用一组数据中的最小值、第一四分位数、中位数、第三四分位数和最大值来反映数据分布的中心位置和散布范围，可以粗略地看 ...

如何成为一名优质的数据科学家

2017-09-05

如何成为一名优质的数据科学家 开随着“数据驱动”的价值越来越明显，越来越多的企事业开始组建或扩大数据分析队伍，“数据科学家”这个职位也越来越被大家关注。 ▪ “数据科学家”是不是“统计师”更 ...

学会数据分析背后的挖掘思维，分析就完成了一半

2017-08-09

学会数据分析背后的挖掘思维，分析就完成了一半 在数据分析中,模型是非常有用和有效的工具和数据分析应用的场景,在建立模型的过程中,数据挖掘很多时候能够起到非常显著的作用。伴随着计算机科学的发展,模型也越 ...

图形和数值的数据集描述方法

2017-07-23

图形和数值的数据集描述方法 图形方法对数据集的描述 1. 条形图（bar graph）   条形图一般横向表示类别（class），纵向表示该类别所对应的类别频率（class frequency）。 2. 饼状图（pie graph） &nb ...

R语言与回归分析几个假设的检验

2017-07-22

R语言与回归分析几个假设的检验 一、从线性回归的假设说起 对于线性回归而言，若要求回归估计有一些良好性质比如无偏性，就需要加上一些假定条件。比如要达到估计的无偏性，我们通常需要加上高斯-马尔科夫 ...

R语言做数据探索

2017-06-09

R语言做数据探索 1 数据导入 数据常用格式.csv/.txt/.xls/.json/.xml。 R语言提供相应的函数和库实现对这些数据格式的导入。 现已导入.csv格式和以tab分隔的.txt格式为例 # 读.csv格式 data1<-read.c ...

如何高效实现数据优化，提升数据分析效能与价值

2017-05-25

如何高效实现数据优化，提升数据分析效能与价值 所谓“工欲善其事，必先利其器”，在数据分析大行其道的今天，如何高效实现数据优化，提升数据分析效能与价值，成为企业IT部门面对的重要课题之一。 小张的麻 ...

金融行业大数据应用及发展全洞察

2017-05-20

金融行业大数据应用及发展全洞察 大数据时代的三个重要趋势是：数据成为资产、行业垂直整合、泛互联网化(即技术与行业的跨界穿越与颠覆式发展)。大数据金融的作用机制是通过云计算等智能信息工具对序列之间的联 ...

说说什么是数据挖掘

2017-05-13

说说什么是数据挖掘 数据挖掘就是指从数据中获取知识。 好吧，这样的定义方式比较抽象，但这也是业界认可度最高的一种解释了。对于如何开发一个大数据环境下完整的数据挖掘项目，业界至今仍没有统一的规范 ...

【案例】数据挖掘与生活：算法分类和应用

2017-05-06

【案例】数据挖掘与生活：算法分类和应用 本文，主要想简单介绍下数据挖掘中的算法，以及它包含的类型。然后，通过现实中触手可及的、活生生的案例，去诠释它的真实存在。 一、数据挖掘的算法类型 一 ...

R语言：函数使用技巧（循环、if族/for、switch、repeat、ifelse、stopifnot）

2017-04-29

R语言：函数使用技巧（循环、if族/for、switch、repeat、ifelse、stopifnot） 1、循环 [plain] view plain copy print?在CODE上查看代码片派生到我的代码片     ##循环for      ...

一个使用R语言做数据处理的实例

2017-04-21

一个使用R语言做数据处理的实例 最近一个同学找到我，希望我帮忙处理一份数据。那份数据是这样的：包含了3661行，第一行为各列的名称；包含8列，第一列为专利ID，其余7列为企业ID。 这份数据截图如下所示： ...

数据挖掘过程体会

2017-04-14

数据挖掘过程体会 Step1. 就是商业问题的理解了，那么如何更好的理解“老大”提出的商业问题困惑呢？我觉得思维导图倒是个不错的选择，当然自己要想更好的理解“老大”的意思还需要进一步的沟通，商业问题的 ...

SAS信用评分九步曲之第一步数据清洗

2017-04-02

SAS信用评分九步曲之第一步数据清洗 累积了一段时间的建模经验了，这次想把我在建模中用的代码分批分享出来，可能写的东西不是你能用到的，毕竟我们接触到的数据都不一样。但是譬如文本清洗之类的，看我之前的 ...

SPSS分析技术：探索性分析；强大的综合性描述性统计模块

2017-03-02

SPSS分析技术：探索性分析；强大的综合性描述性统计模块 SPSS还提供了一种综合性的数据描述工具：探索性分析，它能够一次性将上述分析结果和其它更详细的分析结果呈现出来，不能能够输出数据结果，还能提供各种 ...

CDA数据分析练习题1

2024-09-12

《数据分析专项练习题库》 《CDA数据分析认证考试模拟题库》 《企业数据分析面试题库》 推荐学习书籍 《CDA一级教材》适合CDA一级考生备考，也适合业务及数据分析岗位的从业者提升自我。完整电子版已上线CDA ...

python数据清洗之噪声值的判断和处理

2020-07-31

提到噪声，你会想到什么?刺耳的，高分贝的声音?总之就是不好的，不想接受的声音。小编今天跟大家分享的就是python数据清洗中的噪声数据，对于这些噪声数据我们应该怎样检测和处理呢?下面跟小编一起来看吧。 一 ...

数据处理中，偏态数据如何正态化？

2020-07-17

在数据处理过程中，经常会遇到偏态数据。我们都知道数据整体服从正态分布，那样本均值和方差则相互独立。因此大家都会希望数据事成正态分布的，但是现实情况却是：大多数情况下，数据都是偏态分布的，这时候就需要 ...

你想知道的箱型图的基础知识，都在这里了

2020-07-17

箱型图，又叫做箱线图(Boxplot)，或者箱须图(Box-whisker Plot)，另外，盒式图指的也是它。箱型图通常是被用作观察数据整体的分布情况，是通过数据中的五个统计量：最小值(上边界)、上四分位数(75/%分位数)、中位 ...