京公网安备 11010802034615号
经营许可证编号:京B2-20210330
今天主要学习了两个统计学的基本概念:峰度和偏度,并且用R语言语言来描述。
再巩固一下几个概念:
1、正态分布:也叫高斯分布,用最浅显的话来说就是一种“中间多,两边少”的分布;反映在数据上,就是数值在所有数据中间的数量多,偏离中间的数据少;
2、偏度:偏度分布是正态分布的父集,即正态分布的偏度为0;右偏分布(正偏分布)的偏度>0,左偏分布(负偏分布)的偏度<0.如下图所示:
3、峰度:正态分布的偏度值为3;厚尾(峰度>3),瘦尾(峰度<3);主要是看概率密度函数的两侧(尾部):
九、数组与矩阵
R提供了简单的工具处理数组以及矩阵。
1)数组
维数向量是元素都非负的向量,指示数组或矩阵的维数
矩阵的维数是2维
> dim(my_num)<-c(2,5)
> my_num
[,1] [,2] [,3] [,4] [,5]
[1,] 11 34 14 21 11
[2,] 22 71 68 22 34
数组的维数是1维
> dim(my_num)<-c(10)
> my_num
[1] 11 22 34 71 14 68 21 22 11 34
一维数组
> c(x[1],x[3])
[1] 11 3388
> x
[1] 11 22 3388
二维数组
使用维数向量设置数组维数:
> dim(h)<-c(2,3)
> h
[,1] [,2] [,3]
[1,] 12 15 982
[2,] 32 67 321
数组切片操作:
> c(h[1,2],h[2,3])
[1] 15 321
> h[2,]
[1] 32 67 321
如果我们切片仅使用一个下标或一个索引向量,则会直接取适合位置的元素,不受数组维数影响
> h[c(1,2,3)]
[1] 12 32 15
> h[6]
[1] 321
> h[4]
[1] 67
2)索引矩阵
> array(10:20,dim=c(2,5))->x
> x
[,1] [,2] [,3] [,4] [,5]
[1,] 10 12 14 16 18
[2,] 11 13 15 17 19
> array(c(1:3,5:4,3:5),dim=c(2,3))->i
> i
[,1] [,2] [,3]
[1,] 1 3 4
[2,] 2 5 3
将索引向量指向的元素提取出来,形成一个向量
> x[i]
[1] 10 11 12 14 13 12
对指向的元素赋值
> x[i]<-111
> x
[,1] [,2] [,3] [,4] [,5]
[1,] 111 111 111 16 18
[2,] 111 111 15 17 19
3)array使用
Array函数的参数有3个,第一个是需要形成数组元素的数据,第二个是dim参数提示维度
> c(1:20)->h
> mya<-array(h,dim=c(4,5))
> mya
[,1] [,2] [,3] [,4] [,5]
[1,] 1 5 9 13 17
[2,] 2 6 10 14 18
[3,] 3 7 11 15 19
[4,] 4 8 12 16 20
> mydim<-c(2,10)
> mya<-array(h,dim=c(2,10))
> mya
[,1] [,2] [,3] [,4] [,5] [,6] [,7] [,8] [,9] [,10]
[1,] 1 3 5 7 9 11 13 15 17 19
[2,] 2 4 6 8 10 12 14 16 18 20
> dim(mya)
[1] 2 10
第一个参数既可以是向量也可以是单个值
> mya<-array(1,dim=c(2,10))
> mya
[,1] [,2] [,3] [,4] [,5] [,6] [,7] [,8] [,9] [,10]
[1,] 1 1 1 1 1 1 1 1 1 1
[2,] 1 1 1 1 1 1 1 1 1 1
4)数组运算
逐元素运算
> mya
[,1] [,2] [,3] [,4] [,5] [,6] [,7] [,8] [,9] [,10]
[1,] 1 3 5 7 9 11 13 15 17 19
[2,] 2 4 6 8 10 12 14 16 18 20
> myb
[,1] [,2] [,3] [,4] [,5] [,6] [,7] [,8] [,9] [,10]
[1,] 2 2 2 2 2 2 2 2 2 2
[2,] 2 2 2 2 2 2 2 2 2 2
> mya+myb
[,1] [,2] [,3] [,4] [,5] [,6] [,7] [,8] [,9] [,10]
[1,] 3 5 7 9 11 13 15 17 19 21
[2,] 4 6 8 10 12 14 16 18 20 22
> mya*myb
[,1] [,2] [,3] [,4] [,5] [,6] [,7] [,8] [,9] [,10]
[1,] 2 6 10 14 18 22 26 30 34 38
[2,] 4 8 12 16 20 24 28 32 36 40
> 3*mya*myb
[,1] [,2] [,3] [,4] [,5] [,6] [,7] [,8] [,9] [,10]
[1,] 6 18 30 42 54 66 78 90 102 114
[2,] 12 24 36 48 60 72 84 96 108 120
> mya*myb+mya
[,1] [,2] [,3] [,4] [,5] [,6] [,7] [,8] [,9] [,10]
[1,] 3 9 15 21 27 33 39 45 51 57
[2,] 6 12 18 24 30 36 42 48 54 60
2个数组的外积
定义以下向量:
列向量 u(b1,b2,b3,b4)
行向量 v(a1,a2,a3)
它们的外积%o%被定义为:
R语言学习笔记 四0
> b<-array(c(1:4))
> a<-array(c(5:6))
> b%o%a
[,1] [,2]
[1,] 5 6
[2,] 10 12
[3,] 15 18
[4,] 20 24
> b
[1] 1 2 3 4
> a
[1] 5 6
再举一个例子
> b<-array(c(1:4))
> a<-array(c(5:8))
> a*b
[1] 5 12 21 32
> b
[1] 1 2 3 4
> a
[1] 5 6 7 8
> a%o%b
[,1] [,2] [,3] [,4]
[1,] 5 10 15 20
[2,] 6 12 18 24
[3,] 7 14 21 28
[4,] 8 16 24 32
生成的数组向量则由 2个数数组向量元素所有可能乘积得到
矩阵转置
5)、使用t完成标准的矩阵转置
> array(h,dim=c(2,5))->mya
> mya
[,1] [,2] [,3] [,4] [,5]
[1,] 1 3 5 7 9
[2,] 2 4 6 8 10
> t(mya)
[,1] [,2]
[1,] 1 2
[2,] 3 4
[3,] 5 6
[4,] 7 8
[5,] 9 10
2、使用aperm函数实现矩阵转置
aperm有2个常用的参数
第一个参数是需要转置的矩阵,第二个参数perm指示新矩阵相对于第一个参数矩阵的维度的下标,比如说,将行转换为列,将列转换为行,将行列次序更换,将第一维的元素与第二维的元素互换,perm设为c(2,1),perm中是维度下标,不是矩阵下标。数据分析培训
> array(h,dim=c(2,5))->mya
> mya
[,1] [,2] [,3] [,4] [,5]
[1,] 1 3 5 7 9
[2,] 2 4 6 8 10
> aperm(mya)->myb
> myb
[,1] [,2]
[1,] 1 2
[2,] 3 4
[3,] 5 6
[4,] 7 8
[5,] 9 10
> aperm(mya,perm=c(2,1))->myb
> myb
[,1] [,2]
[1,] 1 2
[2,] 3 4
[3,] 5 6
[4,] 7 8
[5,] 9 10
如果将perm设为c(1,2)表示不交换原矩阵的维度,即不做操作
> mya
[,1] [,2] [,3] [,4] [,5]
[1,] 1 3 5 7 9
[2,] 2 4 6 8 10
> aperm(mya,perm=c(1,2))->myb
> myb
[,1] [,2] [,3] [,4] [,5]
[1,] 1 3 5 7 9
[2,] 2 4 6 8 10
我们再来看一个3维数组
> array(mya,c(2,2,5))->mya1
> mya1
, , 1
[,1] [,2]
[1,] 1 3
[2,] 2 4
, , 2
[,1] [,2]
[1,] 5 7
[2,] 6 8
, , 3
[,1] [,2]
[1,] 9 1
[2,] 10 2
, , 4
[,1] [,2]
[1,] 3 5
[2,] 4 6
, , 5
[,1] [,2]
[1,] 7 9
[2,] 8 10
> aperm(mya1,perm=c(2,1,3))->myb1
> myb1
, , 1
[,1] [,2]
[1,] 1 2
[2,] 3 4
, , 2
[,1] [,2]
[1,] 5 6
[2,] 7 8
, , 3
[,1] [,2]
[1,] 9 10
[2,] 1 2
, , 4
[,1] [,2]
[1,] 3 4
[2,] 5 6
, , 5
[,1] [,2]
[1,] 7 8
[2,] 9 10
> aperm(mya1,perm=c(1,3,2))->myb1
> myb1
, , 1
[,1] [,2] [,3] [,4] [,5]
[1,] 1 5 9 3 7
[2,] 2 6 10 4 8
, , 2
[,1] [,2] [,3] [,4] [,5]
[1,] 3 7 1 5 9
[2,] 4 8 2 6 10
矩阵的维数与行列数
> ncol(mya)
[1] 5
> nrow(mya)
[1] 2
> dim(mya)
[1] 2 5
6)矩阵乘积
若A为m×n矩阵,B为n×r矩阵,则他们的乘积AB(有时记做A· B)会是一个m×r矩阵,但前提是m与n相同时才有定义。
> a
[,1] [,2] [,3] [,4] [,5]
[1,] 1 3 5 7 9
[2,] 2 4 6 8 10
> b
[,1] [,2]
[1,] 1 6
[2,] 2 7
[3,] 3 8
[4,] 4 9
[5,] 5 10
> a %*% b
[,1] [,2]
[1,] 95 220
[2,] 110 260
7)内积
使用crossprod函数求内积。
A.向量内积
设向量A=[x1,x2,...xn],B=[y1,y2,...yn],则矢量A和B的内积表示为:A·B=x1×y1+x2×y2+……+xn×yn。
> a<-c(1:3)
> b<-c(4:6)
> crossprod(a,b)
[,1]
[1,] 32
B.矩阵内积
矩阵内积的计算方式相当于第一个参数的转置乘以第二个参数,这个乘法是矩阵乘法。
> b<-array(c(4:6),dim=c(1,3))
> a<-array(c(1:3),dim=c(1,3))
> a
[,1] [,2] [,3]
[1,] 1 2 3
> b
[,1] [,2] [,3]
[1,] 4 5 6
> crossprod(a,b)
[,1] [,2] [,3]
[1,] 4 5 6
[2,] 8 10 12
[3,] 12 15 18
> t(a) %*% b
[,1] [,2] [,3]
[1,] 4 5 6
[2,] 8 10 12
[3,] 12 15 18
C.对角矩阵
通过向量生成矩阵
> a
[1] 1 2 3 4 5 6 7 8
> diag(a)
[,1] [,2] [,3] [,4] [,5] [,6] [,7] [,8]
[1,] 1 0 0 0 0 0 0 0
[2,] 0 2 0 0 0 0 0 0
[3,] 0 0 3 0 0 0 0 0
[4,] 0 0 0 4 0 0 0 0
[5,] 0 0 0 0 5 0 0 0
[6,] 0 0 0 0 0 6 0 0
[7,] 0 0 0 0 0 0 7 0
[8,] 0 0 0 0 0 0 0 8
取矩阵的对角线元素组成向量
> a<-array(c(1:16),dim=c(4,4))
> diag(a)
[1] 1 6 11 16
> a
[,1] [,2] [,3] [,4]
[1,] 1 5 9 13
[2,] 2 6 10 14
[3,] 3 7 11 15
[4,] 4 8 12 16
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在神经网络模型搭建中,“最后一层是否添加激活函数”是新手常困惑的关键问题——有人照搬中间层的ReLU激活,导致回归任务输出异 ...
2025-12-05在机器学习落地过程中,“模型准确率高但不可解释”“面对数据噪声就失效”是两大核心痛点——金融风控模型若无法解释决策依据, ...
2025-12-05在CDA(Certified Data Analyst)数据分析师的能力模型中,“指标计算”是基础技能,而“指标体系搭建”则是区分新手与资深分析 ...
2025-12-05在回归分析的结果解读中,R方(决定系数)是衡量模型拟合效果的核心指标——它代表因变量的变异中能被自变量解释的比例,取值通 ...
2025-12-04在城市规划、物流配送、文旅分析等场景中,经纬度热力图是解读空间数据的核心工具——它能将零散的GPS坐标(如外卖订单地址、景 ...
2025-12-04在CDA(Certified Data Analyst)数据分析师的指标体系中,“通用指标”与“场景指标”并非相互割裂的两个部分,而是支撑业务分 ...
2025-12-04每到“双十一”,电商平台的销售额会迎来爆发式增长;每逢冬季,北方的天然气消耗量会显著上升;每月的10号左右,工资发放会带动 ...
2025-12-03随着数字化转型的深入,企业面临的数据量呈指数级增长——电商的用户行为日志、物联网的传感器数据、社交平台的图文视频等,这些 ...
2025-12-03在CDA(Certified Data Analyst)数据分析师的工作体系中,“指标”是贯穿始终的核心载体——从“销售额环比增长15%”的业务结论 ...
2025-12-03在神经网络训练中,损失函数的数值变化常被视为模型训练效果的“核心仪表盘”——初学者盯着屏幕上不断下降的损失值满心欢喜,却 ...
2025-12-02在CDA(Certified Data Analyst)数据分析师的日常工作中,“用部分数据推断整体情况”是高频需求——从10万条订单样本中判断全 ...
2025-12-02在数据预处理的纲量统一环节,标准化是消除量纲影响的核心手段——它将不同量级的特征(如“用户年龄”“消费金额”)转化为同一 ...
2025-12-02在数据驱动决策成为企业核心竞争力的今天,A/B测试已从“可选优化工具”升级为“必选验证体系”。它通过控制变量法构建“平行实 ...
2025-12-01在时间序列预测任务中,LSTM(长短期记忆网络)凭借对时序依赖关系的捕捉能力成为主流模型。但很多开发者在实操中会遇到困惑:用 ...
2025-12-01引言:数据时代的“透视镜”与“掘金者” 在数字经济浪潮下,数据已成为企业决策的核心资产,而CDA数据分析师正是挖掘数据价值的 ...
2025-12-01数据分析师的日常,常始于一堆“毫无章法”的数据点:电商后台导出的零散订单记录、APP埋点收集的无序用户行为日志、传感器实时 ...
2025-11-28在MySQL数据库运维中,“query end”是查询执行生命周期的收尾阶段,理论上耗时极短——主要完成结果集封装、资源释放、事务状态 ...
2025-11-28在CDA(Certified Data Analyst)数据分析师的工具包中,透视分析方法是处理表结构数据的“瑞士军刀”——无需复杂代码,仅通过 ...
2025-11-28在统计分析中,数据的分布形态是决定“用什么方法分析、信什么结果”的底层逻辑——它如同数据的“性格”,直接影响着描述统计的 ...
2025-11-27在电商订单查询、用户信息导出等业务场景中,技术人员常面临一个选择:是一次性查询500条数据,还是分5次每次查询100条?这个问 ...
2025-11-27