
SPSS数据准备:标识异常个案
一、标识异常个案(数据-标识异常个案)
“异常检测”过程查找基于聚类组标准值偏差的异常个案。该过程设计为在探索性数据分析步骤中,快速检测到用于数据审核的异常个案,并优先于任何推论性数据分析。此算法设计为一般“异常检测”;即异常个案的定义不被指定为任何特定应用程序,例如对保健行业中异常付款模式的检测或对金融业中洗钱行为的检测,其中对异常的定义可以被很好地界定。
示例。雇用的构建中风治疗效果预测模型的数据分析人员对数据质量非常关注,因为这类模型对异常观察值十分敏感。某些偏离的观察值表示真正唯一的个案,因此不适合用于预测,而其他观察值是由数据输入错误导致的,其值从技术上说是“正确”的,因此不能被数据验证过程捕获。“标识异常个案”过程找出并报告这些离群值,以便分析人员能够确定如何处理这些值。
统计量。该过程生成对等组、连续和分类变量的对等组标准值、基于对等组标准值偏差的异常指标,以及对被视为异常的个案影响最大的变量影响值。
数据。此过程既处理连续变量也处理分类变量。每行表示一个不同观察值,每列表示一个对等组以其为基础的不同变量。个案标识变量可在用于标记输出的数据文件中获得,但不能用于分析中。允许缺失值。被指定的权重变量可以忽略。检测模型可用于新检验数据文件。检验数据元素必须与培训数据元素一致。并且,根据算法设置,用于创建模型的缺失值处理方法可适用于优先于评分的检验数据文件。
个案顺序。注意,解决方案可取决于个案顺序。要使顺序的影响降至最低程度,可随机排列个案的顺序。想要验证给定解的稳定性,您可能想要通过以不同随机顺序排序的案例来得到多个不同的解。在文件非常大的情况,可使用以不同随机顺序排序的个案样本运行多次。
假设。算法假设所有变量都为不恒定且独立的,并且没有个案具有含有任何输入变量的缺失值。假设每个连续变量具有正态(高斯)分布,假设每个分类变量具有多项分布。经验内部检验表明,该过程对于违反独立性假设和分布假设均相当稳健,但应了解这些假设符合的程度。
二、输出(数据-标识异常个案-输出)
1、对等组标准值。此选项显示连续变量标准值表(如果分析中使用了任何连续变量)以及分类变量标准值表(如果分析中使用了任何分类变量)。连续变量标准值表显示每个对等组的每个连续变量的均值和标准差。分类变量标准值表显示每个对等组的每个分类变量的众数(最大类别)、频率和频率百分比。连续变量的均值和分类变量的众数在分析中用作标准值。
2、异常指标。异常指标摘要显示标识为最不正常个案的异常指标的描述统计。
3、按分析变量列出出现的原因。对于每个原因,该表将每个变量的出现频率和频率百分比显示为原因。该表还报告每个变量的影响的描述统计。如果在“选项”选项卡上将最大的原因数量设置为0,则此选项不可用。
4、已处理的个案数。个案处理摘要显示活动数据集中所有个案的计数和计数百分比、分析中包含和排除的个案,以及每个对等组中的个案。
三、保存(数据-标识异常个案-保存)
1、异常指标。将每个个案的异常指标值保存到具有指定名称的变量中。
2、对等组。将对等组ID、个案计数以及每个个案的以百分比表示的大小保存到具有指定根名称的变量中。例如,如果指定了根名称Peer,则会生成变量Peerid、PeerSize和PeerPctSize。Peerid为个案的对等组ID,PeerSize为组的大小,而PeerPctSize为用百分比表示的组大小。
3、原因。使用指定的根名称保存原因变量集。原因变量集包含作为原因的变量的名称、变量影响度量、变量自身的值以及标准值。变量集的数量取决于在“选项”选项卡上请求的原因的数目。例如,如果指定根名称Reason,则会生成变量ReasonVar_k、ReasonMeasure_k、ReasonValue_k和ReasonNorm_k,其中k是第k个原因。如果原因数量设置为0,则此选项不可用。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
2025 年,数据如同数字时代的 DNA,编码着人类社会的未来图景,驱动着商业时代的运转。从全球互联网用户每天产生的2.5亿TB数据, ...
2025-06-052025 年,数据如同数字时代的 DNA,编码着人类社会的未来图景,驱动着商业时代的运转。从全球互联网用户每天产生的2.5亿TB数据, ...
2025-05-27CDA数据分析师证书考试体系(更新于2025年05月22日)
2025-05-26解码数据基因:从数字敏感度到逻辑思维 每当看到超市货架上商品的排列变化,你是否会联想到背后的销售数据波动?三年前在零售行 ...
2025-05-23在本文中,我们将探讨 AI 为何能够加速数据分析、如何在每个步骤中实现数据分析自动化以及使用哪些工具。 数据分析中的AI是什么 ...
2025-05-20当数据遇见人生:我的第一个分析项目 记得三年前接手第一个数据分析项目时,我面对Excel里密密麻麻的销售数据手足无措。那些跳动 ...
2025-05-20在数字化运营的时代,企业每天都在产生海量数据:用户点击行为、商品销售记录、广告投放反馈…… 这些数据就像散落的拼图,而相 ...
2025-05-19在当今数字化营销时代,小红书作为国内领先的社交电商平台,其销售数据蕴含着巨大的商业价值。通过对小红书销售数据的深入分析, ...
2025-05-16Excel作为最常用的数据分析工具,有没有什么工具可以帮助我们快速地使用excel表格,只要轻松几步甚至输入几项指令就能搞定呢? ...
2025-05-15数据,如同无形的燃料,驱动着现代社会的运转。从全球互联网用户每天产生的2.5亿TB数据,到制造业的传感器、金融交易 ...
2025-05-15大数据是什么_数据分析师培训 其实,现在的大数据指的并不仅仅是海量数据,更准确而言是对大数据分析的方法。传统的数 ...
2025-05-14CDA持证人简介: 万木,CDA L1持证人,某电商中厂BI工程师 ,5年数据经验1年BI内训师,高级数据分析师,拥有丰富的行业经验。 ...
2025-05-13CDA持证人简介: 王明月 ,CDA 数据分析师二级持证人,2年数据产品工作经验,管理学博士在读。 学习入口:https://edu.cda.cn/g ...
2025-05-12CDA持证人简介: 杨贞玺 ,CDA一级持证人,郑州大学情报学硕士研究生,某上市公司数据分析师。 学习入口:https://edu.cda.cn/g ...
2025-05-09CDA持证人简介 程靖 CDA会员大咖,畅销书《小白学产品》作者,13年顶级互联网公司产品经理相关经验,曾在百度、美团、阿里等 ...
2025-05-07相信很多做数据分析的小伙伴,都接到过一些高阶的数据分析需求,实现的过程需要用到一些数据获取,数据清洗转换,建模方法等,这 ...
2025-05-06以下的文章内容来源于刘静老师的专栏,如果您想阅读专栏《10大业务分析模型突破业务瓶颈》,点击下方链接 https://edu.cda.cn/g ...
2025-04-30CDA持证人简介: 邱立峰 CDA 数据分析师二级持证人,数字化转型专家,数据治理专家,高级数据分析师,拥有丰富的行业经验。 ...
2025-04-29CDA持证人简介: 程靖 CDA会员大咖,畅销书《小白学产品》作者,13年顶级互联网公司产品经理相关经验,曾在百度,美团,阿里等 ...
2025-04-28CDA持证人简介: 居瑜 ,CDA一级持证人国企财务经理,13年财务管理运营经验,在数据分析就业和实践经验方面有着丰富的积累和经 ...
2025-04-27