SPSS数据准备:标识异常个案
一、标识异常个案(数据-标识异常个案)
“异常检测”过程查找基于聚类组标准值偏差的异常个案。该过程设计为在探索性数据分析步骤中,快速检测到用于数据审核的异常个案,并优先于任何推论性数据分析。此算法设计为一般“异常检测”;即异常个案的定义不被指定为任何特定应用程序,例如对保健行业中异常付款模式的检测或对金融业中洗钱行为的检测,其中对异常的定义可以被很好地界定。
示例。雇用的构建中风治疗效果预测模型的数据分析人员对数据质量非常关注,因为这类模型对异常观察值十分敏感。某些偏离的观察值表示真正唯一的个案,因此不适合用于预测,而其他观察值是由数据输入错误导致的,其值从技术上说是“正确”的,因此不能被数据验证过程捕获。“标识异常个案”过程找出并报告这些离群值,以便分析人员能够确定如何处理这些值。
统计量。该过程生成对等组、连续和分类变量的对等组标准值、基于对等组标准值偏差的异常指标,以及对被视为异常的个案影响最大的变量影响值。
数据。此过程既处理连续变量也处理分类变量。每行表示一个不同观察值,每列表示一个对等组以其为基础的不同变量。个案标识变量可在用于标记输出的数据文件中获得,但不能用于分析中。允许缺失值。被指定的权重变量可以忽略。检测模型可用于新检验数据文件。检验数据元素必须与培训数据元素一致。并且,根据算法设置,用于创建模型的缺失值处理方法可适用于优先于评分的检验数据文件。
个案顺序。注意,解决方案可取决于个案顺序。要使顺序的影响降至最低程度,可随机排列个案的顺序。想要验证给定解的稳定性,您可能想要通过以不同随机顺序排序的案例来得到多个不同的解。在文件非常大的情况,可使用以不同随机顺序排序的个案样本运行多次。
假设。算法假设所有变量都为不恒定且独立的,并且没有个案具有含有任何输入变量的缺失值。假设每个连续变量具有正态(高斯)分布,假设每个分类变量具有多项分布。经验内部检验表明,该过程对于违反独立性假设和分布假设均相当稳健,但应了解这些假设符合的程度。
二、输出(数据-标识异常个案-输出)
1、对等组标准值。此选项显示连续变量标准值表(如果分析中使用了任何连续变量)以及分类变量标准值表(如果分析中使用了任何分类变量)。连续变量标准值表显示每个对等组的每个连续变量的均值和标准差。分类变量标准值表显示每个对等组的每个分类变量的众数(最大类别)、频率和频率百分比。连续变量的均值和分类变量的众数在分析中用作标准值。
2、异常指标。异常指标摘要显示标识为最不正常个案的异常指标的描述统计。
3、按分析变量列出出现的原因。对于每个原因,该表将每个变量的出现频率和频率百分比显示为原因。该表还报告每个变量的影响的描述统计。如果在“选项”选项卡上将最大的原因数量设置为0,则此选项不可用。
4、已处理的个案数。个案处理摘要显示活动数据集中所有个案的计数和计数百分比、分析中包含和排除的个案,以及每个对等组中的个案。
三、保存(数据-标识异常个案-保存)
1、异常指标。将每个个案的异常指标值保存到具有指定名称的变量中。
2、对等组。将对等组ID、个案计数以及每个个案的以百分比表示的大小保存到具有指定根名称的变量中。例如,如果指定了根名称Peer,则会生成变量Peerid、PeerSize和PeerPctSize。Peerid为个案的对等组ID,PeerSize为组的大小,而PeerPctSize为用百分比表示的组大小。
3、原因。使用指定的根名称保存原因变量集。原因变量集包含作为原因的变量的名称、变量影响度量、变量自身的值以及标准值。变量集的数量取决于在“选项”选项卡上请求的原因的数目。例如,如果指定根名称Reason,则会生成变量ReasonVar_k、ReasonMeasure_k、ReasonValue_k和ReasonNorm_k,其中k是第k个原因。如果原因数量设置为0,则此选项不可用。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
数据分析在当今信息时代发挥着重要作用。单因素方差分析(One-Way ANOVA)是一种关键的统计方法,用于比较三个或更多独立样本组 ...
2025-04-25CDA持证人简介: 居瑜 ,CDA一级持证人国企财务经理,13年财务管理运营经验,在数据分析就业和实践经验方面有着丰富的积累和经 ...
2025-04-25在当今数字化时代,数据分析师的重要性与日俱增。但许多人在踏上这条职业道路时,往往充满疑惑: 如何成为一名数据分析师?成为 ...
2025-04-24以下的文章内容来源于刘静老师的专栏,如果您想阅读专栏《刘静:10大业务分析模型突破业务瓶颈》,点击下方链接 https://edu.cda ...
2025-04-23大咖简介: 刘凯,CDA大咖汇特邀讲师,DAMA中国分会理事,香港金管局特聘数据管理专家,拥有丰富的行业经验。本文将从数据要素 ...
2025-04-22CDA持证人简介 刘伟,美国 NAU 大学计算机信息技术硕士, CDA数据分析师三级持证人,现任职于江苏宝应农商银行数据治理岗。 学 ...
2025-04-21持证人简介:贺渲雯 ,CDA 数据分析师一级持证人,互联网行业数据分析师 今天我将为大家带来一个关于用户私域用户质量数据分析 ...
2025-04-18一、CDA持证人介绍 在数字化浪潮席卷商业领域的当下,数据分析已成为企业发展的关键驱动力。为助力大家深入了解数据分析在电商行 ...
2025-04-17CDA持证人简介:居瑜 ,CDA一级持证人,国企财务经理,13年财务管理运营经验,在数据分析实践方面积累了丰富的行业经验。 一、 ...
2025-04-16持证人简介: CDA持证人刘凌峰,CDA L1持证人,微软认证讲师(MCT)金山办公最有价值专家(KVP),工信部高级项目管理师,拥有 ...
2025-04-15持证人简介:CDA持证人黄葛英,ICF国际教练联盟认证教练,前字节跳动销售主管,拥有丰富的行业经验。在实际生活中,我们可能会 ...
2025-04-14在 Python 编程学习与实践中,Anaconda 是一款极为重要的工具。它作为一个开源的 Python 发行版本,集成了众多常用的科学计算库 ...
2025-04-14随着大数据时代的深入发展,数据运营成为企业不可或缺的岗位之一。这个职位的核心是通过收集、整理和分析数据,帮助企业做出科 ...
2025-04-11持证人简介:CDA持证人黄葛英,ICF国际教练联盟认证教练,前字节跳动销售主管,拥有丰富的行业经验。 本次分享我将以教培行业为 ...
2025-04-11近日《2025中国城市长租市场发展蓝皮书》(下称《蓝皮书》)正式发布。《蓝皮书》指出,当前我国城市住房正经历从“增量扩张”向 ...
2025-04-10在数字化时代的浪潮中,数据已经成为企业决策和运营的核心。每一位客户,每一次交易,都承载着丰富的信息和价值。 如何在海量客 ...
2025-04-09数据是数字化的基础。随着工业4.0的推进,企业生产运作过程中的在线数据变得更加丰富;而互联网、新零售等C端应用的丰富多彩,产 ...
2025-04-094月7日,美国关税政策对全球金融市场的冲击仍在肆虐,周一亚市早盘,美股股指、原油期货、加密货币、贵金属等资产齐齐重挫,市场 ...
2025-04-08背景 3月26日,科技圈迎来一则重磅消息,苹果公司宣布向浙江大学捐赠 3000 万元人民币,用于支持编程教育。 这一举措并非偶然, ...
2025-04-07在当今数据驱动的时代,数据分析能力备受青睐,数据分析能力频繁出现在岗位需求的描述中,不分岗位的任职要求中,会特意标出“熟 ...
2025-04-03