京公网安备 11010802034615号
经营许可证编号:京B2-20210330
浅析预测分析注定失败的思考方式
虽说预测分析是一项很得人心的技术,每个人都希望能通过使用预测分析方法和预测分析工具,从而可提前看到未知的结果,来避免失败,但如果没有做好准备,信手拈来的使用预测分析方法,那必将失败。无论对于预测分析是你新手菜鸟,还是已经进行了大量的预测分析项目,都非常容易犯错。
数据挖掘公司Elder Research的CEO John Elder说:“大量的分析项目中都充斥着各种各样的错误。”这些错误大都不是致命的,通过模型即改善,但是也一些项目是相当地失败,致使业务在软件在投资的大量的金钱和时间,但却没有任何收益。本文列出了预测分析注定失败的思考方式。
1.开始后没有假定结果
对于预测分析大家都很兴奋,你看到了它的潜在价值。但却有一个问题:你的心中没有一个特定的目标。
Elder
Research参与的一个大公司中就有这样的情况。该公司开始使用他们的数据进行预测一些事情,或所有的事情,即一个方管可以出去向他的业务单元销售。虽然研究机构同意与他合作,并为他量身定制了一个使用模型,但由于这个业务单元中没有一个人问题他将要销售什么,最后该项目就没有了方向。
教训:不要先做锤子,再找钉子。在开始之前,一定要有一个特定的目标。
2.在数据不支持的基础上定义项目
一个债务催收公司希望找出最有效的方法来促使欠债人员还债。挑战是:该公司已经有一套严格的规则了,而且在每一个案例中都遵循这套原则。
数据挖掘是一项对比的艺术。因为该公司有了一套成熟的原则并一直遵循着,所以他们并不知道哪一种结果更有利于回收债务。所以该公司需要一些历史性的例子。
如果你没有这些案例,那么就需要创建一系列的实验来收集数据了。例如,假设有欠债人有1,000人,500人收到的了恐吓信,而另外500人得到的是电话催债,这是第一步。然后,预测模型就可以进行预测,预测哪类欠债人会更好的对恐吓信进行反应,哪类会更好的对电话进行反应。
在些案例中,欠债人类型可能包括历史模式引发的债务、按天支付过去的债务、收入、邮政编码的住宅等等。基于预测模型,这一催债机构可能会更好的使用更有经济效益的策略,而不是对所有人使用同一策略。但你要从实验开始。无中生有,对于预测分析来说是不可能的。
3.在得到最好数据之前就不前行
人们常常误解下操作:他们必须使数据完美地组织,没有任何漏洞、障碍或缺失的价值,在这之后才会进行预测分析。
Elder Research的一个客户,一个跨国石化公司刚刚开始进行预测分析项目,期望有更大的投资回报率,但这时他们的数据科学家发现现有的运营数据比他们原本想象的还要糟糕。
在此案例中缺失了一个最关键的目标价值。在使业务等待收集新数据时,该项目可能会延迟至少一年的时间。大部分公司在这里停滞不前。与其它错误相比这一错误是项目的最在杀手。
4.评估数据质量时,不清除垃圾数据
一个财富1000的金融服务公司想预测哪个客服中心的员工将会工作的时间最长。乍一看,该公司的历史数据似乎表明没有高中文凭、在公司停留至少9个月的员工数据是其它教育背景的员工有2.6倍。咨询公司建议客户从优先招聘高中辍学生开始。
但这就出现了两个问题。首先从求职者的简历中手动键入的数据已经做了不一致的标记。一条数据检查所有教育层次的人们,另一个只检查完成了高水平教育的人。
另一个更加复杂的问题是:因为某些原因,在呆的时间最长的人的简单中所有的标记中,后者比前者多。通过确保所做的标记是随机键入的一组简历,而且每一个人都使用同一种标记法,就可以以免这些问题。
在这一案例中我们得到一个最的信息就是:“只有垃圾在,才会有垃圾清理。在确保数据质量之间一定要确保数据的完整性。”
5.从未来的数据中预测未来
伴随着数据仓库的一个问题是它们并不静止的:信息一直在变,一直在更新。但预测分析是一种归纳的学习过程,它依赖于对历史数据,或“训练数据”的分析来创建模型。所以你要重新数据在客户生命周期初始阶段的状态。如果数据没有标注日期和时间戳,这很容易就会引进产生错误结果导向的未来数据。
有一件发生在汽车俱乐部的事:该俱乐部着手建立一个模型,用于预测他们的哪类会员更有可能购买他们的保险产品。为了建模,该俱乐部需要重建他们之前数据集合,把会员购买和决定购买保险产品的时间优先级提前,而且还要包含进子数据。该组织建立了一个决策树,它包括一个含有电话、传真和邮件数据的文本变量。当这一变量中包含了任何文本,那么就可以百分之百确定这些会员不久后就购买这一保险。
该项目的一个负责人说我们确信这个指示器将会在会员购买保险之前进行提示,但汽车俱乐部的员工却不能告诉我们它意味着什么。提前知道简直令人难以置信,他继续提问直到找到组织中知道事实的人:该变量代表着会员是如何取消他们保险的——通过电话、传真或者邮件。他说你不买就没有取消一说
。所以当你进行建模时,你必须锁定一些你的数据。
总结:失败只是一个选择
看了这些事例,你可能会把预测分析想象的非常困难,但不要害怕。虽然你在预测分析的路上出现了很多错误,但同时你也在学习,在调整,这是值得的。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在游戏产业的商业逻辑中,付费玩家是支撑游戏生存与发展的核心支柱。行业普遍遵循 “二八定律”:20% 的付费玩家贡献了游戏 80% ...
2026-06-11【核心关键词】企业、定位、传统、产品、互联网、可视化、业务侧、数字化、结构化、数据分析、传统制造业、市场状态、发展空间 ...
2026-06-11 解读《CDA二级教材:量化策略分析(2025)》的全景结构与学习逻辑 ” CDA二级认证是企业招聘数据分析师时最常提及的证书门槛 ...
2026-06-11【核心关键词】药企、可视化、营销、分类、数据分析师、销售数据、业务人员、指导方向、分析报告、营销数据、营销医生 【专访摘 ...
2026-06-10在统计学分析、问卷调研、实验验证、业务复盘等场景中,卡方检验与 T 检验是应用最广泛的两类基础假设检验方法。前者专门处理分 ...
2026-06-10 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-06-10在MySQL数据库日常查询、数据统计、后台接口开发、数据导出等场景中,开发者经常需要查询数据表除某几列之外的所有字段。例如查 ...
2026-06-09在Python网络请求、爬虫开发、接口测试、数据抓取等实操场景中,requests库是最常用的第三方请求工具,而content属性是requests ...
2026-06-09 数据分析正在重塑每一个行业。CDA认证的三本官方教材,分别对应Level I、Level II、Level III,为你铺就从业务数据分析到数 ...
2026-06-09在数字财务、智慧财税、业财融合深度推进的当下,传统财务模式下数据标准混乱、业务流程碎片化、知识无法沉淀、系统互通性差等问 ...
2026-06-08随着数字经济深度渗透各行各业,数据正式成为继土地、劳动力、资本、技术之后的第五大生产要素,是企业数字化转型、精细化运营、 ...
2026-06-08 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-06-08【核心关键词】贷款、报表、课程、专业、建模、缺失值、营销、互联网、银行、办公自动化、数据分析、数据预处理、特征工程、贷 ...
2026-06-05在数据库数据查询、业务报表统计、多表关联分析中,LEFT JOIN左连接是使用率最高的SQL关联查询语句。其核心特性是保留左表全部数 ...
2026-06-05 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-06-05任何一款产品从诞生、普及到最终退出市场,都会遵循一套固定的发展规律,这就是产品生命周期理论。在市场竞争日益激烈、产品迭代 ...
2026-06-04在Excel数据分析、办公统计、业务报表制作场景中,数据透视表是数据汇总、分类统计、快速复盘的核心工具,能够高效完成海量原始 ...
2026-06-04 很多数据分析师拿到数据就开始清洗、建模,但当被问到“这批数据属于什么类型——结构化还是非结构化?分类变量还是数值变量 ...
2026-06-04在问卷调查与社会科学数据分析中,卡方检验是最常用、最基础的非参数检验方法,广泛应用于市场调研、用户分析、行为统计、满意度 ...
2026-06-03【核心关键词】贷款、报表、课程、专业、建模、缺失值、营销、互联网、银行、办公自动化、数据分析、数据预处理、特征工程、贷 ...
2026-06-03