京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据的隐私、失效、失误之痛
如果说在互联网时代我们的隐私受到了威胁,那么大数据时代下这种威胁已经更为深入。这就是大数据的不利影响之一。
从2012年开始,关于大数据所带来的负面问题就已经有过很多的讨论了,所以这次多少还是会有些老生常谈,请原谅。
今天的话题开始于上映两周全球票房即达到8亿美元的《速度与**7》,当然,不是说车、说美女,而是影片中那个无所不能的“天眼”,这个很酷炫的系统能够调 用地球上任何位置任何设备所生成的视频、图片、音频,让你想要搜索的人或事物无所遁形。大数据时代,“天眼”已经成为可能,同时,天眼也会在遭受病毒入侵 后出现决策上的失误。
无处不在的“天眼”
你的数据真的安全吗?这里的安全包含两层含义: 不丢失和看不到。我们可以使用AWS、阿里云、百度云盘等来存储自己的数据,也可以用多备份来备份自己的数据,但我们却无法保证你所产生的数据不被检测 到。计算能力的提升和数据存储成本的下降,激发了人们进一步采集、利用我们个人数据的野心。如果说在互联网时代我们的隐私受到了威胁,那么大数据时代下这 种威胁已经更为深入。这就是大数据的不利影响之一。
虽然Google、亚马逊、Netflix这种巨头公司宣称其对数据的保密性,但这也表 明了他们其实什么都知道。一个例子就是:在2006年10月份,Netflix做了一场题为“NetflixPruze”的算法竞赛,在《需求》这本书 中,作者曾经高度赞扬了这个竟在挖掘用户需求方面的经典做法,然而,虽然Netflix对数据进行了精心的匿名化处理,但是最终还是导致一个化名“无名 氏”的居住在美国中西部的未出柜的同性恋母亲的起诉。目前这种算法在各个电商平台被普遍应用,并且披着“推荐”“猜你喜欢”“看了又看”的外衣。
在大数据时代,我们的数据无所遁形,很多人已经感觉到自己的隐私受到了威胁,当大数据变得更为普遍的时候,情况将更加不堪设想。
数据失效
曹操有多少人马?诸葛亮说有80万,周瑜说只有3万。二者说的都对,也都不对。这就是数据的有效性。我们在做决策的时候,往往希望得到可量化的数据,但是却 无从保证数据的有效性。导致出现这个问题的原因大体可归纳为两种:一方面,人们会不自觉的将数据偏向自己喜好的方向,虽然只是下意识的,却最终导致了结果 的谬以千里;另一方面,数据运算是一个多步骤的协同作业,在我们进行相会推导演算的过程中,因果关系往往显得并不那么的明显或者不那么确定。
在由“小数据”时代向大数据时代转变的过程中,我们对信息的一些局限性必须给予高度的重视。数据的质量可能会很差,可能是不客观的,可能存在分析错误或者具有误导性,更为糟糕的是,数据可能根本达不到量化它的目的。
决策失误
正因为数据的失效,因此我们基于数据的决策也变得失效。大数据的不利影响并不是数据本身的缺陷,而是我们滥用大数据预测所导致的结果。所有的精准预测都是不 现实的。或者说大数据分析只能预测一个人未来很有可能进行的行为。比如说,通过输入海量的特定案件的变量,包括监禁的原因,首次犯罪的时间、年龄、性别等 个人数据,我们可以预测一个缓刑犯或者假释的人一旦提前释放会不会再次杀人。根据常识,我们知道这个概率绝不会达到100%,所以当基数足够大时,就一定 会出现失误。
这个例子中的主要问题并不是在社会需求面对更多的威胁上,而是我们在人们真正犯罪之前就对其进行了惩罚而否定了人的自由的权利。
另一方面,无数的例子告诉我们一个道理——卓越的才华并不依赖于数据。爱因斯坦说:天才就是1%的灵感加99%的汗水,但是这1%的灵感比99%的汗水更加重要。当记者问及苹果在推出iPad之前做了多少市场研究时,乔布斯那个著名的回答是这样的:没做!消费者没义务去了解自己想要什么。
大数据为我们的生活提供了便利,同时也让保护隐私的法律手段失去了应有的效力。面对大数据,保护隐私的核心技术已经不再适用,所以,我们必须杜绝对数据的过分依赖,以防我们重蹈伊卡洛斯的覆辙。这个可怜的人就是因为过分相信自己的飞行技术,在市局的预估上存在偏差最终导致了自己葬身大海。我们必须学会如何让数 据为我们所用,而不是成为数据的奴隶。这是另一个问题,后续有机会再和大家一起探讨。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据指标体系搭建工作中,从业者常困惑于指标搭建的核心逻辑:究竟是依托一线零散数据自下而上汇总指标,还是基于战略目标自上 ...
2026-07-31在数据分析、问卷研究、实验复盘、业务建模的工作中,大多数人最关注的是“用什么统计方法”:是做T检验、方差分析、卡方检验, ...
2026-07-31 许多数据分析师精通Excel函数和SQL查询,但当面对一张上万行的销售明细表,要快速回答“哪个地区销量最高”“哪款产品增长最 ...
2026-07-31在问卷调研的数据分析流程中,“先检验信效度,再开展进阶统计分析”是通用的规范逻辑。很多从业者会听到“问卷效度高,后续可以 ...
2026-07-30【核心关键词】大数据、统计学、专业、毕业生、论文、课程、计算机、建模、知识、数据分析、机器学习、数据科学、大数据技术、 ...
2026-07-30 很多数据分析师掌握了Excel函数、会写SQL查询,但当被问到“数据从哪里来”“数据加工有哪些步骤”“如何使用分析工具连接数 ...
2026-07-30在业务数据分析中,按天拆分统计夜间时段的数据是高频需求——比如电商夜间订单监测、平台夜间用户活跃度分析、运维系统夜间异常 ...
2026-07-29在机器学习建模与特征工程实践中,判断不同特征对模型预测效果的贡献度,是特征筛选、模型解释、业务归因的核心环节。特征置换重 ...
2026-07-29 很多数据分析师精通Excel单元格操作,但当被问到“表结构数据的基本处理单位是什么”“字段和记录的本质区别”“为什么表结 ...
2026-07-29【核心关键词】岗位、数字化、经验、课程、方法论、决策、企业、大方向、数据分析、销售管理、理论知识、思维方式、分析销售、 ...
2026-07-28在问卷调研、用户分群、效果对比等业务数据分析中,分类变量的关联性与差异性验证是高频需求。卡方检验作为针对离散分类数据的经 ...
2026-07-28 数据分析师八成以上的时间在和数据表格打交道,但许多人拿到Excel后习惯性地先算、先分析,结果回头发现漏了一列关键数据, ...
2026-07-28在Excel数据分析与报表制作中,数据透视表是快速完成多维度汇总、分组统计的核心工具。很多从业者在得到透视表汇总结果后,为了 ...
2026-07-27 很多数据分析师每天与Excel打交道,但当被问到“表格结构数据的基本处理单位是什么”“数据类型误判会引发哪些分析错误”“ ...
2026-07-27当下,我们已然步入数据要素价值全面释放的智能时代。数据不再只是零散的数字记录,更是驱动新质生产力运转的核心动能、滋养人工 ...
2026-07-27【核心关键词】客户、数据分析、指标体系、数据采集、数据指标、业务数据、分析思路、业务需求、分析方法 【专访摘要】本次 CDA ...
2026-07-24在数据分析、业务建模与数字化运营体系中,原始业务数据普遍存在缺失、重复、异常、口径不一致等质量问题,直接用于分析与建模会 ...
2026-07-24 很多数据分析师能熟练计算均值、标准差,但当被问到“如何用一张图让业务方3秒内看懂核心结论”“面对不同数据类型该怎么选 ...
2026-07-24在数据驱动的精细化运营体系中,指标是业务判断、效果复盘、策略优化的核心依据。随着企业数据化程度提升,指标数量持续膨胀,但 ...
2026-07-23在用户运营与产品增长体系中,留存是衡量产品真实价值与用户粘性的核心标尺,也是决定用户生命周期价值、获客投产比的底层因素。 ...
2026-07-23