京公网安备 11010802034615号
经营许可证编号:京B2-20210330
本人理解的大数据_数据分析师(2)
昨天偷懒了少了一次文字排版,没想到好多朋友发消息来说字体变小了不习惯,看来坚持大一点的字体还是有好处的。
虽然很想保持高频率更新,但没想到回阿里后工作竟然比创业时还忙。经常回家得比较晚,再加上每天脑力使用过度,所以竟是硬生生的断更了两周。在接下来我想如果可能的话,把更新的时间调整到周日的晚上,周末可能会稍微空闲点。
在此也再征集一下大家想看的话题,可以向我提问,我会选取部分作为接下来文章的选题。
延伸一下昨天关于大数据的话题。在安全行业里未来真正会具备核心竞争力的,我认为正是这样的全局视角带来的改变。
比如近年来兴起的「撞库」攻击。因为各大公司用户数据的泄露,黑客手上已经拥有了数十亿条用户数据,其中20%包含了明文密码。在过去黑客想破解一个用户的密码,可能会通过字符的排列组合生成一部字典,逐个尝试,这样破解的效率无疑是相当低的。但现在因为有了全网用户的「密码库」,只需要简单的查询用户名,多半就能知道密码是什么,简单粗暴。
大数据就应该这么简单粗暴的应用,以一种完全不讲道理的方式直接达到效果,根本不需要什么精巧的算法,就像「把大象装进冰箱」里一样。
类似的,国外一家安全公司Akamai宣称他们能非常有效的阻断DDoS攻击,原因是他们通过和运营商合作的方式获取了全球30%左右的流量,从而能有效的监控到全球所有的恶意IP,发现有攻击过来,直接根据IP信息就阻断了。这也是大数据的一种典型应用。
再举一个例子,数据可能来自于过去没有注意到的地方。对于电话诈骗的传统解决思路,一般是从用户的来电号码着手,或者是从周边信息比如短信、传播来源入手。这些传统方法已经逐渐的变得效率低下。但目前有一种解决思路是根据用户的「声纹」信息进行有效识别,这样只要积累了一个用户的「声纹信息库」,就能够在每个用户通话时,直接识别出被标记为诈骗的那个用户。
所谓「声纹」就像是指纹信息一样,每个人说话的声音其实都是独一无二的,通过数字化的方法能够有效的识别出来。目前国外一些安全公司会把这种技术用在Call Center中进行反欺诈。但声纹信息和指纹信息一样,会成为国家安全基础设施的一部分。比如国外的一些机构,一旦掌握了所有中国人,包括政府领导人的指纹信息,会酿成什么后果很难想象。这也是为什么中国政府的工作人员会禁用苹果手机的原因,至少苹果收集用户的指纹信息会威胁到国家安全。
所以,我理解的大数据,和各种复杂的算法没有直接关系,那最多只是锦上添花。我理解的大数据,就是这么简单粗暴,以高一个维度的视角毫不讲道理的直捣黄龙。
两点之间什么最短?在二维空间是直线最短。但到了三维空间,两点之间距离可以为零(虫洞),比如把一张纸上的两点对折后贴起来。CDA数据分析师培训官网
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
备考CDA的小伙伴,专属宠粉福利来啦! 不用拼运气抽奖,不用复杂操作,只要转发CDA真题海报到朋友圈集赞,就能免费抱走实用好礼 ...
2026-02-11在数据科学、机器学习实操中,Anaconda是必备工具——它集成了Python解释器、conda包管理器,能快速搭建独立的虚拟环境,便捷安 ...
2026-02-11在Tableau数据可视化实操中,多表连接是高频操作——无论是将“产品表”与“销量表”连接分析产品销量,还是将“用户表”与“消 ...
2026-02-11在CDA(Certified Data Analyst)数据分析师的实操体系中,统计基本概念是不可或缺的核心根基,更是连接原始数据与业务洞察的关 ...
2026-02-11在数字经济飞速发展的今天,数据已成为核心生产要素,渗透到企业运营、民生服务、科技研发等各个领域。从个人手机里的浏览记录、 ...
2026-02-10在数据分析、实验研究中,我们经常会遇到小样本配对数据的差异检验场景——比如同一组受试者用药前后的指标对比、配对分组的两组 ...
2026-02-10在结构化数据分析领域,透视分析(Pivot Analysis)是CDA(Certified Data Analyst)数据分析师最常用、最高效的核心实操方法之 ...
2026-02-10在SQL数据库实操中,字段类型的合理设置是保证数据运算、统计准确性的基础。日常开发或数据分析时,我们常会遇到这样的问题:数 ...
2026-02-09在日常办公数据分析中,Excel数据透视表是最常用的高效工具之一——它能快速对海量数据进行分类汇总、分组统计,将杂乱无章的数 ...
2026-02-09表结构数据作为结构化数据的核心载体,其“获取-加工-使用”全流程,是CDA(Certified Data Analyst)数据分析师开展专业工作的 ...
2026-02-09在互联网产品运营、用户增长的实战场景中,很多从业者都会陷入一个误区:盲目投入资源做推广、拉新,却忽视了“拉新后的用户激活 ...
2026-02-06在机器学习建模过程中,特征选择是决定模型性能的关键环节——面对动辄几十、上百个特征的数据(如用户画像的几十项维度、企业经 ...
2026-02-06在CDA(Certified Data Analyst)数据分析师的日常实操中,表格结构数据是贯穿全流程的核心载体,而对表格数据类型的精准识别、 ...
2026-02-06在日常办公数据分析中,我们经常会面对杂乱无章的批量数据——比如员工月度绩效、产品销售数据、客户消费金额、月度运营指标等。 ...
2026-02-05在分类模型(如风控反欺诈、医疗疾病诊断、客户流失预警)的实操落地中,ROC曲线是评估模型区分能力的核心工具,而阈值则是连接 ...
2026-02-05对CDA(Certified Data Analyst)数据分析师而言,数据分析的价值不仅在于挖掘数据背后的规律与洞察,更在于通过专业的报告呈现 ...
2026-02-05在数据分析实战中,我们经常会遇到“多指标冗余”的问题——比如分析企业经营状况时,需同时关注营收、利润、负债率、周转率等十 ...
2026-02-04在数据分析场景中,基准比是衡量指标表现、评估业务成效、对比个体/群体差异的核心工具,广泛应用于绩效评估、业务监控、竞品对 ...
2026-02-04业务数据分析是企业日常运营的核心支撑,其核心价值在于将零散的业务数据转化为可落地的业务洞察,破解运营痛点、优化业务流程、 ...
2026-02-04在信贷业务中,违约率是衡量信贷资产质量、把控信用风险、制定风控策略的核心指标,其统计分布特征直接决定了风险定价的合理性、 ...
2026-02-03