京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据时代下是数据思维重要,还是相应技术重要
技术做到一定程度,逐步发现自己的瓶颈。不由得开始思考这一方面的问题!到底大数据时代下,是相应的数据分析技术重要,还是相应数据思维重要?
先来说数据思维吧!什么是大数据思维,个人感觉应该是互联网思维的一种。是考虑到全面,而不是局部。是考虑到多维,而不是单一维度。不是靠拍脑门做决定,而是让数据说话,用数据做决策。
先说第一点,考虑全面,而不是局部。众所周知,移动互联网催生了大数据的产生。每一个人每一天通过手机能够的数据总和会是一个巨大的量。而通过这些非结构化的数据,我们首先面对的是如何处理这些数据,这里就涉及到数据的存储,读取的问题。由于数据的非结构化。传统的处理技术将不能够很好的起到作用。不是我们单一抽取几个用户的数据加以统计就可以预测出大量用户的行为。这里需要的全局的数据。首先,这一点是大数据相对于其他技术的第一点不同。
再来说第二点,考虑多维,而不是单一维度。大家都有目共睹,现在的广告已经开始基于我们的浏览时长而进行二次推荐。而在进行多维分析后,将不再只关注用户的浏览数据,而相应的会有用户的文本信息,好友评论,已购买产品信息,用卡频次.....当将用户数据进行多个维度的整合分析后,就可以做到精准营销。从而打破传统一维营销的被动宣传不叫好的特点。
最后再看第三点,让数据说话,用数据做决策。在这里不得不提一个软件R,传统行业的业务统计大部分是靠它完成,但他的数据呈现有一点的局限。当我们将一些数据以图表的形式展现在领导面前时,我们就可以根据这些数据做新一年的年度规划。而不至于拍脑门做决定。而且现在数据可视化的应用也是非常的多,现实的应用也展现了相应的价值。
说完了上面三点,再来说一说大数据技术。
首先必提的是Hadoop,这样一个分布式的存储现在已经在大部分企业应用,而它的分布式存储又将用户的读取时间缩短。而下一代技术Spark,也就相当于从Hadoop的硬盘存放,转而到了内存存放。众所周知,内存的读取速度会比硬盘快许多倍。
其次再要说的就是SAS与R,这两个软件都有各自的优势,SAS做为专业数据统计的软件,可以说在大数据量时处理起来有显著的优点。但在超过1T数据量的情况下,它的优势就不再那么明显。而R软件在绘图上有很大的优势,在数据可视化上有很重要的地位。但无奈,R软件在统计上略逊色SAS一筹。而与SAS的同类软件中,SPSS个人感觉在数据量小时会有很大的用途。
还有就是数据获取,RCurl与相应的爬虫技术,而在大数据时期,各网站在反爬虫方面势必会做要应的措施从而保护自身已有的数据。
还有就是ETL,这一点,个人感觉以后会在大数据落在时起到非常重要的地位。因为国内的数据大部分都需要清洗,就像我导师说过的一句话,在中国做大数据,最大的困难就是如何识别出假数据。用真实的数据才能分析出我们所要得到的结果。
好了,到此为止,以上就是自己学习到的大数据知识,分别在思维跟技术方面的认识。但问题又回来了,对于企业来讲,盈利是最基本的选择,到底是选一个具备大数据思维的人还是一个会很多大数据技术的人?而对于自己来说,下一步的方向是继续学习技术,还是掌握相应的思维。
思维OR技术,或左或右?或都两都需要融合,但话题又回来了,工作是很现实的问题,售前,咨询,研发,架构,实施,工程.......到底该如何选择,抑或就不要选择,先静下心来学习,等到在职的学习毕业后再去选择工作。
面对转行,从通信培训行业向互联网行业大数据的转变,虽然不知前方道路如何,仍有些迷茫,但既然选择前方,便只顾风雨兼程,加油!
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
主讲人简介 张冲,海归统计学硕士,CDA 认证数据分析师,前云南白药集团资深数据分析师,自媒体 Python 讲师,全网课程播放量破 ...
2026-10-29大学里“比较有用”的证书,不能靠一张榜单排出来。同一张证,对目标岗位明确的人是简历上的能力证据,对没有方向的人只是一次报 ...
2026-10-29“比较好考”是选证书时最常被搜索、也最容易被误读的一个词。有人把它理解成报名条件宽松,有人理解成科目少、背一背就能过,还 ...
2026-10-29本科毕业能考的证书很多,但真正值得在毕业求职阶段投入的,通常只有一两个。判断顺序建议反过来:先按报考资格分档,确认“现在 ...
2026-10-29“中国证书难度排行”很难做成一张绝对总榜。原因不在证书太多,而在“难”的口径不同:有的证书难在报名资格,工作年限和专业限 ...
2026-10-29先把结论说清楚:真正以“在校学籍”为报考前置、社会人员完全不能报的证书并不多。网上流传的“大学生专属证书”清单,很多其实 ...
2026-10-29“有哪些比较好考的证书”,这个问题看似在要一份名单,实际难点在于“好考”本身没有统一口径。有人指报名不设专业限制,有人指 ...
2026-10-29“考什么证书有用”这个问题,很难有一个统一答案。同一张证书,对想进某个行业的人是敲门砖,对已经在该行业工作多年的人可能只 ...
2026-10-29大专学历能考的证书不少,但真正值得投入时间的,要先过两道筛子:第一道是“大专能不能报”,第二道是“这个证对应什么岗位、能 ...
2026-10-29“普通人能考的证书”这个问题,真正的难点不在找证书名单,而在两件事:一是你能不能报,二是考完有没有对应的岗位任务。前者看 ...
2026-10-29“女孩子容易考什么证”这个问题,真正难的不是找证书名单,而是“容易”两个字没有说清。报考门槛低,不等于考试简单;考试简单 ...
2026-10-29先说结论:不存在一张“所有女性都吃香”的证书。把“吃香”拆开看,无非三种意思——能不能进某个岗位(岗位需求)、单位认不认 ...
2026-10-29上班族选证书,最容易犯的错是先看“哪个证含金量高”,再倒推自己要不要考。更稳妥的顺序反过来:先看这个证能不能在业余时间学 ...
2026-10-29“目前哪个证书含金量高”没有放之四海皆准的答案。同一张证书,对财会在校生、想转行做数据分析的在职人员、工程从业者,价值完 ...
2026-10-29会计岗位没有一张“通吃”的证书。比较务实的思路是:先确认自己当前做的是哪一段工作——出纳与核算、成本与总账、税务申报、审 ...
2026-10-29计算机专业能考的证书不少,但真正值得先考的,取决于你准备走哪条岗位路径。比较稳妥的分类是四类:软考职称类、厂商技术认证、 ...
2026-10-29“国家认可的人工智能证书”这句话本身容易误导。证书体系里并没有一个统一的“国家认可”标签,同一个说法可能指向五种完全不同 ...
2026-10-29“各个行业都能考的证书”这句话,其实包含两个不同的问题:一是报考时不限专业、不限行业;二是考出来以后,在不同行业的岗位上 ...
2026-10-29大学生考证最容易踩的坑,是把“别人考了什么”当成自己的清单。更实用的做法是先回答三个问题:我打算投什么岗位?这个证书现在 ...
2026-10-29结论先说:大学生没有适合所有人的“必考清单”,把证书控制在2—4本核心组合较合理——1—2本通用基础,1—2本岗位技能,学有余 ...
2026-10-29