京公网安备 11010802034615号
经营许可证编号:京B2-20210330
如何成为一名合格的数据科学家
本文独家探讨了IT行业发展最快、业内讨论最多的角色之一--数据科学家。根据CNN报道,数据科学家是2012年度最佳的新工作之一,《哈佛商业评论》的评论文章甚至称其为21世纪“最性感”的工作。数据科学家的工作是使用数据分析作为交易工具,在浩如烟海的数据容量中发掘有意义的关联数据,并将其转化为有利可图的商业洞察力。
经过为期数月的高失业率和仍然摇摆不定的经济态势之后,从就业市场上得到的任何好消息都能迅速获得关注,但即便是这样,对于大家都关注着一个突然非常“in”的工作职务:数据科学家这样的事情,似乎没能完全解释得清。
根据CNN报道,数据科学家是2012年度最佳的新工作之一,《哈佛商业评论》的评论文章甚至称其为21世纪“最性感”的工作。
数据科学家的巨大诱惑力直接根源于市场对大数据与分析的强烈兴趣。数据科学家的工作是使用数据分析作为交易工具,在浩如烟海的数据容量中发掘有意义的关联数据,并将其转化为有利可图的商业洞察力。
此外,那些适应多维度工作岗位,糅合计算机科学,掌握先进的定量概念、业务领域知识和沟通技巧的人常常是鹤立鸡群、凤毛麟角。随着数据科学家的供不应求,数据工作者的收入达到了6位数字,人力资源公司Modis高级副总裁Matthew Ripaldi表示。
招聘人员同样表示数据科学家岗位飞速增长,即便工作职位的数量并不那么惊人。“当我们两年前开始寻找符合该职位要求的人时,仅仅只有8个工作岗位,但现在工作岗位有42个。”Tom Silver表示,他在工作搜索网站Dice.com担任北美地区高级副总裁。“83000个工作岗位中的42个,实在是不算庞大,但我决不会怀疑这个岗位在未来的快速发展”。
众人瞩目之外,有任何数据和计算机工作背景的人自然会心生怀疑,谁会成为数据科学家,我能不能成为数据科学家?笔者在此试着解答一些最基本的问题。
数据科学家是什么?
这个看似简单的问题的答案,取决于你问的对象。网址缩短服务Bit.ly公司首席科学家Hilary Manson对数据科学家的定义获得了广泛接受与认可: 数据科学家指能获取、清洗、探索、建模与解释数据的人。
位于新墨西哥州圣达菲的咨询机构Hired Brains公司首席执行官兼首席分析师 Neil Raden则更为深入,他将数据科学家分成两种类型。
第一种类型--他们是真正的科学家,研究创造算法和方法,发表论文,并积极参与这些规则的沟通。这些单个的人物常见于以算法和方法为核心的研究机构和学术机构(想想谷歌、亚马逊和华尔街),Raden表示。
第二种类型--这个类型的人群更接近于我们今天提到的雇佣市场上的人--他们不是科学家而是数据从业者,Raden补充道。他们都是统计学与数学建模及开发领域的专家,掌握并采用定量分析方法,设计、测试和部署模型。
预测分析服务提供商Opera解决方案研发中心全球负责人Jacob Spoelstra,也把在Opera工作的人大致归类为数据科学家,以及由他本人与同事负责的其他工作。
Opera公司的“数据科学家”--与Raden分类的第一种类型人群十分符合--在机器学习(能力)的水平上工作,开发统计模型和模式识别算法,从海量数据流中发现和提取智能预测。他们将分析发现转化为直接行动,通过减少财务欺诈或检测高风险抵押贷款等类似措施,帮助提升业务。Spoelstra估计,类似谷歌这样的公司雇佣了数百位这种类型的数据科学家,而Opera公司近700位雇员中,有三分之一是机器学习(能力)领域的专家。
同时,天才分析(Talent Analytics)公司CEO Greta Roberts坚信当前对数据科学家工作的理解实际上包含四大功能角色。一项针对数据科学家的调查询问了他们如何分配11项分析功能的时间,出现了四个集群:数据准备人员(他们花费绝大部分时间,进行数据的采集、制备和分析);程序员(他们创建程序并做相应的一些分析);管理人员(他们专注于数据管理、管控、展示、诠释与设计);最后一种为通才(什么都干,什么都只会一点点)。
“当我最开始听说这些的时候,我认为’没有人符合该定义--他们怎么可能?’”Robert说,“因为这是一个新角色,我觉得人们把什么职责都扔给了他。当你过度指定,最终只能得到一个空集”。许多商业人士视作数据科学家的,实际上是一个团体的人表现出的各种各样的功能。尽管现在依然缺乏符合这些角色的人,实际情况也与“凤毛麟角”相去甚远,有太多的人拥有这样的天赋,成长为一个或多个所需的角色。
必要的技能与凭据是什么?
正如Robert表明的那样,详细的数据科学技能如雨后春笋般在网络上列出,列表令人生畏。绝大多数指定经验要求先进的数学和统计分析(包括对类似R、SAS和Stata工具等的掌握)、创建程序(包括C、C++、Python和Java语言)、SQL数据库、平台如Hadoop/MapReduce、数据挖掘和建模、数据虚拟化、创造性和沟通能力与商务理解力。
当然,数据科学家的确需要与先前的数据分析人员决然不同的能力与技巧,这是事实。Raden承认,例如,他们需要有能力处理当前各种各样的有效数据,并且最终分析数组可以采用,Raden表示。
他们需要掌握编程技巧,也要有定量方法和调查与建模方向的背景;在涉及到数据的时候,他们必须能够辨别什么数据是有意义的,什么数据是无意义的,Raden补充道。高效的数据科学家还需要足够的业务领域知识,在复杂学科上与缺乏相应背景工具和方法的人顺畅沟通的能力,他说。
到底是什么导致数据科学家优于其他分析人士呢?Ripaldi解释,是沟通能力--通常的C系列--数据告诉他们结果,以及针对此结果应该如何采取行动。“你可以分析所有你想要的数据,但如果你不能清晰的表达出数据告诉你的东西,你就不能算作是数据科学家”,他说。毕竟,我们的目标是推进经营战略,如减少客户流失,提供跨渠道,化解金融风险。
然后再一次,Robert看到了这些需求本身存在的固有的冲突,她坦陈,“他们不得不能够坐在那里,在一段时间内寻找数据,然后翻转开关,化身为能引人入胜的主持人?这完全是两个不同的人。”
Opera--也雇佣了各种各样机器学习(能力)的数据科学家--在寻找这样的人,他们拥有定量领域背景,有数学和统计概念资质,能够将这些概念以计算机程序进行实例化,接受大容量数据流并对解决实际商业问题有一定兴趣。
“我们对那些需要学习机器学习算法的人感到自在,如果他们对数学和解决问题的能力表现出色。”Opera分析部门全球负责人Joseph Milanna表示,“他们可能不是一名合格的数学家或已经建立了神经网络,但他们应该表现出激情与兴趣,这样我们才会选择他”。
拥有怎样的背景,才能成为一名数据科学家?
在Opera,大多数成功的申请者都拥有更高水平的学术培训甚至拥有PhD。“鉴于在机器学习科学和其他新出现的新型技术的进步,科学家的确需要更高水平的训练,浸淫最新思想成果”,Milanna说。即便是在求职搜索网站Dice,半数的数据科学家都指定要求必须具备PhD学位,Silver表示,“这不是绝对必要的,但却是主要的奖励”,他补充。
Opera雇员跨越了各种各样的数据驱动型学科,包括计算机科学、电子工程、统计学、机械工程和心理学。这样跨学科的知识大有裨益,Milanna强调。例如,他已经看到了来自水文学的分子式应用于股票市场交易信号。
对于更大的数据科学家池,Raden坚信PhD学位不是必要的。如果一个人现在的工作室商业智能和定量分析,并且在那之前表现出了先进的数学和统计建模能力,就可以成长为企业的数据科学家,为企业提供如预测建模和大数据等类似关键领域的指导与培训。
Roberts表示同意,专注于特定技能和学历。某些时候可能会成为潜在求职者思考的代理人。“他们正示图衡量的是‘你喜欢学习吗?’但一堆方法可以用来获取该结论”,她表示。在天才分析(Talent Analytics)公司的调查中,数据科学家的先天特性包括好奇心、创造力、客观、有条理地思考能力与对细节的专注力,她强调。Milanna和Spoelstra也同意该观点,他们寻找候选人的最重要的天然特质也包括好奇心、逻辑思维、常识力、毅力、实用性和良好的判断力。
毫无疑问对数据科学家的需求只会不断增长,但由于该角色相对新潮,随着时间的推移,数据科学家的定义只会变化更多,不管是这些专业人士的工作范围,还是企业组织、实现并发展所需人才的方法。
“对于处在IT行业、项目管理和产品管理的人士来说,这是一个巨大的发展机遇,他们不再害怕学习他们行业相关的知识,也不用担心开夜车来整理头绪、解决问题。”
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在机器学习建模、数据预处理、抽样划分、模型初始化训练的全流程中,随机种子是控制实验随机性、保证结果可复现、提升模型稳定性 ...
2026-08-04Python作为面向对象的主流编程语言,核心编程体系由变量、方法、类三大基础要素构成。三者层层递进、相互协作,支撑起所有基础代 ...
2026-08-04 很多数据分析师沉迷于复杂的机器学习算法,却忽略了数据分析最基础也最核心的能力——描述性统计。事实上,80%的商业分析问 ...
2026-08-04为什么学习数据分析? 当下,我们已然步入数据要素价值全面释放的智能时代。数据不再只是零散的数字记录,更是驱动新质生产力运 ...
2026-08-03CDA等级认证证书有效期为三年,三年进行一次年审,主要考察CDA持证人的职业发展情况;学历、工作单位及职业变更情况;继续教育 ...
2026-08-03【核心关键词】金融、岗位、企业、算法、知识、专业、理论、课程、软件、数据分析、业务类型、应用场景、经营管理、大型企业、 ...
2026-08-03在日常数据分析、业务报表复盘、业绩预测工作中,平均增长率是衡量数据长期变化趋势的核心指标,广泛用于营收增长、用户增长、销 ...
2026-08-03很多人把统计学理解为“一堆公式和计算”,却忽略了它的本质——一门让数据“开口说话”的科学。真正的数据分析高手,不是会算平 ...
2026-08-03在数据指标体系搭建工作中,从业者常困惑于指标搭建的核心逻辑:究竟是依托一线零散数据自下而上汇总指标,还是基于战略目标自上 ...
2026-07-31在数据分析、问卷研究、实验复盘、业务建模的工作中,大多数人最关注的是“用什么统计方法”:是做T检验、方差分析、卡方检验, ...
2026-07-31 许多数据分析师精通Excel函数和SQL查询,但当面对一张上万行的销售明细表,要快速回答“哪个地区销量最高”“哪款产品增长最 ...
2026-07-31在问卷调研的数据分析流程中,“先检验信效度,再开展进阶统计分析”是通用的规范逻辑。很多从业者会听到“问卷效度高,后续可以 ...
2026-07-30【核心关键词】大数据、统计学、专业、毕业生、论文、课程、计算机、建模、知识、数据分析、机器学习、数据科学、大数据技术、 ...
2026-07-30 很多数据分析师掌握了Excel函数、会写SQL查询,但当被问到“数据从哪里来”“数据加工有哪些步骤”“如何使用分析工具连接数 ...
2026-07-30在业务数据分析中,按天拆分统计夜间时段的数据是高频需求——比如电商夜间订单监测、平台夜间用户活跃度分析、运维系统夜间异常 ...
2026-07-29在机器学习建模与特征工程实践中,判断不同特征对模型预测效果的贡献度,是特征筛选、模型解释、业务归因的核心环节。特征置换重 ...
2026-07-29 很多数据分析师精通Excel单元格操作,但当被问到“表结构数据的基本处理单位是什么”“字段和记录的本质区别”“为什么表结 ...
2026-07-29【核心关键词】岗位、数字化、经验、课程、方法论、决策、企业、大方向、数据分析、销售管理、理论知识、思维方式、分析销售、 ...
2026-07-28在问卷调研、用户分群、效果对比等业务数据分析中,分类变量的关联性与差异性验证是高频需求。卡方检验作为针对离散分类数据的经 ...
2026-07-28 数据分析师八成以上的时间在和数据表格打交道,但许多人拿到Excel后习惯性地先算、先分析,结果回头发现漏了一列关键数据, ...
2026-07-28