是骗局还是变革 大数据改变谁的命运
大数据会是一场概念的骗局么?近期这样的讨论在网上随着大数据的话题而不断涌现出来。其实大数据并不是一项全新的技术,它的本质表现在数据的形态更为复杂,增长的速度更快和交互的频率更高。如何对具备这样特征的数据集群进行管理和使用,是区别于传统数据应用的主要特点。更为重要的一点是:当前的技术将大数据应用的成本降低到了中小型企业也可以使用的阶段,在有关大数据的话题讨论中,这一点也是备受关注和认可的。
大数据分析意味着企业能够从这些新的数据中获取新的洞察力,并将它与已知业务的各个细节相融合。微软亚太研发集团服务器与开发工具事业部,中国云计算创新中心商务战略总监殷皓在接受记者专访时特别谈到了一个很有意思的案例:“某汽车销售机构希望了解历年油价的波动对汽车销售带来的影响,这时他们不需要重新采集关于油价的数据,而是通过Windows Azure上的一个数据集市服务,获得了准确而专业的数据信息,很快的完成了这项分析,充分体现了数据服务带来的价值。”殷皓认为数据不能停留数据存储的阶段,而是要转换成为有价值的信息服务,创造新的商业机会。
大数据将改变谁的命运
DBA是在传统数据库应用领域中极为重要的人群,也许大数据会带给他们理念上的转变。“DBA曾经是IT行业中的金饭碗,因为核心的数据库技术发展 相对来说变化的较少,所以有些DBA会慢慢变懒”,殷皓谈到:“但是,变化少不代表不变。如果DBA的工作定位偏向底层运维型的话,那么他们的职能会变得 越来越小,甚至会被自动化的服务来取代,未来DBA对基础设施的管理会越来越少,更多的向上层业务扩展。”
我们关注到发展中的DBA分工,其中的一种可能会涉及到企业核心安全保障,成为企业里数据的守门人之一。另一种角色是研发DBA,它和业务应用结合 的非常紧密。包括数据定义、数据建模,从逻辑建模到物理建模,以及后端存储的设计等,未来更多的是成为企业数据模型的管理者。“这实际上也是一个职业发展 的过程”,殷皓认为:“运维DBA需要确保7*24的业务连续性,研发DBA更多的负责物理建模,完成开发人员写的存储过程。而我们看到的数据架构师层 面,就是需要从业务需求出发来实现逻辑建模。因为对业务的理解是自动化工具所不能取代的,这也是在大数据的趋势下,DBA所要面临的转变。”
SQL Server与大数据的对接
Hadoop是大数据的一个分布式系统架构。5月与微软SQL Server 2012同时发布的还有将Hadoop和SQL Server连在一起的连通器,他们通过标准的ODBC模式,把Hadoop和PDW微软并行数据仓库连在一起,实现多核并发的并行数据仓库。“用户无需对应用做出很大的改动,只是连接到SQL Server、数据仓库,或者是一个对象。通过这个对象可以把我的连接通过连接键引申出去,然后把所有的数据整合在一起”,殷皓兴奋的分享到:“在这种场景下,我可以把结构化数据和非结构化数据、甚至是数据仓库在模型中的数据整合在一起,做更加深入的数据分析。”
SQL Server 2012版本中,微软亚太研发集团服务器与开发工具事业部参与了两个大的功能研发:数据的迁移工具SSIS,数据库升级的服务。微软针对Hadoop在 Windows Server Kernel上做出性能的优化、安全认证的整合,形成企业级的AD整合,并实现了和BI工具的整合。“微软在NoSQL上加一个SQL的索引层,比如 eBay的底层用了MangoDB,但所有的交易数据都按照SQL来存储到结点中”,殷浩认为:“NoSQL提供了一个很好的存储机制,但要提高数据利用 的效率,最好回到SQL的场景。NoSQL将会是数据库发展过程中的一个中间阶段,会逐渐体现为数据服务中的一部分,而非数据平台的主流。”
关于大数据的话题还将继续争论下去,但可以看到的是,在企业商业智能的发展基础上,数据分析将作为一种服务提供给用户。IT技术提供商们开始实践的大数据,不仅是把数据用于企业内部的业务分析和决策支持,而是以提供数据分析模型的方式优化企业决策。这不仅仅是技术的更新,而是IT消费模式的变革。
数据分析咨询请扫描二维码
CDA数据分析师在中国航信高科技产业园进行了面向测试度量的数据分析培训课程,培训人数近2 ...
2024-05-01CDA数据分析师走进深圳迈瑞生物医疗电子股份有限公司,在迈瑞总部展开了为期两天的培训,本次课程参训人员线上及线下近百人, ...
2024-05-01CDA数据分析师在合肥市对合肥阳光新能源科技有限公司开展了为期8天的企业内训。 合肥阳光新能源科技 ...
2024-05-01CDA数据分析师走进海尔大学,进行了《数据治理与数据中台建设的道与术》专题培训,培训现场爆满,近百人参加了此次培训。 ...
2024-05-01在中国银行苏州分行培训中心开始数据分析师培训,此次培训课程共10天内容,包括Excel、MySQL、概率论与数理统计、SPSS等内容, ...
2024-05-01从实际的业务需求出发,结合行业的典型应用特点,围绕实际的商业问题,探讨数据挖掘、机器学习模型在金融领域的应用,包括获客、信用评分、细分画像、交叉销售、反欺诈、违规识别、时序预测、运筹优化、流程挖掘九个方面,形成 ...
2024-05-01本次培训课程为线上+线下的模式,由于学员编程能力不一、部分学员没有编程基础,故提供统计学、python基 ...
2024-05-01华夏银行信用卡中心-机器学习培训 1、课程亮点 取材于业界一流企业和顶级咨询公司的行业实践;已经被证明是人人 ...
2024-05-01主 题:数据中台建设及数据分析应用主题分享 1. 数据中台市场洞察 2. 主流数据中台产品比较 3. 某企业数据中 ...
2024-05-01围绕“数据驱动”战略,全力打造我行 300 人数字化人才梯队,着力培养数字化管理人才、大数据专业团队 ...
2024-05-01在当今数据驱动的商业环境中,数据分析成为了企业决策的重要依据。通过对大量数据的收集、处理和分析,企业能够更好地理解市场 ...
2024-04-29在人工智能(AI)的世界里,提示词(Prompt)是一种强大的工具,它能够引导AI按照用户的需求产生特定的输出。本文将深入探讨AI ...
2024-04-29CDA立足未来职场,拓展前沿视野——对外经贸大学保险学院举办“三全育人大讲堂”分享行业最新动态。 ...
2024-04-294月2日,CDA数据分析师创始发起人兼协会理事长赵坚毅博士受邀在浙江万里学院举办了一场以“数字化能力在职场中的作用” ...
2024-04-29随机森林(Random Forests)现在机器学习中比较火的一个算法,是一种基于Bagging的集成学习方法,能够很好地处理分类和回归的问 ...
2022-12-23方差分析是数据分析中常用的一种统计分析方法,接下来让我们简单了解一下方差分析的基本思想和原理吧。 方差分析(Analysis ...
2022-12-23来源:关于数据分析与可视化 关于streamlit-aggrid 数据排序 表格样式的调整 数据 ...
2022-08-03作者:麦叔 定义 「把上面晦涩的概念汇成一句话就是:」 ❝ 回调函数就是一个被作为参 ...
2022-08-03现今,高学历人群日益增多,物以稀为贵的高学历光环淡去。无论本科生还是研究生,甚至博士生,求职竞争力都大不如前,就业压力越来越大。
2022-06-01某家企业10个人面试,有9个本科生……如何脱颖而出,除得体的举止和良好的沟通力外,证书成重要筹码,这也是很多人考证的关键所在。
2022-04-14