京公网安备 11010802034615号
经营许可证编号:京B2-20210330
四大云端大数据平台评测分析_数据分析师培训
当你已经准备好实施大数据,请仔细的评估云提供商提供的大数据功能,确保找到最合适的。下面我们来看一下四种云服务产品。
当谈到在云端实施大数据战略时,好消息是你会有很多选择。但是,这同时也是一个坏消息。来自Forrester Research最近的一份报告强调,尽管大数据云服务很强大,他们也有可能造成混乱,从而需要企业采用比传统的方式更加灵活,琐碎的方法。该报告的结论是:在云计算领域中没有一种服务是适合所有状况的。
最大的三家公有云平台—亚马逊Web服务(AWS)、微软的Azure和Google--提供了范围广泛的大数据服务,但每一种服务又完全不同。由于每个公司的大数据需求不同,技能集也不同,评估所有的平台来确保你获得的是正确组合的服务非常重要,Kirk Borne,乔治梅森大学的数据科学家,天文物理和计算科学教授同时也是一位知名的大数据专家这样建议道。
“任何大数据的实施都必须从你试图解决的问题开始,”Borne说。“你需要在花大把资金之前先了解企业的情况,确保你从可用的服务中选择正确的那个。”
下面来看下这三大主流云平台提供的大数据产品,以及第四家Altiscale,这是一家比较新的公司,有自己的Hadoop云平台。
AWS:选择和机遇
在每一项迁移到云的决策中,一个平台的“生态系统”,即服务、合作伙伴、专家和系统集成师扮演了重要的角色。根据Ouoble,一家在 AWS,Google和Azure平台提供大数据即服务公司的联合创始人兼CEO Ashish Thusoo的观点,AWS的生态系统要比其他的云平台更大、发展得更好。AWS生态系统使得这个平台对于想要将大数据迁移到云中的企业客户来说非常引人注目和令人感到安心,他说。
这种吸引力的一部分原因是因为各种可用的服务。亚马逊的一整套大数据服务包括了Hadoop的弹性MapReduce即EMR;用作数据流处理的 Kinesis;基于集群的数据仓库RedShift;面向亚马逊关系型数据库RDS的Aurora和My SQL(等其他);NoSQL数据库DynamoDB;超简单存储或者S3;还有全新的Amazon Machine Learning。
“AWS能够提供过去的历史报表和仪表盘,现有的数据流处理和分析,和现在未来预测的建模工具,”Mike Gualtieri,一名Forrester Research的分析师,Forrester大数据研究报告合著者说。他认为AWS的RedShift对那些已经厌倦了很慢的传统数据库环境中的报表的企业客户来说尤其诱人。“RedShift是AWS服务中发展最快的,将你的数据迁移到那里运行所有的分析非常合理,”他说。“这真的是一种云的合理使用方式。”
Google BigQuery:开发者之梦
Google的大数据平台BigQuery,是为流数据和持续分析而设计的。该平台有一个预测性的数据API,一些其它的Google专属API和标准的 Java产品。“关于Google的问题是它是非常面向开发人员的,比其他平台更加如此,”Gualtieri说。“在Google,你必须接受他们专有的技术和API,并且足够聪明到可以搞清楚。”Google平台提供了Hadoop作为一个大数据的选项,但是Gualtieri提醒公司企业如果想在 Google上运行Hadoop的话需要具备企业内部的专业技能。“它就在那里,但你最好自己要知道如何获得,具体到命令行的级别,”他说。
但对于某些公司,Ouoble的Thusoo说,Google则是最完美的选择,尤其当价格和性能决定一切的时候。“我们对Google在价格和性能上做了基准测试,Google在这块绝对是佼佼者,”他说,“性价比通常对创业公司非常重要,因此谷歌是他们的最佳选择。”
Azure:Hadoop之力
Azure平台的大数据产品HDInsight,和SQL数据库以及存储一起,旨在能够同微软流行的Excel电子表格无缝工作。这对于客户来说是一个巨大的卖点,因为根据Forrester的报告表明,在大数据所在的地方处理大数据(也叫数据重力)会让整个过程更轻松。“我真的认为Azure在混合领域里有其优势,”Thusoo说,“很大部分是因为微软可以利用自己本地应用的影响力。”
HDInsight是由Apache的Hadoop支持的,这也是一大吸引力,Forrester的Gualtieri说。“微软有许多不同的工具,包括机器学习和预测分析,”他说。“而对于任何想要用Hadoop做大数据分析的人来说,Azure是一个非常好的选择,因为它很容易获得并且具有强大的控制面板。”
Altiscale:一直都是大数据
成立3年的Altiscale最开始是在自己的云里推出Hadoop即服务。这家公司的创始人,Raymie Stata,在创建Altiscale之前曾是雅虎的CTO并且为这家网络巨头开发了Hadoop即服务。“Altiscale的设计从本质上是独一无二的,”Altiscale的COO Mike Maciag解释道。用户可以从三大云服务供应商获得“通用的”大数据服务,但Altiscale的云是从硬件以上都进行了定制可以更高效地运行大数据,Maciag说。“大型云供应商为很多的纵向处理提供了良好的计算密集型的功能,但大数据更多的是大规模并行处理,这意味着它是横向的。 Altiscape是专为Hadoop构建的来避免吵闹邻居的问题。”
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据驱动决策的体系中,数据分析按照分析目的可分为描述性分析、诊断性分析、预测性分析与指导性分析四大类型。其中,诊断性分 ...
2026-09-01网络请求是Python爬虫开发、接口测试、数据拉取的核心基础功能,Python生态中主要依靠 urllib 和 requests 两大库实现HTTP请求操 ...
2026-09-01 很多数据分析师面对业务问题时,常常感到“知道要分析,却不知道用什么方法”。其实,数据分析并非无章可循——从三大基础范 ...
2026-09-01在数据库设计与业务数据维护中,自增ID是数据表最常用的主键字段,用于唯一标识每一条业务数据,正常状态下ID应保持连续递增。但 ...
2026-08-31在数理统计、数据分析、经济测算与日常量化评估中,平均值是刻画数据集中趋势、反映整体水平的基础核心指标。在实际应用中,最常 ...
2026-08-31在数据驱动的时代,数据分析早已不是“凭经验、靠感觉”的零散操作,而是一套具备固定逻辑、标准化流程的系统方法——这就是数据 ...
2026-08-31在大数据时代背景下,海量行业数据亟需通过专业化工具挖掘潜在价值,辅助企业业务决策、优化运营模式、规避经营风险。Python凭借 ...
2026-08-28SQL是数据分析领域最基础、最核心的工具,承担着取数、清洗、统计、分层、归因的全流程工作。不同于单纯的语法练习,实战化SQL数 ...
2026-08-28 很多企业团队并非缺乏指标,而是陷入“指标失控”:仪表盘上堆满实时跳动的数据,却无法回答“当前瓶颈在哪、下一步该做什么 ...
2026-08-28随着新零售模式的快速普及,零售行业从传统的“货品驱动”全面转向“用户驱动”。门店交易数据、线上消费记录、浏览轨迹、复购频 ...
2026-08-27在数据分析、爬虫采集、接口开发、数据归档等场景中,JSON与CSV是两种使用率最高的数据存储格式。JSON为键值对结构化格式,适配 ...
2026-08-27 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-08-27在数据分析工作中,时间序列是最常见的数据类型之一,订单时间、日志时间、交易时段、统计周期等数据均离不开时间处理。原始数据 ...
2026-08-26在数据分析与数据预处理工作中,原始数据普遍存在录入错误、系统故障、偶然极值等问题,极易产生异常数据。异常数据会严重干扰数 ...
2026-08-26 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-08-26在数理统计与数据分析领域,多因素方差分析与线性回归模型是研究变量关系、因素影响、数据差异规律的两大核心工具。二者均属于经 ...
2026-08-25数据分析的核心价值不在于数据计算与图表制作,而在于清晰、精准、有逻辑地输出结论、支撑业务决策。日常数据分析报告普遍存在结 ...
2026-08-25 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-08-25平均数是数据分析、数理统计与日常运算中最基础、最常用的统计量,核心作用是浓缩一组数据的整体水平、刻画数据集中趋势。在众多 ...
2026-08-24在MySQL数据库中,InnoDB存储引擎作为主流事务型引擎,默认事务隔离级别为可重复读(Repeatable Read,RR),这与SQL Server、Or ...
2026-08-24