京公网安备 11010802034615号
经营许可证编号:京B2-20210330
云计算与大数据数据相互依存度越来越强
从某种意义上说,大规模数据中心是实现云计算的基础。在今天令人难以置信的大型模块化数据中心出现之前,向其他人销售计算资源简直是一个噩梦。对于大多数客户而言,不仅提供高可用性的成本让他们望而却步,而且可能无法完成。
云计算和数据中心并驾齐驱
随着部署率的增长,云计算将继续推动数据中心的演变,从架构到软件和控制流程。更广泛的部署不仅将迫使数据中心运营商重新思考其内部运作,还需要他们能够适应新的新兴需求。随着使用量的增加,还有能源消耗的增加,并且,由于供应商提供的计算资源变得更加多样化,这个环境将变得更加多种多样,管理也将更加复杂。简单的措施(例如使用外部空气来取代空调设备)将帮助企业节省数百万美元。
如果云计算带来计算资源的商品化,数据中心将需要进行优化,以便允许企业通过销售这些资源来生存。由于云计算在可预见的未来中将依赖于数据中心,这两种技术的演变无疑是联系在一起的,任何关注其中一种技术的人都应该同时密切关注另一种技术。
云计算始于数据中心。我们都在梦想着这样一个世界,即任何人都可以将他们多余的计算能力作为虚拟化资源卖给其他人,这是一种完全分布式的云计算模式。然而,现在的现实是,云计算遵循一种集中化工厂模式:资源由中央“工厂”(即亚马逊、Rackspace、微软、谷歌等的庞大数据中心)提供,并通过互联网分发给消费者。
可扩展性、可用性、弹性和安全性是必须以这样或者那样的方式纳入数据中心设计中的因素,从数据中心所在建筑物的结构一直到每台服务器上使用的软件,都必须考虑这些因素。否则,云计算供应商给出的任何承诺都将无法实现。
云计算供应商的承诺
对于云计算供应商给出的主要承诺,特别是在基础设施即服务领域,我们可以看到,大多数这些承诺都取决于数据中心建立之前出现的问题。对于客户而言,正常运行的承诺似乎很简单:当服务正常运行时,我可以访问和使用资源,而如果出于某种不能正常运行时,我将无法访问资源。而对于服务供应商而言,问题棘手的多:服务无法正常运行可能是因为服务器或磁盘故障,或者是重大停电事故。很多较低级的问题(例如电源或网络连接)都与较大的问题相关联,例如数据中心建立的位置。
在很多国家,你不可能同时接入到两个独立的外部电力能源供应商。这个事实可能会迫使企业投入更多资金来购买发电机或者其他后备能源,这无疑增加了运营成本。在网络方面,也面临同样的问题:无法接入到多个供应商,企业可能被迫部署自己的基础设施,甚至“自暴自弃”地接受这样的事实,即自己可能无法达到一定的可用性水平。
可扩展性是另一个有趣的问题。云计算服务供应商提供的(几乎)无限的可扩展性意味着他们必须不断增加可用容量,为了能够应对任何增加的需求。基础设施供应商每一天需要向他们的数据中心增加数百台甚至数千台服务器,不仅是用于替换故障设备,同时也为了应对未来的需求。将可扩展的资源交到基础设施最终用户手中将导致这样的情况:你根本不知道单个用户最多可能需要多少资源(这也是为什么大多数云服务供应商对单个账户可利用的服务器数量进行了虚拟的限制的原因)。
即使是像亚马逊的可用区(多个数据中心位置靠近,互相之间保持低延迟性的连接)这样简单的东西,也会带来设计和管理方面的复杂性。在亚马逊的情况下,正常运行时间是对多个可用区的衡量,而不是单个可用区,这些可用区必须足够分散,这样影响某个可用区的外部问题就不会影响到其他可用区,同时,距离也不能太远,以保证低延迟性连接。与此同时,它们代表了一种新的数据中心概念:多个数据中心可作为单个数据中心运行。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据驱动决策的体系中,数据分析按照分析目的可分为描述性分析、诊断性分析、预测性分析与指导性分析四大类型。其中,诊断性分 ...
2026-09-01网络请求是Python爬虫开发、接口测试、数据拉取的核心基础功能,Python生态中主要依靠 urllib 和 requests 两大库实现HTTP请求操 ...
2026-09-01 很多数据分析师面对业务问题时,常常感到“知道要分析,却不知道用什么方法”。其实,数据分析并非无章可循——从三大基础范 ...
2026-09-01在数据库设计与业务数据维护中,自增ID是数据表最常用的主键字段,用于唯一标识每一条业务数据,正常状态下ID应保持连续递增。但 ...
2026-08-31在数理统计、数据分析、经济测算与日常量化评估中,平均值是刻画数据集中趋势、反映整体水平的基础核心指标。在实际应用中,最常 ...
2026-08-31在数据驱动的时代,数据分析早已不是“凭经验、靠感觉”的零散操作,而是一套具备固定逻辑、标准化流程的系统方法——这就是数据 ...
2026-08-31在大数据时代背景下,海量行业数据亟需通过专业化工具挖掘潜在价值,辅助企业业务决策、优化运营模式、规避经营风险。Python凭借 ...
2026-08-28SQL是数据分析领域最基础、最核心的工具,承担着取数、清洗、统计、分层、归因的全流程工作。不同于单纯的语法练习,实战化SQL数 ...
2026-08-28 很多企业团队并非缺乏指标,而是陷入“指标失控”:仪表盘上堆满实时跳动的数据,却无法回答“当前瓶颈在哪、下一步该做什么 ...
2026-08-28随着新零售模式的快速普及,零售行业从传统的“货品驱动”全面转向“用户驱动”。门店交易数据、线上消费记录、浏览轨迹、复购频 ...
2026-08-27在数据分析、爬虫采集、接口开发、数据归档等场景中,JSON与CSV是两种使用率最高的数据存储格式。JSON为键值对结构化格式,适配 ...
2026-08-27 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-08-27在数据分析工作中,时间序列是最常见的数据类型之一,订单时间、日志时间、交易时段、统计周期等数据均离不开时间处理。原始数据 ...
2026-08-26在数据分析与数据预处理工作中,原始数据普遍存在录入错误、系统故障、偶然极值等问题,极易产生异常数据。异常数据会严重干扰数 ...
2026-08-26 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-08-26在数理统计与数据分析领域,多因素方差分析与线性回归模型是研究变量关系、因素影响、数据差异规律的两大核心工具。二者均属于经 ...
2026-08-25数据分析的核心价值不在于数据计算与图表制作,而在于清晰、精准、有逻辑地输出结论、支撑业务决策。日常数据分析报告普遍存在结 ...
2026-08-25 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-08-25平均数是数据分析、数理统计与日常运算中最基础、最常用的统计量,核心作用是浓缩一组数据的整体水平、刻画数据集中趋势。在众多 ...
2026-08-24在MySQL数据库中,InnoDB存储引擎作为主流事务型引擎,默认事务隔离级别为可重复读(Repeatable Read,RR),这与SQL Server、Or ...
2026-08-24