京公网安备 11010802034615号
经营许可证编号:京B2-20210330
无论是“小数据”时代还是现在的“大数据”时代,对数据的挖掘、存储、分析和使用从来就不是一件简单的事儿,而且这件事的难度还会随着数据量的增长而变得越来越大。同时,单个企业若是仅仅想要进行数据的存放和处理,去配备一整套Hadoop集群也并不经济。于是,阿里云准备将这件事做成一门生意,帮助企业对他们手中的数据进行存储和分析。
不久前,阿里云正式对外公布了一个叫做ODPS的商用服务。ODPS的全称是Open Data Processing Service,也就是开放数据处理服务。企业可以将来自前端的大量数据集中导入到阿里云中存储,这一点类似于亚马逊此前推出的Redshift数据仓库。
不仅如此。官方还表示,在这个基础上,阿里云将会开放更多的数据分析服务。目前,ODPS开放了SQL功能,以用于数据仓库和日志分析。这就像是Google此前推出的BigQuery——它可以让开发者可以使用Google的架构来运行SQL语句对超级大的数据库进行操作。同样地,现在企业也可以使用ODPS来对数据进行处理了。
在价格和性能方面,ODPS是按照使用量付费的:存储1GB的数据,每个月收取大概0.5元钱左右;阿里云还官方公布了一个数据处理能力供参考:6个小时ODPS可以处理100PB的数据。至于至关重要的商用后的SLA(服务等级协议),ODPS产品经理汤子楠披露了一部分:在技术层面,阿里云承诺放在ODPS中的数据不会泄漏,阿里巴巴和阿里云也不会查看;在服务层面,鉴于不能承诺所有提交的数据处理作业都能计算成功,如果是阿里云方面的原因导致作业失败,那么阿里云则不会收费,而且对于离线作业来说,只对作业成功的那次进行收费。
在此前,ODPS一直被应用于阿里内部的业务系统中,一个典型的应用就是阿里小贷公司的审核和放款流程。阿里巴巴的官方数据称,有超过36万人从阿里小贷借款,最小贷款额为1元,并且能够实现3分钟申请、1秒放款、0人工干预。在这些背后,阿里小贷每天需要处理30PB数据,包括店铺等级、收藏、评价等800亿个信息项,运算100多个数据模型……这些都是放在ODPS上存储和分析的。阿里云还表示,淘宝和支付宝等阿里巴巴的部分核心数据业务,也都运行在ODPS平台之上。而在ODPS的产品页面则拿出了阿里巴巴的关联公司天弘基金和众安保险作为案例来进行宣传。
从目前来看,ODPS开放的还只是针对大量数据的数据仓库功能,以及部分数据分析服务。但阿里云显然并不想止步于此。
你可以把阿里云此前一个叫做“御膳房”的服务看作ODPS未来发展方向的缩影。简单来说,“御膳房”实际上是对淘宝和天猫电商数据的挖掘、存储、分析和服务输出的整套服务。在“御膳房”中,淘宝和天猫平台上的大量电商数据被放到ODPS上进行存储,阿里巴巴还引入了第三方ISV(独立软件开发商)来针对这些数据开发分析工具和模型进行分析,最后他们将分析结果拿到服务市场上去销售给卖家——所谓针对淘宝天猫用户进行的精准广告营销,就是通过这种方法得来的。
在ODPS被开放出来之前,“御膳房”完全是阿里巴巴内部的电商平台上生长出来的产物,从数据来源,到数据取向,都是服务于淘宝和天猫平台。而在开放以后,就会有更多类型的企业和数据(包括一些阿里巴巴内部不太擅长处理的非结构化数据)被放在ODPS上,而使用范围也将不仅仅局限于阿里巴巴平台了。
用更加直白的语言来解释就是,ODPS此次作为PaaS被开放了出来进行商用,接下来,企业自身、或者借用ISV开发的工具再在ODPS之上进行数据分析,然后使用这些分析结果。
不过,ODPS现阶段仍有不少问题。汤子楠坦言,对非结构数据的支持将会是ODPS面临的一大挑战。因为ODPS最早是基于阿里巴巴内部的业务成长起来的,而阿里巴巴分析的数据主要是交易数据和用户行为数据——这些数据大多都是结构化和半结构化的。这决定了,ODPS最初开放的服务面向的也都是结构化数据,比如无人分析、数据仓库、BI(商业智能)分析。而随着更多的企业使用ODPS,一定会有大量非结构化的数据放到这个平台上来,这将会是ODPS接下来要探索的很重要的一个方面。
另外则是数据的传输问题。阿里云官方的建议是直接使用ODPS的数据仓库,这样就可以直接调用ODPS之上的分析工具;但如果客户的数据并不存储在阿里云上,也想使用ODPS对数据进行分析,则只能通过API使用https协议传输——这意味着网络传输不得不受到网速的限制。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在校期间能考的证书,大致落在四类里:通用基础类、岗位技能与行业认证类、专业技术资格类、国家职业资格与职业技能等级类。但比 ...
2026-11-04先把结论说清楚:大学生能自学考的证,主要集中在三类。第一类是通用基础类,比如大学英语四六级、全国计算机等级考试、普通话水 ...
2026-11-04大学生考哪些证书好,没有一个统一答案。有人说的“好”是好考、周期短,有人指招聘时用得上,还有人看长期职业壁垒。三种口径排 ...
2026-11-04“什么证书值得考”没有一个统一答案。同一张证书,对准入岗位是硬门槛,对另一类岗位可能只是加分项;对在校生是求职准备,对在 ...
2026-11-04“女生考什么证比较好”这个问题,真正的难点不在“女生”,而在“比较好”三个字。对一个人来说,好报、好考、好就业往往不是同 ...
2026-11-04离开校园后考证书,最怕两件事:花几个月备考,发现报考条件不符;或者考下来,岗位用不上。社会人士选证书,先别急着看榜单,先 ...
2026-11-04“女孩子适合考什么证书”很难用一张榜单回答。“适合”包含太多变量:求稳进体制或学校,靠技能接单变现,还是进入运营、市场、 ...
2026-11-04先把结论说清楚:选证书不看性别。“男的适合考什么”这个问题里,真正有用的是三个变量——你想去的岗位、你现有的能力基础、你 ...
2026-11-04“哪些证书属于技能证书”,没法靠一份名单回答。技能证书不是某一部门统一颁发的单一证书,而是按发证主体和评价性质划分的一类 ...
2026-11-04“哪些是职业资格证书”这个问题,答案比多数人想的要窄。按照现行制度,职业资格证书主要指列入国家职业资格目录的证书,分为准 ...
2026-11-04想考证,但单位不统一组织,能不能自己报名?答案是:能,但前提是先分清三类证书——个人可独立报考、需单位统一组织、需机构代 ...
2026-11-04“好考又有用”是证书选择里最常被并列、也最容易被混淆的两个条件。好考,可能指报名不设门槛,也可能指考试科目少、通过难度低 ...
2026-11-04“含金量排名前十证书”是一个搜索量很大、但很难有标准答案的问题。原因不复杂:证书的价值依附于具体岗位和制度属性。注册会计 ...
2026-11-04“国内认可的证书”不是一个单一概念。有人问的是国家职业资格,有人问的是职称,有人问的是行业认证,还有人把培训机构发的结业 ...
2026-11-04高中生搜“可以考什么证书”,最常踩的坑不是选错方向,而是没看清报名门槛就付了费。直接回答:高中在读期间,真正能报的主要是 ...
2026-11-04“都有什么证书可以考取”这个问题,直接搜会得到一堆互相矛盾的榜单。更有效的做法不是先问“哪个最值钱”,而是先分清证书的性 ...
2026-11-04大专在读期间能考的证书,比很多人想象的要多,但真正值得花时间的并不多。核心判断顺序只有一条:先看当期官方公告是否允许专科 ...
2026-11-04大一刚入学就琢磨考证,这个念头本身不坏,但顺序容易搞反。直接回答:大一不必急着考高门槛、强专业背景的证书,优先把英语四六 ...
2026-11-04大学生考证书,没有一张“人人都该考”的清单。更实用的做法是:先确定目标岗位方向,再按“岗位匹配→在校可考→校招实用→学习 ...
2026-11-04大学生能考的证书很多,但真正值得先花时间的,不是“名字听起来厉害”的那几张,而是能对应到你目标岗位、且在校期间确实报得上 ...
2026-11-04