你所不知道的大数据、云计算,以及无法计算的价值
毫不吹牛的说,单凭这个标题,就能让这篇文章装着13轻轻松松过大年。但凡有不服者,请你告诉我旁边的这位大婶儿,什么叫大数据,什么是云计算。你要能让大婶儿听明白了,我就服你。认怂了吧?来,看我的。
不管你能不能看见,这都是一个全新的世界
1590年,有一个名叫札恰里亚斯·詹森的荷兰眼镜制造商人,发明了一种借助物理方法使物体放大影象的仪器,名曰显微镜,从此,人类看到了一个全新的世界,走入原子时代。
1609年,有一个名叫伽利略的人,用平凸透镜作为物镜,凹透镜作为目镜,制作了一架口径4.2厘米,长约1.2米的望远镜。他用这架望远镜指向太空,看到了一个全新的世界,天文学从此进入了望远镜时代。
1842年,有一个名叫多普勒的奥地利物理学家,率先提出利用多普勒效应的多普勒式雷达。雷达的英文直译是“无线电探测和测距”,即用无线电的方法发现目标并测定它们的空间位置,因此雷达也被称为“无线电定位”。
伽里略发明天文望远镜,让人类突然意识到世界不是原来眼睛看到的那样。需要明确一点,人类不是因为知道世界是什么样而去发明了望远镜,而是因为有了望远镜,才知道世界是什么样。显微镜也是一样的道理,当你离开显微镜的时候,你要想一想通过显微镜看到的那个世界是不是真实存在。
给你12秒,想一想……
你想的都对!互联网、数据和计算,就像人类历史上三个非常重要的工具——望远镜、显微镜和雷达的发明,让人类看见了原来看不见的世界,看见了历史上没有见过的东西。
能说出这么深入浅出的道理,自然不是我,而是阿里巴巴CTO王坚博士。王坚博士被业界誉为云计算的布道者,在近年来的公开演讲中多次阐述他对互联网、计算和数据的理解。1月20日,云栖大会上海峰会召开,王坚博士在主题演讲中表示,现在人们看数据都是通过计算去看,就像人类发明显微镜以后,研究微观世界都是通过显微镜看到的。同理,我们要相信那个人眼看不见的、被计算出来的数据世界。
他说,“传统行业或者传统软件公司不觉得鼠标点击有意义有价值,不觉得那是一个活生生的世界,但是互联网是把它当生命来看。在互联网上点击鼠标就能知道用户的兴趣,能创造价值,这是互联网公司真正的能力,而不是别的东西,这是显微镜的作用。”
想不想在数据时代也能分得一杯羹?
不得不承认,王坚博士总是能用大婶儿都能理解的语言,完美解释无比高深的科学问题。
在谈到数据的时候,他说,因为互联网这个基础设施的存在,数据就像土地、石油、煤一样,成为了DT时代的生产资料。为了利用好数据这一生产资料,发挥出数据的巨大价值,他号召在场的每一人学习小岗村的农民,做互联网时代地球村的“数据农民”。
“关于数据这件事情,大家都处于像中国三十年前改革开放的起点,不知道土地上种什么,种的东西不知道是谁拥有的。”王坚强调,“在座的各位有一次机会,我们一起为全世界做一次小岗村农民做的事情,思考如何让土地产生价值,如何让数据产生价值,并且产生的价值不会有纠纷,所有权清晰。这是数据产业非常重要的机会。”
王坚认为,当互联网变成基础设施、数据成为生产资料、计算成为公共服务的时候,所有的企业、所有的行业又站在同一条起跑线上:个人创业者的影响力可以和一万人的大公司影响力相比,而一万人的大公司又具备了小公司的灵活性。
说的这么好,如何才能成为数据时代的数据农民呢?据说下面这个叫做“数加”的家伙可以帮到你。
带你看懂全球首个一站式大数据平台“数加”
有人说,2016年才是真正意义上的大数据元年。这句话听着好熟悉……
在过去的5年里,全球大数据计算性能实现了超过20倍的增长,100TB数据排序时间由8274秒缩短到377秒。束缚大数据的技术瓶颈已经被完全打破,数据将从企业的成本中心转变为价值中心。
与此同时,IDC出版的数字世界研究报告显示,2013年人类产生、复制和消费的数据量达到4.4ZB。而到2020年,数据量将增长10倍,达到44ZB。大数据已经成为当下人类最宝贵的财富。但全球真正享受大数据红利的公司不足千分之一,人类已挖掘的数据财富更是不到百万分之一。
没错,这是一个人人都在谈大数据的时代,每年都谈,谈了好几年了,但是,真正在用大数据的却只有极少数人。为什么呢?说来话长,暂且不表。今天说一说,为啥2016才是真正的大数据元年,因为有了“数加”。
1月20日的云栖大会上海峰会上,阿里云宣布开放阿里巴巴十年的大数据能力,发布全球首个一站式大数据平台“数加”,首批亮相20款产品,覆盖数据采集、计算引擎、数据加工、数据分析、机器学习、数据应用等数据生产全链条。“这些技术至少领先业界三年”,阿里云大数据事业部资深总监徐常亮说。
这个平台承载了阿里云“普惠大数据”的理想——让全球任何一个企业、个人都能用上大数据。
开放、开放、开放,重要的事情说三遍
过去10年来,阿里巴巴积累了令行业艳羡不已的庞大数据,那就是一笔巨大的财富,就像煤炭一样,趴在你家山头下面。那么,突然有一天,你说大家都来一起开采吧,对外开放,情形会怎样呢?
“数加”就是要把阿里巴巴的大数据向外界开放。据了解,“数加”正在向有数据开发能力的外界的第三方团队开放,这些团队可入驻“数加”,借助数加上的工具为各行各业提供数据服务。
“这就像在淘宝开店一样,只是他们售卖的是专业能力。”徐常亮表示,阿里云计划用3年时间吸引1000家合作伙伴入驻,共同分享1万亿的大数据蛋糕。
借助大数据技术,阿里巴巴取得了巨大的商业成功。通过对电子商务平台上的客户行为进行分析,诞生了蚂蚁小贷、花呗、借呗;菜鸟网络通过电子面单、物流云、菜鸟天地等数据产品,为快递行业的升级提供技术方法。
在这些创新中,“数加”承载了阿里巴巴EB级别的数据加工计算,经历了上万名工程师的实战检验。大麦网是阿里云“数加”平台的尝鲜者。通过采用“数加”的推荐引擎,大麦网的研发成本从900人天降低到了30人天,效率提升了30倍。
大数据喊了那么多年,阿里云开始带大家真刀真枪地玩
“过去6年来,阿里巴巴巨大的战略投资就是放在云计算和大数据服务上。我们相信人类已经从IT时代在步入DT时代。”马云在2015年致投资者公开信中表示,“我们必须在数据技术的投入和发展上不惜一切的投入发展,我们正在努力让数据和计算能力成为普惠经济的基础。”
马云所说的DT技术正在通过“数加”变现,这个集成了人工智能、机器学习、智能语音等前沿技术的阿里云大数据平台,让没有足够技术实力的公司,也能实现从数据中提炼“石油”。
“未来3年,大数据市场规模将达到1万亿元。”阿里云总裁胡晓明在发布会上表示,基于阿里云大数据平台数加,将有千余家合作伙伴、万名首席数据官和5万数据科学家诞生,把中国大数据市场规模拓展至万亿规模。
“大数据”一词近年来在中国十分火热,但真正的数据技术和工具平台一直缺位。“中国的数据技术起步比硅谷晚,但我们看到互联网巨头们正在大量投入研发力量,来缩短差距。”Alliance Development Group分析师David Sullivan表示,以阿里巴巴为典型的中国互联网公司正在自己的商业场景中大规模使用数据技术,技术上与硅谷几乎没有差距。
在发布会上,阿里云提及去年年底刚刚刷新的一项世界纪录。在由数据库之父Jim Gray创办的排序基准评估竞赛Sort Benchmark中,阿里云把100TB数据的排序时间缩短到了377秒,打破了此前由雅虎、微软、斯坦福大学等公司与机构保持的纪录。
“数加”教你一星期做出双11同款大屏
去年双11,北京水立方的那块巨大无比的直播大屏幕,想必大家都在新闻报道的配图里见过了吧,实时展现阿里巴巴整体交易数据,可视化效果,绝对震撼。想不想也来一块?
“数加”之后,中国的县长们也能实现这样的可视化管理了。云栖大会上海峰会上,阿里云发布了一款针对中国县域经济的数据应用产品,能让每个县域的管理者实时的了解区域的经济态势、产业特点、内需消费等关键数据的走势,为政府决策提供支持,堪称“师爷”。
据了解,这款命名为“郡县图治”的产品,使用了阿里云DataV数据可视化技术做支撑,将为3000余个县域政府定制可视化经济云图。今后,县域经济的决策者办公室里,可能将出现这样一块大屏,上面的每一个数字的跳动都实时反映着当地县域经济的发展态势,县长们也不用再从厚厚的定期报表中探寻经济发展的脉搏。
开发这样一款”酷炫“的大屏需要多久?只要一周!阿里云工程师介绍,这款产品无需进行任何的编程,只需进行简单的部署、参数设置、数据连接,便可让枯燥的统计数据直观的呈现出来,帮助县域经济决策者们快速发现问题作出决断。
“我们希望通过数加的发布,让政府、企业、个人都能享受到大数据的红利
数据分析咨询请扫描二维码
CDA数据分析师在中国航信高科技产业园进行了面向测试度量的数据分析培训课程,培训人数近2 ...
2024-05-01CDA数据分析师走进深圳迈瑞生物医疗电子股份有限公司,在迈瑞总部展开了为期两天的培训,本次课程参训人员线上及线下近百人, ...
2024-05-01CDA数据分析师在合肥市对合肥阳光新能源科技有限公司开展了为期8天的企业内训。 合肥阳光新能源科技 ...
2024-05-01CDA数据分析师走进海尔大学,进行了《数据治理与数据中台建设的道与术》专题培训,培训现场爆满,近百人参加了此次培训。 ...
2024-05-01在中国银行苏州分行培训中心开始数据分析师培训,此次培训课程共10天内容,包括Excel、MySQL、概率论与数理统计、SPSS等内容, ...
2024-05-01从实际的业务需求出发,结合行业的典型应用特点,围绕实际的商业问题,探讨数据挖掘、机器学习模型在金融领域的应用,包括获客、信用评分、细分画像、交叉销售、反欺诈、违规识别、时序预测、运筹优化、流程挖掘九个方面,形成 ...
2024-05-01本次培训课程为线上+线下的模式,由于学员编程能力不一、部分学员没有编程基础,故提供统计学、python基 ...
2024-05-01华夏银行信用卡中心-机器学习培训 1、课程亮点 取材于业界一流企业和顶级咨询公司的行业实践;已经被证明是人人 ...
2024-05-01主 题:数据中台建设及数据分析应用主题分享 1. 数据中台市场洞察 2. 主流数据中台产品比较 3. 某企业数据中 ...
2024-05-01围绕“数据驱动”战略,全力打造我行 300 人数字化人才梯队,着力培养数字化管理人才、大数据专业团队 ...
2024-05-01在当今数据驱动的商业环境中,数据分析成为了企业决策的重要依据。通过对大量数据的收集、处理和分析,企业能够更好地理解市场 ...
2024-04-29在人工智能(AI)的世界里,提示词(Prompt)是一种强大的工具,它能够引导AI按照用户的需求产生特定的输出。本文将深入探讨AI ...
2024-04-29CDA立足未来职场,拓展前沿视野——对外经贸大学保险学院举办“三全育人大讲堂”分享行业最新动态。 ...
2024-04-294月2日,CDA数据分析师创始发起人兼协会理事长赵坚毅博士受邀在浙江万里学院举办了一场以“数字化能力在职场中的作用” ...
2024-04-29随机森林(Random Forests)现在机器学习中比较火的一个算法,是一种基于Bagging的集成学习方法,能够很好地处理分类和回归的问 ...
2022-12-23方差分析是数据分析中常用的一种统计分析方法,接下来让我们简单了解一下方差分析的基本思想和原理吧。 方差分析(Analysis ...
2022-12-23来源:关于数据分析与可视化 关于streamlit-aggrid 数据排序 表格样式的调整 数据 ...
2022-08-03作者:麦叔 定义 「把上面晦涩的概念汇成一句话就是:」 ❝ 回调函数就是一个被作为参 ...
2022-08-03现今,高学历人群日益增多,物以稀为贵的高学历光环淡去。无论本科生还是研究生,甚至博士生,求职竞争力都大不如前,就业压力越来越大。
2022-06-01某家企业10个人面试,有9个本科生……如何脱颖而出,除得体的举止和良好的沟通力外,证书成重要筹码,这也是很多人考证的关键所在。
2022-04-14