大数据行业信息图以及一些思考
从我第一次尝试为繁荣发展的大数据生态系统绘制一张信息图已经过去了两年, 而这期间大数据行业发生了很多巨大的变化。 我早就该对这张图做一个更新,现在终于完成了。
从 VC 的角度,我想谈谈对这张图以及大数据行业的一些想法:
越来越拥挤:创业者们蜂拥至这个行业, VC 们将大笔的资金投资到看起来有机会成功的创业公司,其结果是,这个行业正变得越来越拥挤。 一些类别如数据库(不管是NoSQL还是NewSQL)和社交媒体数据分析正趋于成熟,且开始出现并购或者淘汰出局(Twitter 对BlueFin和GNIP的收购可能意味着在社交媒体数据分析领域这种趋势早已经开始了)。
对于后来者来说, 虽然空间依然存在,但看起来早期的大笔风投资金都下注在基础设施(infrastructure)和分析(analytics)领域,导致成功的标准变得越来越高。 不过, 这并不意味着 VC 的资金会停止流入这些领域。
对于一些领域,公司的数量之多显然已经达到了一张地图所能容纳的上限。 我相信还有一些不错的公司我们没能纳入进来,也许是我们没有发现,也许是因为地方不够了, 我在此表示非常抱歉, 同时我也希望大家在评论里对于应当纳入那些公司提出反馈和意见。
尚处在早期阶段: 总体而言,这个市场还处在发展的早期阶段。 过去几年, 一些被看好的公司失败了(如Drawn to Scale),一些公司的创业者提前退出了 (例如Precog、Prior Knowledge、Lucky Sort、Rapleaf、Nodeable、Karmasphere等 ),还有一些的结局稍好 (例如Infochimps、Causata、Streambase、ParAccel、Aspera、GNIP、BlueFin labs、BlueKai)。
与此同时,一些公司看起来正越做越大,并获得大笔惊人的风投注资(比如MongoDB已经融资超过 2.3 亿美元, Palantir融资近 9 亿美元, Cloudera近 10 亿美元。一些大公司正积极出击进行并购(Oracle 收购 BlueKai, IBM 收购Cloudant),但是总体而言,多数公司离成功实现 IPO 和投资者功成身退还差的很远(虽然Splunk和Tableau做到了)。 在很多类别,创业公司和大公司互相竞争,但并没有出现市场领导者。
市场宣传遭遇现实:在经历这些年狂轰滥炸的市场宣传之后,大数据还是焦点么?未来几年,也许大数据不再是媒体的热门,但对于大数据市场而言却是至关重要的, 因为企业将要开始把大数据项目从试验转而全面的部署实施。
虽然这意味着一些大数据提供商的利润会迅猛增长,但同时这些项目也将成为大数据是否能带来它所宣传的价值的一块试金石。与此同时,随着“物联网”行业的迅速崛起,数据将会如潮水般加速增长,进一步推高市场对大数据技术的需求。
基础设施:Hadoop似乎已经奠定了其作为整个大数据生态系统的关键部分,一些竞争者依然虽在, 这一领域也许会进一步发展和整合。 Sprak是另一个的基于 Hadoop 分布式文件系统(HDFS)的开源框架,它试图填补 Hadoop 的弱项,提供更快的的数据分析和良好的编程接口,目前正吸引大量关注(一些迹象显示它做的还不错)。
一些主题(比如实时数据处理)依然是重中之重,同时新的主题也在不断涌现(比如新一代处理、变换、清洗数据的工具,包括Trifacta、Paxata 和DataTamer)。 企业数据是否会真正的放到云里(公共云或私有云),如果是,还有多久才发生,将是另一个大的话题。很多人认为财富 500 公司在接下来的几年来会继续把数据(以及处理数据的软件)放在机房里。一批云服务 +Hadoop 的创业公司则认为长期来看,所有的数据最终都会放到云中。
分析工具:从创业公司和 VC 投资的数量来看,这一领域最为活跃。从 excel 表格式的用户界面,到时间轴动画和 3D 动画, 创业公司提供各种各样的数据分析工具和用户界面,而不同的客户也确实有不同的需求,所以这一领域大概依然有足够的发展空间。
推广产品的策略也不尽相同 — 有些创业公司更针对于数据科学家,这群人目前不多但增长迅速。 另一些则正好相反,他们销售自动化的解决方案给一般商业用户,完全忽略数据科学家的存在。
大数据应用: 正如之前预测的,大数据缓慢但的确朝着应用层面发展。 这张图列出了一些令人兴奋的创业公司——他们本质上都是基于大数据技术和工具(当然我们无法把所有的相关公司都在这里列出来)。一些公司提供横向应用——如基于大数据的营销系统,客户关系管理系统和欺诈甄别解决方案。
金融业和广告科技业一直是大数据推广的领导者和最早的拥趸,甚至早于大数据被称作大数据。慢慢的,大数据推广到各行各业,如医疗行业和生化行业(特别是基因研究领域)和教育行业。现在才刚刚开始。
数据分析咨询请扫描二维码
CDA数据分析师在中国航信高科技产业园进行了面向测试度量的数据分析培训课程,培训人数近2 ...
2024-05-01CDA数据分析师走进深圳迈瑞生物医疗电子股份有限公司,在迈瑞总部展开了为期两天的培训,本次课程参训人员线上及线下近百人, ...
2024-05-01CDA数据分析师在合肥市对合肥阳光新能源科技有限公司开展了为期8天的企业内训。 合肥阳光新能源科技 ...
2024-05-01CDA数据分析师走进海尔大学,进行了《数据治理与数据中台建设的道与术》专题培训,培训现场爆满,近百人参加了此次培训。 ...
2024-05-01在中国银行苏州分行培训中心开始数据分析师培训,此次培训课程共10天内容,包括Excel、MySQL、概率论与数理统计、SPSS等内容, ...
2024-05-01从实际的业务需求出发,结合行业的典型应用特点,围绕实际的商业问题,探讨数据挖掘、机器学习模型在金融领域的应用,包括获客、信用评分、细分画像、交叉销售、反欺诈、违规识别、时序预测、运筹优化、流程挖掘九个方面,形成 ...
2024-05-01本次培训课程为线上+线下的模式,由于学员编程能力不一、部分学员没有编程基础,故提供统计学、python基 ...
2024-05-01华夏银行信用卡中心-机器学习培训 1、课程亮点 取材于业界一流企业和顶级咨询公司的行业实践;已经被证明是人人 ...
2024-05-01主 题:数据中台建设及数据分析应用主题分享 1. 数据中台市场洞察 2. 主流数据中台产品比较 3. 某企业数据中 ...
2024-05-01围绕“数据驱动”战略,全力打造我行 300 人数字化人才梯队,着力培养数字化管理人才、大数据专业团队 ...
2024-05-01在当今数据驱动的商业环境中,数据分析成为了企业决策的重要依据。通过对大量数据的收集、处理和分析,企业能够更好地理解市场 ...
2024-04-29在人工智能(AI)的世界里,提示词(Prompt)是一种强大的工具,它能够引导AI按照用户的需求产生特定的输出。本文将深入探讨AI ...
2024-04-29CDA立足未来职场,拓展前沿视野——对外经贸大学保险学院举办“三全育人大讲堂”分享行业最新动态。 ...
2024-04-294月2日,CDA数据分析师创始发起人兼协会理事长赵坚毅博士受邀在浙江万里学院举办了一场以“数字化能力在职场中的作用” ...
2024-04-29随机森林(Random Forests)现在机器学习中比较火的一个算法,是一种基于Bagging的集成学习方法,能够很好地处理分类和回归的问 ...
2022-12-23方差分析是数据分析中常用的一种统计分析方法,接下来让我们简单了解一下方差分析的基本思想和原理吧。 方差分析(Analysis ...
2022-12-23来源:关于数据分析与可视化 关于streamlit-aggrid 数据排序 表格样式的调整 数据 ...
2022-08-03作者:麦叔 定义 「把上面晦涩的概念汇成一句话就是:」 ❝ 回调函数就是一个被作为参 ...
2022-08-03现今,高学历人群日益增多,物以稀为贵的高学历光环淡去。无论本科生还是研究生,甚至博士生,求职竞争力都大不如前,就业压力越来越大。
2022-06-01某家企业10个人面试,有9个本科生……如何脱颖而出,除得体的举止和良好的沟通力外,证书成重要筹码,这也是很多人考证的关键所在。
2022-04-14