京公网安备 11010802034615号
经营许可证编号:京B2-20210330
如何让大数据好看又实用
现如今,每个人都在谈论大数据,但很大程度上是由于其挥之不去的复杂性,故而,企业真正对于大数据的采用率仍然相对较低。事实上,在最近的一项针对大数据从业者的调查发现,只有百分之十三的企业对于大数据已经实现了全方位的应用。
这一比例无疑是非常小的。
Zoomdata 公司首席执行官Justin Langseth在接受采访时告诉我说,当谈到大数据时,其设计与性能其实同样重要。事实证明,“大”数据如若不能转化为“有用的”数据的话,也没有多大意义。
大数据的小成功
大数据革命最好的特点之一是其由于有了零成本的开源软件变得更强大。而商务智能一直受困于复杂而价格昂贵的软件,但在今天,最具创新性的大数据技术仅仅只需一个下载即可获得。
至少,理论上是这样的。
但在实践中,任何曾试图下载过Hadoop的人都可能会告诉你说,其是否奏效要“看人品”。当Cloudera的联合创始人迈克·奥尔森宣称,“在过去的十年里,没有任何一款占主导地位的平台级软件基础架构是在封闭源代码,专有的形式下兴起并发展起来的。”他是绝对正确的,包括像Hadoop,MongoDB,Spark及Cassandra等最佳的数据基础设施。
但占据主导并不一定意味着容易。
根据凯捷的一项调研显示,其受访者中,只有27%的受访者认为他们所在企业的大数据项目是“成功的”;而只有8%的受访者将其大数据项目描述为“非常成功”。即使有概念证明项目陷入困境,成功率也只有38%。
有些问题很难从人们所部署的技术中分离出来,包括“处理分散的筒仓数据,分析计划协调不力,缺乏清晰的商业案例以支撑大数据,以及依赖于传统遗留的系统来处理和分析大数据”。
但所有这些最终都将归结为将大数据的承诺转化为企业充分利用大数据分析技术能力的困难程度。
大数据的设计也是相当重要的。Langseth告诉我说,他在Zoomdata公司所雇用的首批员工之一,是来自纽约的著名爵士乐Blue Note Records唱片公司,且屡获殊荣的专辑封面设计师。(想象一下John Coltrane,Thelonious Monk,Sonny Rollins,等等的专辑封面均出自他们之手)。
是的,一名曾经的专辑封面设计师现在正在设计大数据系统——而在Zoomdata公司的大数据项目设计团队雇佣这种背景的设计师更多的是规则而不是例外。显然,Zoomdata公司有着其不同的大数据方法。当我问Langseth如何以简洁的观点来提炼这种以设计为中心的方法时,他说,这可以归结为三个主要方面:
1、自上而下的授权委任。首先,必须要有来自企业高层的授权委任,以推动建设一款以设计驱动的应用程序的任务。这对于企业技术来说是非常罕见的。
托尼·法戴尔,iPod的“设计之父”之一,就显示出了优秀的设计如何有助于消费类产品的原理,如苹果公司的iPod,及其后来加盟的Nest公司,乃至现在的谷歌。史蒂夫·乔布斯是苹果公司具有前瞻性的标志性的领导。而托尼曾在史蒂夫的领导下工作,并把这种观点带到了Nest公司,以及谷歌。
尽管这在面向消费者的技术领域获得了成功,但几乎没有经企业领导授权成功开发企业软件这方面的例子。这就是为什么大多数企业软件均不乐观的原因所在了。
2、设计人员占员工数量的比例。Langseth还强调,企业需要将以设计为中心的理念纳入到自己的招聘中。也就是说,企业必须让其UX设计师在开发人员中占据一定的比例,以便能够影响企业的以设计为中心的任务。
Zoomdata公司,旨为在让团队中开发人员与设计人员的比例达到5比1。而在大多数的企业软件公司,这一比例则接近50比1。所以这也可以说是大多数软件企业的用户体验是如此糟糕的一个主要的原因——包括大数据,这毕竟是一个开发人员所推动的趋势。
3、定期让普通员工参与测试。Langseth的第三条建议是,整个UX团队必须定期让一般的普通员工参与进来,而不仅进只是让分析专家执行可用性测试。极客们固然非常擅长开发软件,但这真正关系到的是企业的项目运行,所以必须让主流用户能够充分理解并领会。
Langseth指出:
这能够使我们的应用程序更易于为大街上任何一个普通人随意使用,他们可能熟悉诸如Excel等软件,但可能并不是一位商务智能分析专员。从战略的角度来看,这让我们的应用程序能够面临更广泛的受众,而不仅仅只是关注于少数专家。
这是至关重要的。最终,大数据必须要当它能够适用于所有形式时才是真正可用的。数据专家Peter Goldmacher在一点年前就提出这样的观点。他说,在大数据领域,最大赢家是那些构建了易于使用的应用程序的企业。
设计人员也是开发人员
同时,企业需要了解开发人员毕竟比不上最优秀的设计师,Zoomdata希望公司的设计师了解如何编程。Langseth坚持认为,“所有的优秀的艺术家和设计师均要熟悉他们向外界传达艺术的媒介。举例来说,一个好画家肯定会自己调配颜料,并自己建画布。”
这意味着,她/他知道自己向外界传达艺术的媒介的局限性在哪里,以及如何更好的表达艺术。Zoomdata并不希望自己的设计师与开发人员不能很好的沟通,所以他们必须熟悉代码。
为我们其余的人设计
同样重要的是,使用程序语言运行大量的研究测试。Langseth建议,关键的一点在于“一定要避免在其中使用特定行业的专业术语,诸如Hive或Pig的细微差别?”千万不要!大数据项目的最终目标是成为民主化企业的数据资产,这意味着其必须为那些一般性的员工使用,而非核心数据科学家或分析师。
这应该是其最终的落脚点。大数据想要真正获得长足发展,就需要成为不仅仅只是数据科学家的工具。Gartner分析师Svetlana Sicular指出,“要让学习Hadoop比学习公司的业务更容易。”
至少,其应该是这样。但问题在于企业需要的是那些学会了Hadoop的人能够将其翻译成企业一般员工熟悉的业务语言。微软正在试图做到这一点,就像Zoomdata正在试图将非结构化数据从NoSQL数据库、Hadoop等等提取出来一样。
虽然大数据项目的设计并不是实现这一目标的唯一因素,但这其也是相当关键的组成部分,而大多数企业忽视了这一重要组成部分。这也可以说是大数据项目不断失败的一大原因。为了将大数据项目做到更好。专注于大数据的设计,可以提供帮助。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在神经网络模型搭建中,“最后一层是否添加激活函数”是新手常困惑的关键问题——有人照搬中间层的ReLU激活,导致回归任务输出异 ...
2025-12-05在机器学习落地过程中,“模型准确率高但不可解释”“面对数据噪声就失效”是两大核心痛点——金融风控模型若无法解释决策依据, ...
2025-12-05在CDA(Certified Data Analyst)数据分析师的能力模型中,“指标计算”是基础技能,而“指标体系搭建”则是区分新手与资深分析 ...
2025-12-05在回归分析的结果解读中,R方(决定系数)是衡量模型拟合效果的核心指标——它代表因变量的变异中能被自变量解释的比例,取值通 ...
2025-12-04在城市规划、物流配送、文旅分析等场景中,经纬度热力图是解读空间数据的核心工具——它能将零散的GPS坐标(如外卖订单地址、景 ...
2025-12-04在CDA(Certified Data Analyst)数据分析师的指标体系中,“通用指标”与“场景指标”并非相互割裂的两个部分,而是支撑业务分 ...
2025-12-04每到“双十一”,电商平台的销售额会迎来爆发式增长;每逢冬季,北方的天然气消耗量会显著上升;每月的10号左右,工资发放会带动 ...
2025-12-03随着数字化转型的深入,企业面临的数据量呈指数级增长——电商的用户行为日志、物联网的传感器数据、社交平台的图文视频等,这些 ...
2025-12-03在CDA(Certified Data Analyst)数据分析师的工作体系中,“指标”是贯穿始终的核心载体——从“销售额环比增长15%”的业务结论 ...
2025-12-03在神经网络训练中,损失函数的数值变化常被视为模型训练效果的“核心仪表盘”——初学者盯着屏幕上不断下降的损失值满心欢喜,却 ...
2025-12-02在CDA(Certified Data Analyst)数据分析师的日常工作中,“用部分数据推断整体情况”是高频需求——从10万条订单样本中判断全 ...
2025-12-02在数据预处理的纲量统一环节,标准化是消除量纲影响的核心手段——它将不同量级的特征(如“用户年龄”“消费金额”)转化为同一 ...
2025-12-02在数据驱动决策成为企业核心竞争力的今天,A/B测试已从“可选优化工具”升级为“必选验证体系”。它通过控制变量法构建“平行实 ...
2025-12-01在时间序列预测任务中,LSTM(长短期记忆网络)凭借对时序依赖关系的捕捉能力成为主流模型。但很多开发者在实操中会遇到困惑:用 ...
2025-12-01引言:数据时代的“透视镜”与“掘金者” 在数字经济浪潮下,数据已成为企业决策的核心资产,而CDA数据分析师正是挖掘数据价值的 ...
2025-12-01数据分析师的日常,常始于一堆“毫无章法”的数据点:电商后台导出的零散订单记录、APP埋点收集的无序用户行为日志、传感器实时 ...
2025-11-28在MySQL数据库运维中,“query end”是查询执行生命周期的收尾阶段,理论上耗时极短——主要完成结果集封装、资源释放、事务状态 ...
2025-11-28在CDA(Certified Data Analyst)数据分析师的工具包中,透视分析方法是处理表结构数据的“瑞士军刀”——无需复杂代码,仅通过 ...
2025-11-28在统计分析中,数据的分布形态是决定“用什么方法分析、信什么结果”的底层逻辑——它如同数据的“性格”,直接影响着描述统计的 ...
2025-11-27在电商订单查询、用户信息导出等业务场景中,技术人员常面临一个选择:是一次性查询500条数据,还是分5次每次查询100条?这个问 ...
2025-11-27