京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据时代到来:传统IT架构成掣肘
尽管周围对大数据的好处仍然描绘得多么天花乱坠,但不得不说,当前指导数据架构的理念体系其实已经过时了。如今大数据的情形已在近期发生了极大的改变。
在如今科技快速发展的时代,较之以往企业已经能够以更快的速度和更低的成本来获取和储存大量的数据。有人甚至认为,科技很快就能让大数据分析变得“像使用Excel一样容易”。在其他如潮水般涌起的革命性数据科学当中,最令人感到兴奋的莫过于能够实时掌握消费者和物联网的动态,但是,这恐怕容易使得企业陷于另一种困境。
日本信息通信技术(ICT)企业美国公司首席信息官尼尔·贾维斯(Neil Jarvis)表示:“企业已经知道他们能够越来越容易地获取和储存大量自身业务和世界范围内产生的数据。而所谓公司的麻烦是指,该如何正确利用这些数据——判断出哪些才是相关的、有用的,哪些是需要过滤掉的。最重要的是,哪些才是有助于推动业务发展的。”
因此,思想转变的第一步应是观察数据的方式。如今数据不再是一种静态的可支配资源,其意义不再像以往那样局限于一种单一的目的,而是或许已经成为延伸至多种功能用途的数据处理了。作为一种可再生资源,其价值的衡量不应是视其底线而定,而是应该将其视为一种不仅能带来价值增长,而且能够提供价值增长的机会的资产。数据作为商业的一种原材料也和其他生产的原材料一样,正是它能够被应用于各种各样的领域而使得其价值超越了作为原始产品本身。
以IBM近期对从美国本田汽车公司和太平洋电力公司收集而来的数据的应用为例,最初,太平洋煤气电力公司收集数据是为了管理其服务的稳定性,而本田收集电动汽车的数据是为了提高经营效率,但是,IBM则能够将两者建成数据集并整合成一个数据系统,通过这个系统,本田的车主能够从中掌握何时何地需要为汽车充电的节奏,能源供应商则能够对电力负荷进行相应的调整。
云计算公司Replicon联合创始人兼CEO Raj Narayanaswamy指出:
“今天,每一个行业和企业都面临着将数据转化为明确的成果的艰巨任务。数据的指数级增长意味着,每一个组织都极其有必要去建立合适的体系结构来使得数据的利用达到最大化。获得成功的关键是建立一个全面的数据产业价值链,包括数据发掘、集成和评估,而不是按照传统的做法部署以应用程序为中心的模式。”
对于一个企业来说,理解数据集成的重要性是创造新的价值的前提。假若对数据的理解仍然维持在单一和特定用途的层面,那么在数据开发过程中容易出现缺乏灵活性、信息不全面的情况,在利用数据开发未来机遇方面,组织或将会陷于被动的境地。而成功的例子的则要数亚马逊和Salesforce了,这两家公司借助策略性的数据管理方式而在短期内获得了规模式的增长。
数据应用的周期或许可以划分为七个步骤:发现、获取、加工、帅选、集成、分析和揭露。其中每一个步骤都至关重要,每一个有效用的策略也许都是建立在由上述七个步骤组成的数据体系之上的。云计算公司LiasonTechnologies的首席执行官Bob Renner对此作出了总结性分析:
“人们大部分的注意力(市场价值观)都放在了分析和结果量化的最后阶段——蕴藏着商务决策的阶段。这也确实是数据分析在历经万难之后最终的价值所在。但是,没有了前面的准备步骤,我们也不可能一步登天地就能在最后一步获得想要的结果。事实上,在开始使用分析算法来对数据进行解读之前,数据科学家都要花费大量的时间进行数据清理,以保证数据的质量。”
良好的数据科学离不开高质量的数据资料和管控数据质量的必要步骤,尤其是往往遭到忽视的数据集成。通常来说,有价值的大数据都是在这一个步骤里发现的。如果组织在一开始就以另一种心态(非如今固化的理念)来着手数据管理,他们就能够在控制成本和效用上掌握主动权。
大数据需要一个独特的基础,正如数据分析公司Green House Data的首席技术官科特妮·汤普森(Cortney Thompson)所言:“大数据可能意味着你需要大幅修正自家的IT基础设施,传统IT的配置并不能支持大数据。”据悉,有些公司会为了实现质的飞跃而新任命一名数字业务总监。而一个优秀的数字业务经理需要知道如何确保将那些非结构化的数据转化为可操作的信息材料。
那么,我们将如何可以从当前宣传大于实用的状况中获得突破呢?首先,如前文所述,充分理解大数据应用完整的操作周期,做到不忽视任何一个步骤的重要性,然后从传统的以应用为中心的传统思想中解放出来,建立灵活的、可持续利用的数据分析框架。“数据驱动的发现从根本上改变了我们工作和生活的方式,而那些掌握了大数据应用的人可以说是掌握了一项和同龄人竞争的优势。”(《大交易:市场回报最大化的简单策略》彼得·范)
那些在大数据技术迸发时期就获得了巨大利益价值的组织,他们不仅关注那些外界一直在炒作的功能,而且对想要实现的营收、利润以及其他业务成果都投入了认真的思考。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据驱动决策的浪潮中,数据挖掘与数据分析是两个高频出现且极易被混淆的概念。有人将二者等同看待,认为“做数据分析就是做数 ...
2026-04-01在数据驱动决策的时代,企业与从业者每天都会面对海量数据——电商平台的用户行为数据、金融机构的信贷风险数据、快消品牌的营销 ...
2026-04-01在数字化转型的浪潮中,企业数据已从“辅助运营的附属资源”升级为“驱动增长的核心资产”,而一套科学、可落地的企业数据管理方 ...
2026-04-01在数字化时代,每一位用户与产品的交互都会留下可追溯的行为轨迹——电商用户的浏览、加购、下单,APP用户的注册、登录、功能使 ...
2026-03-31在日常数据统计、市场调研、学术分析等场景中,我们常常需要判断两个分类变量之间是否存在关联(如性别与消费偏好、产品类型与满 ...
2026-03-31在CDA(Certified Data Analyst)数据分析师的职场实战与认证考核中,“可解释性建模”是核心需求之一——企业决策中,不仅需要 ...
2026-03-31多层感知机(MLP,Multilayer Perceptron)作为深度学习中最基础、最经典的神经网络模型,其结构设计直接决定了模型的拟合能力、 ...
2026-03-30在TensorFlow深度学习实战中,数据集的加载与预处理是基础且关键的第一步。手动下载、解压、解析数据集不仅耗时费力,还容易出现 ...
2026-03-30在CDA(Certified Data Analyst)数据分析师的日常工作中,“无监督分组、挖掘数据内在聚类规律”是高频核心需求——电商场景中 ...
2026-03-30机器学习的本质,是让模型通过对数据的学习,自主挖掘规律、实现预测与决策,而这一过程的核心驱动力,并非单一参数的独立作用, ...
2026-03-27在SQL Server数据库操作中,日期时间处理是高频核心需求——无论是报表统计中的日期格式化、数据筛选时的日期类型匹配,还是业务 ...
2026-03-27在CDA(Certified Data Analyst)数据分析师的能力体系与职场实操中,高维数据处理是高频且核心的痛点——随着业务场景的复杂化 ...
2026-03-27在机器学习建模与数据分析实战中,特征维度爆炸、冗余信息干扰、模型泛化能力差是高频痛点。面对用户画像、企业经营、医疗检测、 ...
2026-03-26在这个数据无处不在的时代,数据分析能力已不再是数据从业者的专属技能,而是成为了职场人、管理者、创业者乃至个人发展的核心竞 ...
2026-03-26在CDA(Certified Data Analyst)数据分析师的能力体系中,线性回归是连接描述性统计与预测性分析的关键桥梁,也是CDA二级认证的 ...
2026-03-26在数据分析、市场研究、用户画像构建、学术研究等场景中,我们常常会遇到多维度、多指标的数据难题:比如调研用户消费行为时,收 ...
2026-03-25在流量红利见顶、获客成本持续攀升的当下,营销正从“广撒网”的经验主义,转向“精耕细作”的数据驱动主义。数据不再是营销的辅 ...
2026-03-25在CDA(Certified Data Analyst)数据分析师的全流程工作中,无论是前期的数据探索、影响因素排查,还是中期的特征筛选、模型搭 ...
2026-03-25在当下数据驱动决策的职场环境中,A/B测试早已成为互联网产品、运营、营销乃至产品迭代优化的核心手段,小到一个按钮的颜色、文 ...
2026-03-24在统计学数据分析中,尤其是分类数据的分析场景里,卡方检验和显著性检验是两个高频出现的概念,很多初学者甚至有一定统计基础的 ...
2026-03-24