大数据如何“智”领革新_数据分析师培训

每天，上百万兆字节数据通过全世界各个角落的传感器、移动设备和社交网络喷涌而出；每个月，10 亿条 Twitter 信息和300 亿条 Facebook 信息催生网络拥堵_——在如今这个“大数据”时代，一颗“数据炸弹”已经引爆！

IBM在 2011 年度信息随需应变论坛（Information on Demand Forum，简称IOD论坛）上宣布推出全新的面向不同工作场景的大数据管理和分析软件及解决方案，可覆盖从移动设备、数据中心，到IBM SmartCloud 云计算平台等多个平台；凭借其处理不同种类大数据和进行商业分析的技术能力，这些软件和解决方案能够帮助广大客户从容应对大数据时代的挑战。值得一提的是，IBM还同期在苹果iTunes Store上推出免费应用软件（App）下载，帮助广大金融服务、卫生、政府、传媒、营销传播、零售以及旅游运输等重要行业的专业人士随时随地进行商业分析，并从中获取价值。

IBM全球高级副总裁兼软件集团及系统与科技部总经理Steve Mills 先生表示：“在‘大数据’时代，企业和机构面临诸多挑战：如何高效集成软件、硬件、解决方案等各种现有资源，更为有效地处理迅速激增数据？如何利用分析预测商业趋势、获取深刻洞察，从而把握激烈竞争中的主动权？如何简化流程、降低成本，通过最为便捷快速的方式创造最大价值？在这个瞬息万变的时代，新技术的出现不断带来新的可能性——我们相信，IBM此次推出的全新大数据管理和分析软件及解决方案就是为客户带来全新可能性、制胜‘大数据’时代的前沿技术。”

IBM：积极推进“大数据”时代革新

这是一个不折不扣的“大数据”时代：每天，遍布世界各个角落的传感器、移动设备、在线交易和社交网络生成上百万兆字节的数据；每个月，人类发布 10 亿条 Twitter 信息和300 亿条 Facebook 信息；据统计，全球 90% 的数据都是在过去两年中生成的；而全世界在用的移动设备共计共有一万亿台，预计到 2016 年，全球的移动商务市值将达到310 亿美元。在信息爆炸时代，不同规模的企业和机构都在奋力追赶“大数据”发展的速率和步伐，期待通过对大数据的有效运用，改善自身的产品和服务，从而提升客户和受众的体验。

2011 年的《IBM - 麻省理工斯隆管理学院评论》（IBM/MIT Sloan Management Review）显示：在对全球 100 个国家及地区从事 30 个行业的 3000 名高管进行的调查中，有60% 的受访者表示无法有效利用所有数据。而近期 IBM 对 64 个国家及地区从事 19 个行业的 1700 名首席营销官开展的最新调查更是进一步体现了出这个问题的严峻性：调查结果显示，71% 的首席营销官表示他们的企业没有做好充分准备来应对数据的大爆炸。

为了帮助企业应对这些挑战，IBM 推出了全新的信息管理、业务分析产品以及技术资源，方便用户轻松探索和利用大数据：

• 全新的云端 Hadoop 分析软件InfoSphere BigInsights可以在 30 分钟内安装完毕、投入运行。新软件能帮助员工挖掘大量来自社交网络、移动设备和传感器等不同来源的非结构化数据；

• 针对 iPad 用户推出的全新移动分析应用软件Cognos Mobile可以随时发现和搜索到任何类型的数据，并具备定位分析功能；

• 拥有映射功能的全新预测分析软件SPSS Statistics 20.0可应用于众多行业，特别是对市场营销活动、零售店分配、犯罪预防和学术评估进行分析预测；

• 全新InfoSphere Information Server 8.7可在后台筛选所有类型数据，并按照数据质量级别进行排列，有效维护数据安全，为商业决策提供可靠依据；

云端大数据分析：InfoSphere BigInsights

在 IBM SmartCloud Enterprise 企业云计算平台上运行的 IBM InfoSphere BigInsights 使客户机构内部的任何用户均可访问大数据分析功能。与本地版本一样，云端版 BigInsights 既可以分析数据库中的传统结构化数据，也可以分析例如文本、视频、音频、图像、社交媒体、点击流、日志文件、天气数据等非结构化数据，帮助决策者根据数据迅速采取行动。将大数据分析带上云端，就意味着客户即便没有任何 Hadoop 技能，不用安装、运行或维护硬件和软件，也可以捕捉和分析任何数据。

云端版 BigInsights 提供基础版和企业版，并且可以选择公共、私有和混合云进行部署。其中，BigInsight的基础版是一款免费的入门级产品，可帮助用户了解如何进行大数据分析，包括使用 BigSheets 组件进行“假设”（What If）的情景分析。做好准备后，客户可以无缝迁移至企业版，在半个小时内内设置 Hadoop 群集，并开始分析数据。这两个版本都包括开发人员测试环境，客户可使用该测试环境开发出新一代商业分析应用程序以及相关工具和测试开发环境。

如今，银行、保险、零售、传播和数字化娱乐业的市场领先企业都在使用基于云的BigInsights对大量非结构化数据进行分析。这些行业用户通过分析来自社交网络、传感器、移动设备、日志文件以及声音和视频系统的数据，了解消费者的意见，同时确保运算网络和智能网格的安全性，开发出全新的客户体验程序。

希望拓展 Hadoop 技能的 IT 专业人士和学生还可以利用 IBM 推出的新网站 BigDataUniversity.com，了解 Hadoop、流式计算、开源软件开发的基础知识，同时学习到数据库管理技巧，从而为其储备更多成为数据科学家的知识和经验。网站上有数百个简单易用的教程、视频和编码练习，适于培养 Hadoop、BigInsights、DB2 和 WebSphere 的相关技能，大多数课程为免费提供。目前，已经有来自巴西、俄罗斯、中国、印度、韩国、南非和美国等全球各地的国家的 8000 余名学生在网站注册。

随时随地进行分析：Cognos Mobile

IBM 凭借iPad版 IBM Cognos Mobile 拓展了对移动设备的支持，继续为新时代的专业人是提供更为先进的业务分析技术。用户目前可以在苹果iTunes Store（http://bit.ly/r68A04）免费获取。该应用可支持移动工作者随时离线或在线进行商业分析，无需因为地域的变化而中断工作。iPad 用户可以因此享受丰富的商业情报可视化体验，分析报表、仪表盘和记分卡上销售、用户和财务数据在内的各类业务数据。

这种全新移动应用能够帮助金融服务、卫生、政府、传媒、营销传播、零售以及旅游运输等重要行业的专业人士随时随地进行商业分析，并从中受益。例如，医疗工作者可利用其分析电子病历，向患者展示个性化治疗计划并根据分析结果制定医疗步骤；社会工作者可以查看全市寄养家庭儿童的健康和生活质量，并实时向监督员、警察和法院提供有关其状况的更新信息；银行人员和保险代理人则可以将软件用于分析贷款或政策数据，以便为客户创建定制化的产品或服务。

辛辛那提动物园是全美历史最悠久的动物园之一，每年接待游客达120多万。利用 iPad 版 Cognos，辛辛那提动物园实现了管理平台即时访问功能，并通过游客和商务信息单一视图开辟新财源、增加会员游览次数。移动商务分析的灵活性使管理人员得以将游客数据和园内销售数据集中到 iPad 上，在园区内任意地点进行访问，以便跟踪游客购买数据并据此调整营销模式和资金投入。通过使用 Cognos 软件，辛辛那提动物园在今年成功将游客的园内消费提升了25%。

将预测性分析融入地图：SPSS Statistics 20.0

在今年IOD论坛上，IBM 还宣布推出一款用于支持企业及组织获取地理数据的情报预测新软件SPSS Statistics 20.0。通过该软件，企业及组织能够更加有效地解读数据、分析趋势、进行预测和规划、验证假设，从而获得准确的结论。

SPSS Statistics 20.0 统计软件包括新的映射功能，使用户能够添加地理维度，进行分析和报告，并且允许用户按照地理区域进行定向、预测和规划。该映射功能可在众多行业中用于分析数据和创建统计数据，以提升营销活动的成效、确定零售店选址、探查犯罪热点，还可供学生进行测验成绩评估。软件自带美国以及其他各国、各大洲的视图和预制地图模板，用户可迅速向地图中添加数据，包括来自 ESRI 文件的地理空间信息。

利用该款新软件，卫生组织可以更加直观地监测事故或疾病高发区域，也可识别一个州或整个国家范围内多个地区的护理情况差异。政府职员可以按照城区或人口密集度分类来分析过去和现在的人口普查数据；找出犯罪高发区域以加强执法；或更新税费和进行分区变更。直销商可以定位其最具价值的客户群和商店位置，以分配广告资源，而学术界则可利用该软件从地域角度确定招生和组织校友方面的工作重点。

加快大数据治理：InfoSphere Information Server 8.7

对于大数据的分析能力是企业构成竞争优势的关键。众所周知，分析结果的质量取决于原始数据，同时必须确保数据管理人员能够及时访问数据。作为目前唯一一家针对大数据提供市场领先的信息集成和治理平台的厂商，IBM 提供的平台可确保企业内的商业用户和各应用端获得可靠的信息。

全新 IBM InfoSphere Information Server 8.7 软件支持将大数据作为来源和目标进行整合。Information Server 凭借其成熟可靠的性能和并行引擎，可提供大数据所需的强大可扩展性。同时，IBM 还宣布推出旨在实现均衡优化和卓越性能的新一代 Netezza 连接器，该连接器专门与 Netezza 配套使用，其操作控制台可查看所有集成任务系统使用情况，从而提升集成项目的生产率。

全新 IBM InfoSphere Master Data Management 10 软件将 IBM 市场领先的 MDM 功能合并到单一产品中，可满足任何 MDM 要求。新特性包括与 Business Process Management 商业过程软件集成，可用于 MDM 导向的商业流程；通过自适应性服务界面提升了与消费应用程序的连接性；以及一个维持唯一事实版本的共享匹配引擎。MDM 技术使用户更深入地理解顾客、产品、供应商、员工和客户，方便进一步分析，因此改善了大数据分析的成果。

IBM 大数据管理及分析技术助力全球客户

目前已有数千家新客户正在转到 IBM的数据解决方案，以便从最广泛的大数据中获取可执行的洞见。无论是收集数据以管理风力发电场的布局，还是在社交媒体网站上评估客户的意见抑或预测医院的潜在致命感染，IBM 都可以帮助各行各业的客户将其数据价值不断延伸：

• 丹麦能源公司 Vestas Wind Systems 通过使用 IBM 大数据软件分析拍字节级别的天气数据，改善风力涡轮机的放置位置，从而获得最佳能量输出效果——以前需要数周方可完成的分析现在仅需不到一个小时；

• XO Communications 公司使用 IBM SPSS 预测性分析软件后，将客户流失率降低了将近 50%。该公司得以预测客户行为、发现趋势，并识别可能转移到其他运营商的客户，从而采取相应措施，稳定客户群；

• [x+1] 是一家端到端数字化营销平台提供商，该公司正在使用IBM Netezza 数据仓库实时分析海量的广告数据，帮助其客户实现了 20% 的数字化销售增长；

• 全球最大的广告公司之一奥美正使用 iPad 版 IBM 分析软件帮助员工分配资源、跟踪使用率，并随时发现新的财源；

此外，赫兹公司、培根学院、瑞典皇家理工学院、爱尔兰海洋学会、Technovated 公司、TerraEchos 公司、安大略理工大学和瑞典乌普萨拉大学等众多客户均在通过 IBM 业务分析解决方案应对不断增加、高速流通且种类繁多的大数据，并将之用于制定可以改变其所在行业的决策。