中国工程院院士李德毅：聚类成大数据认知突破口 -CDA数据分析师官网

热线电话：13121318867

中国工程院院士李德毅：聚类成大数据认知突破口

2015-04-14

中国工程院院士李德毅：聚类成大数据认知突破口

4月9日，由工业和信息化部、深圳市人民政府主办，中国电子信息产业发展研究院、中国电子报社协办的新一代信息技术产业发展高峰论坛在深圳会展中心举行。中国工程院院士李德毅在发言中指出，大数据作为网络时代的一种客观存在，是网络时代人类社会的重要资产，尽管目前对于大数据的认知存在挑战，但聚类将会成为大数据认知的突破口。
大数据用传统工具
难以认知
李德毅表示，大数据标志着一个新时代的到来，这个时代的特征不只是追求丰富的物质资源，也不只是无所不在的互联网带来的方便的多样化信息服务，同时还包含区别于物质的数据资源的价值发现和价值转换，以及由大数据带来的精神和文化方面的崭新现象。
李德毅进一步指出，大数据来源于人类的测量、记录和分析世界的渴望和无尽的追求。随着信息技术，尤其是传感器、通信、计算机和互联网技术的迅猛发展和广泛应用，人类获取数据的手段越来越多，速度大大加快、成本急剧降低，层次和尺度更为精细，揭示自然现象和社会现象更加深刻，人联网和物联网又使得人人物物都成为数据源，这样一来，大数据将成为网络时代人类社会的重要资产。
在李德毅看来，大数据本身既不是科学，也不是技术。它反映的是网络时代的一种客观存在，各行各业的大数据，规模从TB到PB到EB到ZB，都是以3个数量级的阶梯迅速增长，是用传统工具难以认知的、具有更大挑战的数据。
在数据密集型的网络时代，任何传统的“学科”或“行业”的公理、原理和定理组合而成的语境，遇到“互联网+”的挑战，这样一来，“学科”和“行业”拓展成为交叉学科或者“四不像”行业，是“大数据，小模型、小定律、交叉学科”的时代，模型和程序要围绕数据转。
李德毅认为，大数据时代数据量巨大、价值密度低，实时在线，多源异构、混杂敏捷、呈现复杂多样的数据集合，需要跨媒体关联，难以在单机计算架构上聚类，必须依托云计算，进行并行/分布式处理。
聚类成为
发现大数据价值第一步
李德毅在演讲中指出，尽管大数据在认知上具有挑战性，但是聚类将会成为大数据认知的突破口。“物以类聚，人以群分”，是人类几千年来认识世界和社会的基本能力，是从大数据中发现价值必须面对的一个普遍性、基础性问题，是认知科学作为“学科的学科”要解决的首要问题。认知科学要有所突破，首先要在大数据聚类上突破。