京公网安备 11010802034615号
经营许可证编号:京B2-20210330
数据不在于大小 关键得有价值 各路大咖论剑大数据应用
一场会议不仅来了两位院士,连国际大数据分析大会主席都专门作了主题演讲,只能坐下300人的会议厅连走廊过道都站满了听众……如果利用大数据为本次软博会的分场论坛制作一张热力图的话,昨天下午国展中心的扬子厅一定是颜色最深的那一个。因为这里讨论的是目前被社会各界关注的大数据如何与产业融合创新的问题。
大数据是这两年互联网普及运用带来的一个热词,随着信息爆炸和所有人群电子痕迹的采集,全世界的大数据容量正在以令人难以置信的速度快速增长。据有关方面不完全统计,2004年全球的大数据容量约为30EB(以日常接触的手机内存容量GB为标准,一EB大约等于11亿GB),到2013年这个数字已经是35000EB,而且这一容量每年都在呈几何级数不断增加。对于已经达到这样一个量级的数据究竟该怎么处理,不仅仅是计算机硬件的问题,更是软件和整个解决方案架构的问题。因为只有把这些数据处理好了才能建立运用的基础。
“大数据实际上并不是什么新鲜词,早在上世纪80年代就被美国著名的未来学家托夫勒教授提出了,之所以现在大家对这一名词产生新的关注,是因为数据带来的新问题。”来自浙江大学的中国工程院院士谭建荣教授表示,其实直到目前对于什么是大数据还没有一个专业的定义,最被大家所接受的说法是运用现有技术、现有手段、现有方法没办法处理的数据就是大数据。因此,要解决大数据的运用问题,首先要解决大数据的处理难题。在谭建荣看来,因为现在大家对众多的数据哪些有用哪些没用并不清楚,只有首先做到海量的数据提取,才有可能从中找到有价值的数据。
来自加拿大工程院的凌晓峰院士则认为数据没有大小之分,关键是找到其中的价值。为了便于会场的听众理解,凌院士专门找来一张个人信贷支出的数据,在排除干扰数据后,利用有效数据来提前判定个人信用违约发生的可能性。“如果把这一功能延展,可以在个人饮食、医疗健康等各领域得到充分运用。”凌晓峰院士认为在互联网普及发展的今天,需要一个平台来让各种大数据完成交互,进而形成系统,才能最终实现大数据唱戏的结果。
记者了解到,作为本次软博会确定创建的软件名城示范区,中国(南京)软件谷主导建设的南京大数据产业基地已集聚大数据企业135家,尤其2015年9月南京市大数据产业协会成立后,构建了“协会(联盟)+平台+基地+基金”产业链发展新模式,初具特色的大数据产业体系已基本形成。目前,南京软件谷在大数据产业发展方面已形成了“五大产业集群”,分别是以华为、中兴、步步高等为龙头的通信及智能终端产业集群;以SAP、亚信等为引领的云计算、大数据及移动互联网产业集群;以欧飞、润和等为支柱的电子商务及互联网金融产业集群;以中兴光电子、美满、天溯等为核心的物联网及芯片设计产业集群;以中电十四所、宏图三胞、舜天等为平台的旗舰经济。
成立不到4年的一家大数据处理公司运满满,该平台撮合司机、货主双方在平台上进行对接,汇聚全国95%的货物信息、78%的重卡司机,每日产生TB级的海量数据,包括司机行驶里程、路线、交易行为等大数据沉淀,运用大数据、云计算、人工智能精准车货匹配、计算最佳路径、预测回程配货概率,降低空驶率。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据工作的全流程中,数据清洗是最基础、最耗时,同时也是最关键的核心环节,无论后续是做常规数据分析、可视化报表,还是开展 ...
2026-03-20在大数据与数据驱动决策的当下,“数据分析”与“数据挖掘”是高频出现的两个核心概念,也是很多职场人、入门学习者容易混淆的术 ...
2026-03-20在CDA(Certified Data Analyst)数据分析师的全流程工作闭环中,统计制图是连接严谨统计分析与高效业务沟通的关键纽带,更是CDA ...
2026-03-20在MySQL数据库优化中,分区表是处理海量数据的核心手段——通过将大表按分区键(如时间、地域、ID范围)分割为多个独立的小分区 ...
2026-03-19在商业智能与数据可视化领域,同比、环比增长率是分析数据变化趋势的核心指标——同比(YoY)聚焦“长期趋势”,通过当前周期与 ...
2026-03-19在数据分析与建模领域,流传着一句行业共识:“数据决定上限,特征决定下限”。对CDA(Certified Data Analyst)数据分析师而言 ...
2026-03-19机器学习算法工程的核心价值,在于将理论算法转化为可落地、可复用、高可靠的工程化解决方案,解决实际业务中的痛点问题。不同于 ...
2026-03-18在动态系统状态估计与目标跟踪领域,高精度、高鲁棒性的状态感知是机器人导航、自动驾驶、工业控制、目标检测等场景的核心需求。 ...
2026-03-18“垃圾数据进,垃圾结果出”,这是数据分析领域的黄金法则,更是CDA(Certified Data Analyst)数据分析师日常工作中时刻恪守的 ...
2026-03-18在机器学习建模中,决策树模型因其结构直观、易于理解、无需复杂数据预处理等优势,成为分类与回归任务的首选工具之一。而变量重 ...
2026-03-17在数据分析中,卡方检验是一类基于卡方分布的假设检验方法,核心用于分析分类变量之间的关联关系或实际观测分布与理论期望分布的 ...
2026-03-17在数字化转型的浪潮中,企业积累的数据日益庞大且分散——用户数据散落在注册系统、APP日志、客服记录中,订单数据分散在交易平 ...
2026-03-17在数字化时代,数据分析已成为企业决策、业务优化、增长突破的核心支撑,从数据仓库搭建(如维度表与事实表的设计)、数据采集清 ...
2026-03-16在数据仓库建设、数据分析(尤其是用户行为分析、业务指标分析)的实践中,维度表与事实表是两大核心组件,二者相互依存、缺一不 ...
2026-03-16数据是CDA(Certified Data Analyst)数据分析师开展一切工作的核心载体,而数据读取作为数据生命周期的关键环节,是连接原始数 ...
2026-03-16在用户行为分析实践中,很多从业者会陷入一个核心误区:过度关注“当前数据的分析结果”,却忽视了结果的“泛化能力”——即分析 ...
2026-03-13在数字经济时代,用户的每一次点击、浏览、停留、转化,都在传递着真实的需求信号。用户行为分析,本质上是通过收集、整理、挖掘 ...
2026-03-13在金融、零售、互联网等数据密集型行业,量化策略已成为企业挖掘商业价值、提升决策效率、控制经营风险的核心工具。而CDA(Certi ...
2026-03-13在机器学习建模体系中,随机森林作为集成学习的经典算法,凭借高精度、抗过拟合、适配多场景、可解释性强的核心优势,成为分类、 ...
2026-03-12在机器学习建模过程中,“哪些特征对预测结果影响最大?”“如何筛选核心特征、剔除冗余信息?”是从业者最常面临的核心问题。随 ...
2026-03-12