京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据发展的瓶颈多多,完美的数据你等不来
大数据的发展是个循序渐进的过程,基于已有数据做好分析也很重要。“完美的数据永远是等不来的,碎片化的数据也可以整合起来做分析,做数据分析的出发点是有多少数据可以做多少事。”鄂维南说
研究院的一个方向,就是推动科研和人才培养。鄂维南多次表示:“发展大数据的最大瓶颈是人才。”他介绍,新成立北京大数据研究院,希望能够打造世界一流的大数据教育、科研创新和成果转化的国际化平台,吸引一些最有才华,最有进取心的一流人才。
鄂维南希望,用5-10年把北京大数据研究院建成国中国乃至世界大数据产业发展的一面旗帜。不过,他也直言,研究院虽然挂牌了,但“万里长征,才走完第一步”。
挂牌是大数据研究院“长征第一步”,但鄂维南自己,却已在数据之路“行军”多年。
学术+实践的“跨界者”
先后毕业于中国科技大学数学系、中科院计算数学所的鄂维南,获得美国加州大学洛杉矶分校博士学位,还是首届美国总统青年科学家与工程师奖、国际工业与应用数学协会科拉兹奖、冯康科学计算奖得主。
他的研究领域极其广泛,分布在数学、力学和理论物理的诸多方向,并均有重要的发现和贡献。非专业人士,还真难懂鄂维南研究的深奥内容,如“研究了弹性理论的微观基础,从量子力学和分子动力学模型出发导出了宏观层面下的非线性弹性理论,得到了经典的 Cauchy-Born 准则成立的稳定性条件。”目前,鄂维南为中国科学院院士,北京大学、普林斯顿大学教授,致力于大数据技术的科学研究和产业化,主持国家973重点项目《非结构化数据分析》并任首席科学家。
事实上,作为“大牛”,鄂维南不仅是数据科学的研究者,更是大数据的实践者。
2014年,普林科技成立,鄂维南任董事长。这是一家为金融、移动运营商、交通、物流和医疗等相关领域提供大数据建模和数据分析服务行业的综合咨询服务公司。
普林科技基于大数据技术,为客户提供模型、算法和系统支持,已合作公司包括美国第一大P2P公司Lending Club、国内P2P公司人人贷、内地三大运营商、中证信用等。
如普林科技运用大数据技术,联合三大运营商打造的基于13亿人手机通讯数据和精准评分模型,推出了能够自动化输出全面标签系统和深度用户画像的产品“普林号码分”,该产品被2016大数据技术与应用推进大会评为“大数据优秀解决方案奖”。
数据隐私是个无底洞
近年,越来越多学界、业界人士推动着中国大数据的发展。鄂维南直言,中国这么大的市场,我们做大数据在国际上竞争,至少要在某些领域领先。他也提醒,中国发展大数据,存在数据开放、数据质量、数据隐私和分析技术等“瓶颈”。
他提及两个故事:一位研究地质学的院士无奈感慨“地质研究只能研究外国的,不能研究中国的”,因为地质数据都在国家部门手中,却不对外开放;一位统计学的教授去气象局寻找一些最普通的气象数据,都吃了闭门羹。
一提数据开放,必谈数据隐私。鄂维南强调:“数据脱敏远远不够,隐私问题是一个无底洞。”
他举例,有人拿到了另一个人3个月的美国信用卡数据后发现,如果知道那个人昨天在某地买了一点东西,前天在另外一个商场买了东西;找到所有消费数据,并进一步了解消费习惯,就能了解消费方面的隐私。“这是脱敏的数据,没名字、没号码,但可以通过算法找到一个人的消费习惯。想靠法律办法解决隐私问题,严格来说不可能。”鄂维南说。
大数据发展的“瓶颈”多多,开放、质量、技术等都亟待突破,在鄂维南看来,大数据的发展是个循序渐进的过程,基于已有数据做好分析也很重要。“完美的数据永远是等不来的,碎片化的数据也可以整合起来做分析,做数据分析的出发点是有多少数据可以做多少事。”
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数字化运营中,“凭感觉做决策” 早已成为过去式 —— 运营指标作为业务增长的 “晴雨表” 与 “导航仪”,直接决定了运营动作 ...
2025-10-24在卷积神经网络(CNN)的训练中,“卷积层(Conv)后是否添加归一化(如 BN、LN)和激活函数(如 ReLU、GELU)” 是每个开发者都 ...
2025-10-24在数据决策链条中,“统计分析” 是挖掘数据规律的核心,“可视化” 是呈现规律的桥梁 ——CDA(Certified Data Analyst)数据分 ...
2025-10-24在 “神经网络与卡尔曼滤波融合” 的理论基础上,Python 凭借其丰富的科学计算库(NumPy、FilterPy)、深度学习框架(PyTorch、T ...
2025-10-23在工业控制、自动驾驶、机器人导航、气象预测等领域,“状态估计” 是核心任务 —— 即从含噪声的观测数据中,精准推断系统的真 ...
2025-10-23在数据分析全流程中,“数据清洗” 恰似烹饪前的食材处理:若食材(数据)腐烂变质、混杂异物(脏数据),即便拥有精湛的烹饪技 ...
2025-10-23在人工智能领域,“大模型” 已成为近年来的热点标签:从参数超 1750 亿的 GPT-3,到万亿级参数的 PaLM,再到多模态大模型 GPT-4 ...
2025-10-22在 MySQL 数据库的日常运维与开发中,“更新数据是否会影响读数据” 是一个高频疑问。这个问题的答案并非简单的 “是” 或 “否 ...
2025-10-22在企业数据分析中,“数据孤岛” 是制约分析深度的核心瓶颈 —— 用户数据散落在注册系统、APP 日志、客服记录中,订单数据分散 ...
2025-10-22在神经网络设计中,“隐藏层个数” 是决定模型能力的关键参数 —— 太少会导致 “欠拟合”(模型无法捕捉复杂数据规律,如用单隐 ...
2025-10-21在特征工程流程中,“单变量筛选” 是承上启下的关键步骤 —— 它通过分析单个特征与目标变量的关联强度,剔除无意义、冗余的特 ...
2025-10-21在数据分析全流程中,“数据读取” 常被误解为 “简单的文件打开”—— 双击 Excel、执行基础 SQL 查询即可完成。但对 CDA(Cert ...
2025-10-21在实际业务数据分析中,我们遇到的大多数数据并非理想的正态分布 —— 电商平台的用户消费金额(少数用户单次消费上万元,多数集 ...
2025-10-20在数字化交互中,用户的每一次操作 —— 从电商平台的 “浏览商品→加入购物车→查看评价→放弃下单”,到内容 APP 的 “点击短 ...
2025-10-20在数据分析的全流程中,“数据采集” 是最基础也最关键的环节 —— 如同烹饪前需备好新鲜食材,若采集的数据不完整、不准确或不 ...
2025-10-20在数据成为新时代“石油”的今天,几乎每个职场人都在焦虑: “为什么别人能用数据驱动决策、升职加薪,而我面对Excel表格却无从 ...
2025-10-18数据清洗是 “数据价值挖掘的前置关卡”—— 其核心目标是 “去除噪声、修正错误、规范格式”,但前提是不破坏数据的真实业务含 ...
2025-10-17在数据汇总分析中,透视表凭借灵活的字段重组能力成为核心工具,但原始透视表仅能呈现数值结果,缺乏对数据背景、异常原因或业务 ...
2025-10-17在企业管理中,“凭经验定策略” 的传统模式正逐渐失效 —— 金融机构靠 “研究员主观判断” 选股可能错失收益,电商靠 “运营拍 ...
2025-10-17在数据库日常操作中,INSERT INTO SELECT是实现 “批量数据迁移” 的核心 SQL 语句 —— 它能直接将一个表(或查询结果集)的数 ...
2025-10-16