
阿里数据科技研究院:算法是大数据的核心
这两天,阿里巴巴投入1500万元新启动了一个代号为“天池”的数据竞赛,选手们比拼如何利用现有大数据进行淘宝女装搭配的算法推荐、余额宝资金的流入流出预测等。其背后的推动者是被外界称为阿里巴巴最神秘部门IDST的负责人涂子沛,著有《大数据》和《数据之巅》。
3月25日,笔者在阿里巴巴西溪园区的会议室里对涂子沛进行了独家专访。军人出身的他,身上带有一股特殊的英气,这在IT圈里并不多见。
涂子沛去年年底从美国硅谷空降阿里巴巴出任副总裁,负责大数据的商业化创新研究。该消息引得业界广泛关注,但这个主要由科学家组成的新部门一直未向外界揭开神秘面纱。
在阿里内部,做数据研究工作的IDST几乎和集团的每一个BU(事业部)都有交集,这个扮演中转站角色的部门,要如何肩负起马云“让数据驱动未来”的商业梦想?
做其他部门不愿做、做不了的事
IDST(InstituteofDataScience&Technologies),数据科学与技术研究院,单从名称上看,就明显区别于互联网公司内部的事业部运营风格,如果把各事业部比喻成拼杀于战场上的江湖派,那么IDST则充满了学院风格,其员工也大多具有科学家背景。
作为负责人,涂子沛的名片上印的英文名字是Jack,和人们熟悉的JackMa(马云)同名,其职位只写了阿里巴巴集团副总裁,此外再没有任何如IDST等相关名头。
目前,这个部门大约有150名员工,分布在杭州、北京、硅谷和西雅图两岸四地,其中杭州有50人左右。在组织架构上,IDST分属于阿里云;层级关系上,涂子沛向阿里巴巴集团首席技术官王坚博士汇报,王坚就是IDST这个想法的最初设计师。
事实上,IDST的三名负责人都有来头。除了涂子沛,漆远是普渡大学计算机系和统计系两个系的终身教授,擅长机器学习和人工智能;金榕为美国密歇根州立大学终身教授,获得过美国国家科学基金会奖(NSFCareerAward)。涂子沛对记者说,在分工上,漆远带中国团队,金榕带美国团队,他负责商业和数据经济方面的研究。
涂子沛出国前在广州武警边防总队待了8年,后又在广东省经贸部门工作两年,其在政府方面的人脉也是马云看中的资源。要知道去年以来,阿里云披荆斩棘般地与全国十几个省份达成合作协议,与政府机构数据的对接对任何一个民间数据公司来说都如获至宝。
“IDST要做阿里其他部门不愿做也做不了的事情。”这是王坚对IDST的角色定位。何为不愿做?与那些营收增长立竿见影的业务部门相比,数据研究、机器学习、自然语言处理这些领域很难快速出成绩。涂子沛也说,既然是创新部门,就没有背负传统的绩效考核目标。何为做不了?单听这些前沿性的研究领域就知道门槛有多高。
类似的研究室在全球有实力的科技企业中生根发芽,像谷歌大脑,即googleX实验室,做的是人工智能、机器学习的研究,可应用到语音识别、无人汽车等领域;微软类似的深度学习系统名叫Adam(亚当);去年5月,前“谷歌大脑”、第一个让机器识别出“猫”的科学家吴恩达从硅谷回国,加盟百度深度学习研究院,推进人工智能研究。
从硅谷到中国,不只是科学家,大量云计算方面的高层人才正演绎着这个流动趋势,比如从甲骨文到阿里云。涂子沛认为,这股趋势背后说明,在大数据、云计算等前沿领域,中国与美国的差距微乎其微,越来越多的人看到了回国建功立业的机会。
每年投入1500万元办数据大赛
对大数据的分析和使用将对互联网公司和用户生活层面产生多大的改变?
去年,阿里巴巴举办了一次天猫算法推荐大赛,其中6名大学生组成的团队拿走了100万元的头奖,他们设计的算法效率超过了阿里巴巴工程师16.9%,这套算法随即被应用到“双11”中,通俗地讲就是让商品推荐变得更精准,内部预计这套算法给平台带来了上千万元的经济价值,这也让阿里见识到了外部新生力量的强大。
该项目的负责人、来自IDST部门的高级经理王一婷说,6个人中有一人即将入职阿里巴巴,一人靠这次的一炮而红开始创业,其他人还未毕业。26日刚启动的天池大赛与此类似,将持续一年时间,有“联赛”的意味,去年比赛有国内外共7276支队伍参加。
招揽人才、创新产品的商业化应用、推动大数据生态建设,这是IDST举办这类大赛的目的。这也得到了涂子沛的证实,他向本报记者透露,阿里每年在这个比赛上投入的资金在1500万元左右,其中最大的花费是计算成本,阿里拿出了1000台服务器专门提供给参赛者,项目还会对接风投,孵化选手们的创业梦想,“如果非要说这里边有什么商业利益的话,只有参赛者的算法被应用到阿里业务中这一点。”
这次天池大赛,选手们会围绕3个课题施展拳脚,其中之一是淘宝女装搭配,阿里将淘宝上的大数据脱敏后给到参赛者,后者需要设计一套算法,利用图像识别等技术让机器来搭配服饰,代替以往的人工挑选和搭配。当然,机器的“眼光”如何,最后还要经过消费者的评估。
还有针对资金规模高达5789亿元的余额宝,选手们要做的是精准预测其未来每天的资金流入流出情况,既保证用户的高收益,又避免大量赎回导致挤兑;此外,就是预测手机淘宝用户的购物喜好。
而像在虾米音乐上根据用户的喜欢推荐音乐等课题将放到下一次大赛中去落实。
一切业务数据化,一切数据业务化,马云最近一年在全球众多高端场合“布道”其数据观点。涂子沛称,中国目前拥有的数据量占全世界的14%,预计到2020年这一比例将为21%,但数据利用率不到0.4%,数据商业化的空间以及数据经济的未来价值已经显现。
数据开放和数据商业化,将是未来几年内不断延伸的两条交叉线。涂子沛说,以前写书、演讲,是知识传播,这次从美国举家搬到杭州,角色要求转变成了知识创新,将会更有挑战。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在 “神经网络与卡尔曼滤波融合” 的理论基础上,Python 凭借其丰富的科学计算库(NumPy、FilterPy)、深度学习框架(PyTorch、T ...
2025-10-23在工业控制、自动驾驶、机器人导航、气象预测等领域,“状态估计” 是核心任务 —— 即从含噪声的观测数据中,精准推断系统的真 ...
2025-10-23在数据分析全流程中,“数据清洗” 恰似烹饪前的食材处理:若食材(数据)腐烂变质、混杂异物(脏数据),即便拥有精湛的烹饪技 ...
2025-10-23在人工智能领域,“大模型” 已成为近年来的热点标签:从参数超 1750 亿的 GPT-3,到万亿级参数的 PaLM,再到多模态大模型 GPT-4 ...
2025-10-22在 MySQL 数据库的日常运维与开发中,“更新数据是否会影响读数据” 是一个高频疑问。这个问题的答案并非简单的 “是” 或 “否 ...
2025-10-22在企业数据分析中,“数据孤岛” 是制约分析深度的核心瓶颈 —— 用户数据散落在注册系统、APP 日志、客服记录中,订单数据分散 ...
2025-10-22在神经网络设计中,“隐藏层个数” 是决定模型能力的关键参数 —— 太少会导致 “欠拟合”(模型无法捕捉复杂数据规律,如用单隐 ...
2025-10-21在特征工程流程中,“单变量筛选” 是承上启下的关键步骤 —— 它通过分析单个特征与目标变量的关联强度,剔除无意义、冗余的特 ...
2025-10-21在数据分析全流程中,“数据读取” 常被误解为 “简单的文件打开”—— 双击 Excel、执行基础 SQL 查询即可完成。但对 CDA(Cert ...
2025-10-21在实际业务数据分析中,我们遇到的大多数数据并非理想的正态分布 —— 电商平台的用户消费金额(少数用户单次消费上万元,多数集 ...
2025-10-20在数字化交互中,用户的每一次操作 —— 从电商平台的 “浏览商品→加入购物车→查看评价→放弃下单”,到内容 APP 的 “点击短 ...
2025-10-20在数据分析的全流程中,“数据采集” 是最基础也最关键的环节 —— 如同烹饪前需备好新鲜食材,若采集的数据不完整、不准确或不 ...
2025-10-20在数据成为新时代“石油”的今天,几乎每个职场人都在焦虑: “为什么别人能用数据驱动决策、升职加薪,而我面对Excel表格却无从 ...
2025-10-18数据清洗是 “数据价值挖掘的前置关卡”—— 其核心目标是 “去除噪声、修正错误、规范格式”,但前提是不破坏数据的真实业务含 ...
2025-10-17在数据汇总分析中,透视表凭借灵活的字段重组能力成为核心工具,但原始透视表仅能呈现数值结果,缺乏对数据背景、异常原因或业务 ...
2025-10-17在企业管理中,“凭经验定策略” 的传统模式正逐渐失效 —— 金融机构靠 “研究员主观判断” 选股可能错失收益,电商靠 “运营拍 ...
2025-10-17在数据库日常操作中,INSERT INTO SELECT是实现 “批量数据迁移” 的核心 SQL 语句 —— 它能直接将一个表(或查询结果集)的数 ...
2025-10-16在机器学习建模中,“参数” 是决定模型效果的关键变量 —— 无论是线性回归的系数、随机森林的树深度,还是神经网络的权重,这 ...
2025-10-16在数字化浪潮中,“数据” 已从 “辅助决策的工具” 升级为 “驱动业务的核心资产”—— 电商平台靠用户行为数据优化推荐算法, ...
2025-10-16在大模型从实验室走向生产环境的过程中,“稳定性” 是决定其能否实用的关键 —— 一个在单轮测试中表现优异的模型,若在高并发 ...
2025-10-15