朱军:在火爆热潮中依旧冷静的贝叶斯研究者|朱军|贝叶斯|正则化
自 1999 年起,《麻省理工科技评论》每年都会推出“35岁以下创新35人”(Innovators Under 35)榜单,旨在于全球范围内评选出被认为最有才华、最具创新精神,以及最有可能改变世界的 35 位年轻技术创新者或企业家,共分为发明家、创业家、远见者、人文关怀者及先锋者五类。
2017 年,该全球权威榜单正式推出中国区评选,并已公布并首届评选结果。现在,《麻省理工科技评论》正式开设“35岁以下创新35人”中国榜单专栏,以人物报道的形式帮助中文读者了解这些来自中国的新生代科技力量。
朱军-先锋者
“在火爆热潮中依旧冷静的贝叶斯人工智能研究者”
获奖年份:2017年
获奖时年龄:34岁
获奖时职位:清华大学计算机科学与技术系副教授
获奖原因:取得多项贝叶斯研究成果,跳脱过去 250 多年历史的经典贝叶斯“非先验即似然”框架,并将 20 多年来相互分离的两大方向,最大间隔学习和贝叶斯学习,有机融合在一起。还开发了“珠算”概率编程库。
长期从事贝叶斯人工智能研究取得多项成果,提出正则化贝叶斯理论, 跳脱过去 250 多年历史的经典贝叶斯“非先验即似然”框架,并提出贝叶斯模型的最大间隔学习理论与高效算法,将 20 多年来相互分离的两大方向有机融合在一起。研发“珠算”概率编程库,有效支持贝叶斯方法与深度学习的有机融合,实现多机多 GPU 卡的高效计算。
2011 年,当时正在全球人工智能科研重点学术机构的美国卡内基梅隆大学进行博士后研究的朱军,在其博士导师清华大学张钹教授的邀请下,回到清华大学任教,全面负责新一代博士生培养,而这位在清华大学计算机系教授、中科院院士张钹口中 “指导过的最出色博士生”,在回国后不久,也展现了自己在人工智能学术研究工作以及人才培养方面的优秀才能,成为中国人工智能领域发展的关键人物。
朱军于2013年加入国家重点研究计划(973计划)担任课题负责人,身为西安交通大学数理学院教授、中科院院士、973计划首席科学家的徐宗本这样形容朱军:“他可能是国家973整体计划中最年轻的一位课题负责人,而且其所负责课题的研究也获选为我们973项目的代表性成果。”人工智能相关研究的热度在过去几年持续上升,而以深度学习为代表的人工智能技术已成为很多科学研究与工程领域的关键技术。朱军长期投注心力于贝叶斯人工智能研究,并在此领域取得多项进展,获得全球人工智能学术界高度关注。
其中,朱军所提出的正则化贝叶斯理论,被认为是跳脱过去 250 多年历史的经典贝叶斯“非先验即似然”框架,为贝叶斯推理提供第三维自由度,也就是所谓的“后验正则化”,可以更灵活方便地引用该领域的知识。事实上,正则化贝叶斯同时也提供了一个全新的理论框架,为人工智能中如何将知识与数据有机融合的难题,提供了理论意义与应用价值上的全新发展方向。
另外,在正则化贝叶斯框架下,朱军所提出的贝叶斯模型的最大间隔学习理论以及高效算法,将过去20多年来相互分离的两大方向进行有机融合。一方面通过判别式最大间隔学习,显著提高贝叶斯模型的预测性能,另一方面则是通过非参数贝叶斯推理,自动确定最大间隔模型的复杂度。而值得注意的是,由朱军所带领的清华大学研究团队,于2017年发布的珠算编程概率库,进一步有效支持贝叶斯方法与深度学习的有机融合,实现在多机多GPU 卡的高效计算。
目前已有许多开放框架支持深度学习进行开发和原型设计,但却没有太多的平台能支持贝叶斯深度学习。根据朱军的规划,希望通过构建被称为 “珠算”的平台,一方面支持深度学习,另一方面也可支持贝叶斯推断。更重要的是,这将会成为深度学习与贝叶斯两者之间的有机融合平台,推动该方向的研究和工程实践。[page]分页标题[/page]
在皖西北的农村长大的朱军,说自己年少时的求学历程是“少了一些功利,多了一分自然和真实”。朱军说自己一路走来都很幸运,走过的路都不是事先规划的,任何一个小偏差可能都会改变整个轨迹,而考上清华大学是人生中最重要的转折点,因为清华给他了一个更大的学习与工作的平台,让他得以找到自己的兴趣方向。
考上清华后的朱军,跳出了高考应试教育的模式,回归兴趣驱动的学习,花了很多时间思考和培养自己的兴趣。朱军在大一时选了他说很“难啃”的全英文物理课,学习英文的思维方式;大二时开始进入实验室做SRT训练,初步了解如何开展一个课题;大三时尝试了有挑战性的暑期研究课题,并花一个夏天来设计CPU。
这一个暑期研究的经验,对于后来朱军踏上科研之路起了很大的作用。朱军说,“当时,我们是第一批尝试做16位指令集和流水线的学生,通过不断地探索和调试,最终圆满完成任务。这种探索给了我很大的成就感,也给了我继续读博的信心。在那之后,我很快联系了张钹院士读博,“跨界”选择了人工智能方向。要知道那时候,人工智能、机器学习远没有现在这么火热,甚至有些冷清,我当时也是零基础,完全出于兴趣选择了这个方向。”
在培养兴趣的过程中,朱军其实也在探索自己未来的可能,在2004年的那个夏天,他正式决定进入人工智能学术研究的世界。之后,朱军进入了微软亚洲研究院实习,最先接触的是概率图模型,这种模型将概率论与图论优美地融合在一起,对朱军产生了很大的吸引力,而当时朱军崇拜的几位学者,如Judea Pearl、Michael Jordan、John Lafferty等都是做这个方向,其中,2011年的图灵奖得主Judea Pearl更被称为贝叶斯人工智能之父。这个阶段对朱军而言,奠定了他后来人工智能、贝叶斯相关的发展基础方向。之后朱军前往美国卡内基梅隆大学担任访问学者、进行博士后研究,更进一步深化相关研究工作。
对于自己从事的研究领域,朱军说:“我从事贝叶斯方面的工作,属于概率统计的范畴。但是与统计学家们又不太一样,我更多是从机器学习的角度看问题,更关注模型的预测性能和学习效率。比如:经典的贝叶斯定理是一个从先验分布到后验分布的推理过程,没有优化的目标。我们基于优化理论,将后验分布的预测性能(比如分类错误率)引入到学习目标中,这种思路能够将机器学习中比较先进的思想,比如最大间隔准则(支持向量机是一个典型例子),与贝叶斯有机融合。这种新颖的视角也给我的研究工作打开了一扇门,让我看到很多新的问题和挑战。”
对于在强调用创新改变世界的TR35评选中获奖,并被评选为“科技先锋”(Pioneer)的朱军认为,创新对于科研是至关重要的,是衡量学术贡献的基准,创新同时也是非常有挑战性的。锦上添花的工作相对简单,也容易形成“火热”的局面。但是,基础研究上的创新却很难,通常需要冷静的思考和长期的坚持,需要研究者能耐得住寂寞。
朱军用图灵奖得主Judea Pearl教授之前在NIPS大会上的报告受到冷遇为例,他认为,各方对Judea Pearl的报告或有不同的观点,但这对他本人来说可能没有太多意义,因为他最早在开创贝叶斯人工智能的方向时,想必也是理解和支持的人少,但这并没有影响他对人工智能领域的基础性贡献。
也因为如此,朱军对自己的期许是,目前国内人工智能行业如火如荼,在一些应用上甚至领先全球。但在基础理论方面,值得我们骄傲的事情却少之又少,国内的土壤还比较贫瘠。但创新之风已然刮起,人工智能需要国家以及整个行业的长期支持,对原创性成果更加鼓励和包容。客观的说,现在技术能解决的问题还相当有限。随着范围的扩大,应用环境将变得更加开放、更加动态和不确定,边界条件也变得更模煳,甚至存在对抗和攻击。因此,更多新的要求和挑战会逐渐浮出水面。作为研究者和教师,我们有义务探究人工智能更具前瞻性的理论方法和技术,同时,也要培养更多的优秀人才,推动人工智能的可持续发展。[page]分页标题[/page]
- 12家科技企业ESG观察,谁领先,谁落后?2023-06-20 06:22
- OpenAI再获百亿融资 估值近300亿美元2023-06-20 06:20
- 大厂战投疑遭重击,中国托拉斯时代终结 | 2022-01-21 17:35
- 仅凭两款单品年GMV达千万,新锐食品品牌怪力食厂从植物蛋白破圈 | 2022-01-21 17:35
- 扩张、亏损、关店,集合店KK的第二次救赎 | 2022-01-21 17:35
- 虚假宣传、诱导付费,陌生人社交App困于“荷尔蒙” | 2022-01-21 17:35
- 2022,AI上市“大年”? | 2022-01-21 17:35
- 小马智行瞄准车规级量产,推出第六代自动驾驶软硬件系统 | 2022-01-21 17:35
- Forrester最新报告:阿里云首次挺进全球容器领导者象限 | 2022-01-21 17:35
- 数策指今纸巾宝获A+轮融资,希投投资领投 | 2022-01-21 17:35
- 16:22周大生经典在传承中创新,精心打造东方文化精品珠宝
- 15:59智能驱动,豫见未来——“热AI在郑州·百度品牌之夜”圆满落幕
- 15:49驰援西藏,周大生捐款助力日喀则抗震救灾
- 15:21CES 2025 现场直击 | 万勋科技携通用软体机器人惊艳首秀,多元化
- 16:33CES新物种(中):类人肌体,过人能力——通用软体机器人技术,加速机器人
- 15:35百利好解锁投资新机遇,全新交易产品正式上线!
- 19:52周大生国家宝藏系列青花新品匠心传承千古瓷韵
- 14:55CES新物种(上):机器人变软——通用化、可商用的软体机器人亮相CES
- 12:28中国首家鱼子酱体验店 卡露伽鱼子酱旗舰店落户浙江衢州水亭门
- 10:38商聚荷城 合创未来 第二届贵港市荷商大会在城区胜利召开
- 17:23蛇年贺岁启新程,与周大生经典共赴宋韵风华
- 09:56燕京啤酒率先拉开春节营销大幕,官宣国民闺女关晓彤为品牌代言人
- 16:42周大生新年珠宝璀璨亮相,共度2025年的美好时光
- 14:16艾瑞通政务协同办公平台全面适配原生鸿蒙系统
- 20:39宝珀品牌大使黄轩:我的下一块宝珀
- 14:25为双旦增添国风氛围,周大生腕美·国家宝藏系列串珠产品魅力上新
- 10:38第一批广东老字号公布,李锦记荣耀上榜!百年传承实至名归
- 22:30皙之密:开启自然美肌焕变之旅
- 22:10全美世界:用人文魅力书写 34 年辉煌篇章
- 17:05周大生珠宝成就国货典范,荣获“2024年中国国货消费品牌500强奖项”
- 16:17中国老龄协会莅临寿山福海,共话养老服务新发展
- 10:30智蛇起舞,蛇来运转 宝珀Blancpain发布2025中华年历蛇年限量款
- 10:28宝珀Blancpain挚献全新Ladybird钻石舞会情人节限量款腕表
- 10:23绿表风向标——今年,宝珀绿不同凡响!
- 14:45FUTURUS光场ARHUD成功量产,ET9行业首发
- 14:03阿迪达斯轻运动蛇年系列,新年焕新态 携手演员陈晓、马思纯、那尔那茜一同开
- 14:03阿迪达斯轻运动蛇年系列,新年焕新态 携手演员陈晓、马思纯、那尔那茜一同开
- 16:56周大生腕美·莫奈花园&炽热梵高系列圣诞新品浪漫呈现
- 12:02周大生腕美推出圣诞限定新品,陪伴度过温暖圣诞
- 17:30周大生双旦腕美串珠艺术节“金”喜来临,暖冬黄金好礼送不停