数据STUDIO

重磅!2024图灵奖颁给Deepseek背后的功臣:强化学习

Image

2025年3月5日,全球计算机科学界的最高荣誉——图灵奖(ACM A.M. Turing Award)正式揭晓。今年的奖项授予了强化学习领域的两位奠基人:Richard Sutton与Andrew Barto,以表彰他们在强化学习(Reinforcement Learning, RL)领域的开创性贡献。

Image

图灵奖被誉为“计算机界的诺贝尔奖”,旨在表彰对计算机科学领域做出卓越贡献的个人。自1966年设立以来,图灵奖得主包括人工智能、算法、密码学等多个领域的先驱。2024年的奖项再次聚焦人工智能领域,特别是强化学习这一分支,凸显了其在现代AI技术中的核心地位。

强化学习是一种通过奖励和惩罚机制引导智能体(Agent)在环境中学习最优策略的技术。其核心思想是让机器通过试错和反馈不断优化行为,最终实现自主决策。这一技术不仅在AlphaGo、ChatGPT、Deepseek等标志性AI项目中发挥了关键作用,还在机器人控制、网络优化、芯片设计等领域展现了巨大潜力。

Richard Sutton被誉为“强化学习之父”,而Andrew Barto则是他的博士导师。两人自20世纪80年代起开始合作,共同构建了强化学习的理论框架和数学基础。他们的研究不仅提出了马尔可夫决策过程(MDP)等核心概念,还开发了时间差分学习(Temporal Difference Learning)等关键算法,为强化学习的发展奠定了坚实基础。

Image

图丨Richard Sutton(来源:University of Alberta)

在获奖后的采访中,Richard Sutton强调了强化学习的核心价值:“强化学习的本质是从经验中学习,这是最自然的学习方式。”他还表示,未来将继续探索强化学习在通用人工智能(AGI)中的应用,并希望通过图灵讲座和图灵论文进一步推动这一领域的发展。

Andrew Barto则指出,强化学习的潜力远未完全挖掘。他认为,随着计算能力的提升和算法的优化,强化学习将在更多领域实现突破,特别是在多智能体系统和复杂环境中的应用。

Image

图丨Andrew Barto(来源:College of Information and Computer Sciences University of Massachusetts Amherst)

2024年图灵奖的颁发不仅是对Richard Sutton与Andrew Barto个人成就的认可,更是对强化学习这一领域的肯定。他们的工作不仅推动了AI技术的进步,还为理解智能的本质提供了新的视角。未来,随着强化学习技术的不断发展,我们有望看到更多令人惊叹的AI应用,进一步改变我们的生活和工作方式。

Part.1

中国AI人才教育应该怎么做

2024年图灵奖的颁布为中国AI人才培养提供了深刻的启示。中国在AI人才培养方面取得了显著成就。根据美国智库的研究,全球半数顶尖AI人才来自中国高校,这反映了中国AI教育体系的不断完善。

然而,中国AI人才培养仍面临一些挑战,比如多数高校的AI课程偏重理论,缺乏对前沿技术(如强化学习)的深入实践训练;强化学习的成功离不开心理学、神经科学等学科的启发,而中国AI教育在跨学科融合方面仍有提升空间。

上海交通大学ACM班是中国首个计算机拔尖人才培养特班,成立20年来致力于培养中国的计算机科学家。

这个班级里走出了很多计算机科学和人工智能领域的优秀人才,其中不乏“中国人工智能黄金一代”,比如依图科技林晨曦,第四范式戴文渊,前字节跳动AI Lab总监、现UCSB副教授李磊,还有教你“动手学深度学习”的李沐,XGBoost作者、TVM发起人陈天奇,等等。

ACM班创始人俞勇教授的团队致力于培养中国的计算机科学家,其“新一代人工智能实战型人才培养系列教程”为AI人才培养提供了教学范本,教程包含强化学习、机器学习、自然语言处理、数据结构与算法等方向的图书,提供视频课程+教学PPT+源代码+在线代码运行环境+课后习题,全方位的教学资源可以大幅提高学生的实战技能和创新能力。

Image

本系列图书获得清华大学、北京大学、南京大学、上海交通大学、浙江大学、复旦大学、中国人民大学、斯坦福大学、卡内基梅隆大学、伦敦大学等高校众多知名学者以及微软、字节跳动、亚马逊等企业众多技术专家联袂推荐。

Part.2

图灵奖得主John Hopcroft

推荐的强化学习入门书

《动手学强化学习》

Image

▼点击下方,即可购书

本书全面、系统地介绍了强化学习的基本技术,能够帮助读者学习强化学习的基本概念及其代表性方法,并涉及模仿学习、多智能体强化学习等前沿技术。

本书提供了与内容配套的在线实践学习平台,读者能够在线运行代码并与同行交流、讨论,加强对强化学习技术的理解和掌握。本书是一本适合学生自学、教师教学、工程师扎实基础的好书。

Image

欢迎关注作者张伟楠老师的B站和抖音号进行互动!

Image
Image

《动手学机器学习》

Image

▼点击下方,即可购书

本书是周志华、朱军、李文新、黄萱菁、刘铁岩、陈天奇等多位业内领军人士联袂推荐的机器学习入门书。

本书系统介绍了机器学习的基本内容及其代码实现,以大量示例和代码带领读者走进机器学习的世界,让读者对机器学习的研究内容、基本原理有基本认识,为后续进一步涉足深度学习打下基础。

Image

《动手学自然语言处理》

Image

▼点击下方,即可购书

本书解读大模型背后的核心技术,介绍自然语言处理的原理和方法及其代码实现,是一本着眼于自然语言处理教学实践的图书,获得文继荣、周明、邱锡鹏、李磊、杨笛一等多位业内领军人士的大力推荐。

Image

《动手学数据结构与算法》

Image

▼点击下方,即可购书

本书是何钦铭、张铭、邓俊辉、李沐、陈天奇、杨笛一、张伟楠等推荐的数据结构与算法入门书。

本书系统介绍了数据结构与算法的基本概念和相关知识,从各种数据结构的代码实现到火车票管理系统的代码实现,手把手地指导读者学习数据结构与算法,为读者后续进行更多专业课程的学习打下扎实基础。

Image

《动手学计算机视觉》

▼点击下方,即可购书

本书是加州大学、中科院、复旦大学等高校学科带头人推荐的计算机视觉入门书。

本书系统介绍了计算机视觉的基本内容,包括图像滤波、特征检测、图像拼接、图像分割等,还介绍了基于深度学习的图像分类、语义分割、目标检测、动作识别、场景重建等,以大量示例和代码带领读者走进计算机视觉的世界,让读者对计算机视觉的研究内容、基本原理有基本认识。

Image
🏴‍☠️宝藏级🏴‍☠️ 原创公众号『数据STUDIO』内容超级硬核。公众号以Python为核心语言,垂直于数据科学领域,包括可戳👉Python|MySQL|数据分析|数据可视化|机器学习与数据挖掘|爬虫等,从入门到进阶!

长按👇关注- 数据STUDIO -设为星标,干货速递ImageImage