Skip to content

强化学习代表人物、机构与资源

1. 强化学习代表人物

1.1 Richard Sutton

Richard Sutton 是加拿大阿尔伯塔大学的教授,也是强化学习领域的奠基人之一。他的主要研究方向包括强化学习、机器学习和人工智能。他是 Temporal Difference 学习算法的创始人之一,也是 SARSA 算法和函数逼近强化学习的奠基人之一,这些算法已被广泛应用于强化学习中。他与 Andrew Barto 合作写作的《Reinforcement Learning: An Introduction》一书是该领域的经典著作,该书介绍了强化学习的基本原理和方法,被广泛认为是强化学习的标准教材之一。

1.2 Andrew Ng

Andrew Ng 是斯坦福大学计算机科学系的教授,同时也是谷歌前副总裁和百度的首席科学家。他是机器学习和人工智能领域的知名专家,也是在线课程平台 Coursera 的联合创始人。他在 Coursera 上推出的“机器学习”课程已经有数百万人参加,成为机器学习入门的标准课程之一。他还创建了 deeplearning.ai,致力于普及深度学习的知识。

1.3 David Silver

David Silver 是英国伦敦大学学院的教授,他是 DeepMind 团队的创始成员之一,同时也是 AlphaGo 的核心设计者之一。在 2013 年,他开始研究将深度学习与强化学习相结合,这使得机器在更复杂的领域中具有了更强的表现力。他还在 2016 年发表的论文中介绍了著名的 Deep Reinforcement Learning(DRL)算法,并在 2019 年获得了杰出的成就奖。他的代表作包括 AlphaGo、AlphaZero、Atari Games 等。

1.4 Pieter Abbeel

Pieter Abbeel 是加州大学伯克利分校的教授,同时也是人工智能公司 Covariant 的联合创始人。他的研究方向包括机器学习、机器人学和控制论等。他在强化学习领域取得了一系列的突破,包括发明了一种新的强化学习算法,称为 Trust Region Policy Optimization(TRPO),该算法已经被广泛应用于机器人控制和其他任务中。他的团队开发了一种被称为 DeepMimic 的算法,可以让机器人学习各种高级运动,如跳跃、滑翔和攀岩等。他还开发了一种名为 CoRL(Conference on Robot Learning)的会议,该会议聚焦于机器人学习领域。

代表作:Apprenticeship Learning via Inverse Reinforcement Learning,DeepMimic: Example-Guided Deep Reinforcement Learning of Physics-Based Character Skills。

1.5 Sergey Levine

Sergey Levine 是加州大学伯克利分校的教授,也是 UC Berkeley 的 AI 实验室的主任。他在强化学习领域的主要贡献是针对机器人学习的算法研究,如怎样让机器人在现实环境中学习、移动和交互。他提出的一种基于深度学习和强化学习的“行动者-评论家”(Actor-Critic)算法已经被广泛应用于机器人控制领域。他的代表作包括在机器人控制、自主导航等领域的研究工作,以及 Flow、Spinning Up 等强化学习库。

代表作:Deep Learning for Robotics,End-to-End Training of Deep Visuomotor Policies。

1.6 John Schulman

John Schulman 是 OpenAI 的联合创始人之一,同时也是伯克利人工智能研究所(BAIR)的研究员。他在强化学习领域的主要贡献是开发出一种被称为 TRPO(Trust Region Policy Optimization)的强化学习算法,该算法可以更稳定地学习复杂的机器人控制任务。他还是 Gym 开源项目的创始人之一,该项目为开发人员提供了一种用于评估和比较强化学习算法的平台。

代表作:Trust Region Policy Optimization,Proximal Policy Optimization Algorithms。

1.7 Marc Bellemare

Marc Bellemare 是蒙特利尔大学的助理教授,同时也是 Google Brain 的研究员。他的研究重点在于开发新的强化学习算法,以及提高现有算法的表现。他在 2013 年发表了著名的 Double DQN 论文,提出了一种改进 DQN 算法的方法,大大提高了强化学习算法的稳定性。他的代表作还包括 Rainbow、QR-DQN 等强化学习算法。

1.8 其他代表人物:

  1. Ian Goodfellow:加拿大蒙特利尔大学教授,GAN(生成对抗网络)的创始人之一,也是深度学习领域的知名专家。

  2. Chelsea Finn:斯坦福大学助理教授,主要研究方向是强化学习、元学习和机器人学等,提出了 Model-Agnostic Meta-Learning(MAML)算法等。

  3. Marc Bellemare:蒙特利尔大学助理教授,主要研究方向是强化学习、深度学习和游戏 AI 等,提出了 Double Q-Learning 等算法。

  4. Doina Precup:蒙特利尔大学教授,主要研究方向是机器学习和强化学习等,她的研究成果包括 Autonomous Agents、Hierarchical Reinforcement Learning 等。

  5. Jian Peng:美国乔治亚理工学院助理教授,主要研究方向是深度学习和强化学习等,提出了 Trust-PCL 等算法,并应用于推荐系统和自然语言处理等领域。

  6. Emma Brunskill:斯坦福大学副教授,主要研究方向是强化学习、教育技术和人工智能公平性等,她的研究成果包括逆强化学习、Bandit-Based Learning 等。

  7. Sham Kakade:华盛顿大学教授,主要研究方向是强化学习和统计学习等,提出了 Optimistic Initial Values、Policy Gradient 等算法。

  8. Satinder Singh:密歇根大学教授,主要研究方向是强化学习和人工智能等,他的研究成果包括多智能体强化学习、协同机器人等。

2. 强化学习研究机构:学术界

2.1 国外

  • 伯克利:Sergey Levine,Pieter Abbeel, Dimitri Bertsekas, Emma Brunskill, Chelsea Finn
  • UCL:David Sliver(目前好像不指导学生了)、汪军老师等
  • Alberta:Richard Sutton 老爷子、Dale, Michael Bowling, Csaba
  • MCGill: Doina, Joelle
  • Stanford:Benjamin Van Roy
  • 莫斯科国立大学:NIPS 比赛很强
  • 巴黎 Flowers Team:Intrinsic motivation 方向
  • Oxford: Shimon Whiteson
  • Texas: Peter Stone
  • 新加坡南洋理工大学:安波老师
  • 莫斯科国立大学:NIPS 比赛很强
  • 巴黎 Flowers Team:Intrinsic motivation 方向
  • 加拿大麦吉尔大学:推理与学习实验室 -(Doina Precup 和 Joelle Pineau 分别在 DeepMind 和 FAIR Montreal 工作)
  • 加拿大 U Alberta 的增强学习和人工智能(Rich Sutton,Michael Bowling,Patrick Pilarski 在 DeepMind Edmonton 任职;CsabaSzepesv ári 在 DeepMind London 任职)
  • 强化学习和在线学习小组,英国伦敦帝国学院(马克·迪森罗思在http://Prowler.IO
  • 英国牛津大学白森研究实验室
  • 法国里尔的 Inria SequeL(Mohammad Ghavamzadeh,R émiMunos,Bilal Piot 在 DeepMind,Alessandro Lazaric 在 FAIR Paris,Olivier Pietquin 在 Google Brain)
  • Juergen Schmidhuber 的小组,瑞士 IDSIA(现为 NNAISENSE)
  • 谢恩·曼诺(Shie Mannor)在以色列 Technio]的小组
  • Gergely Neu 在 UPF 西班牙巴塞罗那举行
  • 印度 IIT-Madras 的 Balaraman Ravindran 小组
  • 加拿大多伦多大学/媒介研究所的 Jimmy Ba 的小组
  • 加拿大媒介学会的阿米尔·马苏德·法拉赫曼德(Amir-Massoud Farahmand)的 Alireza Makhzani

2.2 香港

2.3 国内

  • 清华大学:张崇洁老师、李升波老师等
  • 北京大学:卢宗青老师等
  • 南京大学:俞扬老师、高阳老师等
  • 上海交通大学:张伟楠老师、俞凯老师
  • 中国科学院:赵冬斌老师、张海峰老师等
  • 天津大学:郝建业老师等
  • 中科大:李厚强老师、周文罡老师、王杰老师、庄连生老师等
  • 国防科技大学:徐昕老师
  • 中科院深圳先进技术研究院:崔允端老师(强化学习在自动驾驶、机器控制上的应用)

3. 强化学习研究机构:工业界

3.1 国外

  • DeepMind(David Sliver, Marc G. Bellemare)
  • OpenAI(John Schulman)
  • FAIR(全方向):知名的有田渊栋和 Noam Brown 等,大佬巨多
  • Google Brain(全方向):大佬巨多
  • Salesforce Research

3.2 国内

  • 腾讯 AI Lab:游戏等;
  • 百度 PARL 团队:自研框架+RL 比赛
  • 网易伏羲实验室:游戏;
  • 字节跳动 AI Lab:游戏、推荐;
  • 地平线 AI:RL+机器人、自动驾驶
  • 滴滴:运筹优化;
  • 阿里:推荐、运筹优化;
  • 微软亚研院:Research,信息检索和搜索引擎;
  • 华为诺亚方舟实验室:Research;
  • 华为消费者 BG 自动驾驶解决方案 BU:RL+自动驾驶
  • 平安保险:强化学习+NLP;
  • 快手 AI Lab:游戏、检索;
  • Momenta:RL+自动驾驶
  • 超参数科技:游戏;
  • 启元世界
  • 南栖仙策

Maintained by Robin