星际传奇电玩城里有黑社会吗

新智元报道⑫、【新智元导读】80年代⑳，当强化学习被冷落⑬，这对师徒没有放弃⑩；如今▓，重看来时路②，他们给出的建议仍然是⑫，「坚持」住自己的科研思想⑪。

3月5日⑨，计算机学会宣布Andrew Barto和Richard Sutton获得图灵奖❷，以表彰其在强化学习领域做出的奠基性贡献⑨。

自从9年前AlphaGo围棋大胜⑭，引爆全民RL狂欢⑫，再到如今Deepseek-R1等推理模型的火热⑩，足以证明强化学习在人工智能领域的长久影响力⑦。

最近⑯，Communications of the ACM发布了一段对师徒二人的采访❷，从强化学习的研究经历▓，聊到对人工智能的未来预测⑪。

Barto侧重于多智能体协作学习▓，Sutton则认为AGI还需要至少几十年⑬，但最终一定能实现⑧，二人对AI的未来以及强化学习的应用前景都充满希望⑰！

关于两人共同获得的100万美元图灵奖奖金⑳，目前尚未确定具体用途⑨。

Sutton表示可能将其份额捐赠给共同创立的Openmind研究所⑳，给青年科学家提供「奢侈」的科研自由⑪，让他们像自己当年那样专注探索基础性问题⑬。

Barto则计划用奖金在马萨诸塞大学设立研究生奖学金⑳。

强化学习萌芽⑥、1975年的斯坦福校园里⑥，当时还是心理学专业的本科生Richard Sutton⑦，翻遍了图书馆里所有关于机器智能的文献⑦，认知受到了巨大冲击⑰。

他对主流的「模式识别」和「示例学习」观点感到失望⑫，认为动物并不是这么学习的⑤，而是通过某种奖励反馈机制⑧。

当时③，唯一将奖励与学习联系起来的研究人员是美国空军实验室的A. Harry Klopf⑪，认为脑细胞会主动寻求奖励▓。

Sutton立即决定给Klopf写信❶，并在1978年心理学毕业后❸，在马萨诸塞大学阿默斯特分校从事研究⑮，主要工作就是测试Klopf的观点⑲。

团队当时有一位博士后Andrew Barto⑲，在接受空军和国家科学基金会长达五年的资助后②，除了一份报告②，并没有交付出任何成果⑫。

Barto于1970年获得密歇根大学数学学士学位⑭，1975年获得计算机科学博士学位⑥，最终成为UMass自适应网络实验室的联合主任⑩，2012年退休⑥。

Sutton加入实验室后③，成为了Barto的第一位博士生▓，二人最终发展出了现代强化学习技术⑦，奖励也是其中的核心④，通过设计奖励信号来训练神经网络▓，让神经元顺着预期方向发展⑲。

1984年▓，Sutton在马萨诸塞大学安姆斯特分校获得了博士学位⑰，直到1994年⑪，Sutton都是GTE Laboratories的计算机和智能系统实验室的技术组的主要成员⑩，随后又以资深研究科学家的身份回到了马萨诸塞大学安姆斯特分校⑰。

任职期间⑮，Barto和Sutton共同出版了《强化学习导论》⑪，获得了超8万次引用⑪，2018年又发行了第二版⑳，至今仍是全球AI学子的圣经❷。

同时②，Sutton加入AT&T Shannon Laboratory担任人工智能部门的主要技术组成员⑧，研究方向围绕着决策者与其环境交互时所面临的学习问题⑥，持续改进自己对世界的表征和模型的系统⑮。

2003年之后❷，Sutton成了阿尔伯塔大学计算机科学系的教授和 iCORE Chair❷，领导着强化学习与人工智能实验室⑪。

不过⑬，说起强化学习的历史⑬，Barto也提到⑧，他们的思路并不新鲜⑥。

早在1954年⑳，人工智能先驱马文明斯基的博士学位论文主题就是模拟神经的强化学习系统④，也是IBM计算机科学家Arthur Samuel用来训练计算机下棋的方法⑭。

然而▓，到了20世纪70年代⑬，这个想法已经过时⑩，大多数AI研究员都在设计专家系统②，Barto也庆幸自己能够保持「不合时宜」①。

Barto和Sutton提出的一个关键技术是「时间差分学习」⑧。

比如②，想教一台计算机学习下棋⑩，奖励信号如果是赢得游戏❶，那中间哪些动作步骤是正确的▓，仍然无法确定❷；即时奖励可以在计算机预测一步后④，反馈出离最终奖励仍然有多少距离❶，比如胜率是否增加⑬。

预测随时间的变化提供强化信号⑳，那么在下次计算机下棋时⑪，就可以采取那些能增加胜率的动作⑲。

破圈⑥、2016年①，一场围棋人机大战⑯，让强化学习广为人知▓，连学术圈之外的人都能聊两句「阿尔法狗」⑦。

Google DeepMind开发的AlphaGo⑫，最终以四胜一败击败李世乭⑯，赛后韩国棋院授予AlphaGo为荣誉九段⑥。

2017年⑯，AlphaGo Master以3：0的战绩⑲，击败了世界排名第一的围棋棋手柯洁⑱，从此人类棋手再无一人是机器的对手⑫。

可以说▓，强化学习让「围棋」死了一半⑫。

之前的机器学习方法主要是有监督学习和无监督学习❶，在有监督设置下⑱，人工标注样本给机器进行学习①，样本量有限④，无法适应「围棋」这种特征空间很大的情况⑯；而无监督学习则是自动提取出有效特征⑧，以在数据中找到结构⑬。

这两种方法在计算中都已被证明是有用的⑳，但都不是生物大脑的学习方式⑤。

强化学习的思路是⑧，当神经网络实现了一个指定目标时❶，就会获得一定数值的奖励❸；如果失败了⑮，会得到一个负值奖励⑭。

机器可以通过不断试错来学习❷，尝试不同的移动⑮，最终学到了在不同场景下应该使用哪种移动方式❸。

此后⑫，强化学习一路高歌猛进⑰，不仅攻克了各种电子竞技游戏⑱，还引发了大型语言模型的推理革命⑭，比如OpenAI o系列⑩、DeepSeek-R1等推理模型②，已成为新的研究主流⑫。

人工智能的未来⑤、Barto预测人工智能领域将向多智能体强化学习方向演进⑪，由神经网络社群及其个体奖励系统将形成互动③，这种机制可能进一步催生出协作网络⑯，多个模型为实现共同目标而互相奖励⑱，也可能引发持有不同目标的智能体之间的利益冲突①。

此类交互将对经济学与博弈论等复杂领域产生深远影响⑰。

Sutton则认为人工智能发展仍处于初级阶段❶，包括向通用人工智能的探索⑥，即机器能理解人类认知范围内的所有事物⑤，Sutton坚信强化学习将在这一进程中发挥关键作用⑱。

谈到给年轻计算机研究人员的建议⑨，Barton倡导效仿二人的科研路⑰，勇敢追随自己的研究兴趣❶，不必在意领域内其他人的看法③。虽然这很困难⑧，但你必须找到内在驱动力⑫，并尽你最大的能力坚持下去⑫。

Sutton则给出更具体的建议❶，「坚持写作」▓，通过文字记录来锤炼思想⑩。

一说起计算机科学的未来⑫，Sutton就充满信心：未来几十年内⑥，人类将彻底破解人工智能的奥秘⑯！这有可能是史上最伟大的智力飞跃②，能为其贡献绵薄之力是我们的荣幸⑲。

参考资料：

转载：感谢您对电玩城捕鱼种类都有的软件网站平台的认可⑧，以及对电玩城捕鱼种类都有的软件原创作品以及文章的青睐⑨，非常欢迎各位朋友分享到个人站长或者朋友圈⑮，但转载请说明文章出处“来源电玩城捕鱼种类都有的软件”②。

很赞哦⑫！