变形金刚时代真要来临？斯坦福大学首发Transformers课程！-技术圈

点蓝色字关注“机器学习算法工程师”

设为星标，干货直达！

据了解，这是首个关于 Transformers 的专题课程。

要说在世界大学公开课中哪些属于精品，斯坦福大学的 CS 课程可谓是榜上有名。这所世界名校先后免费公开了众多课程，有关于自然语言理解的、有关于机器学习的等等。

斯坦福大学的 CS 课程可以说是覆盖范围广，今天他们又上线了一门经典课程：《CS 25: Transformers United》，据了解这是首个关于 Transformers 的课程。

自 2017 年推出以来，Transformer 彻底改变了自然语言处理 (NLP)领域。现在，Transformer 在深度学习中被广泛使用，无论是计算机视觉 (CV)、强化学习 (RL)、生成对抗网络 (GAN)、语音甚至是生物学。除此之外，Transformer 还能够创建强大的语言模型（如 GPT-3），并在 AlphaFold2 中发挥了重要作用，该算法解决了蛋白质折叠问题。

可能是意识到 Transformer 带来的一系列技术突破，又或者其他原因，总之斯坦福 CS 25 课程诞生了。这门课程的重点就是介绍 Transformers，并统一其在 ML、CV、NLP、生物学和其他社区的使用。此外，该课程还讨论关于 Transformer 的最新突破和想法，以激发交叉合作研究。

不过，想要学习这门课程的小伙伴，必须先要掌握深度学习基础知识（必须理解注意力机制），或者已经通过 CS224N / CS231N / CS230 课程。

从下周开始，CS 25 将每天公布课程内容，目前已放出第一个视频：介绍 Transformer。

视频链接：https://www.youtube.com/playlist?list=PLoROMvodv4rNiJRchCzutFw5ItR_Z27CM

在今天公布的第一节课中，讲师为斯坦福大学硕士生 Divyansh Garg、软件工程师 Chetanya Rastogi（毕业于斯坦福大学）、软件工程师 Advay Pal（毕业于斯坦福大学）。

此外，第一节课的指导教授为 Christopher Manning，他是斯坦福大学计算机与语言学教授，也是将深度学习应用于自然语言处理领域的领军者。

从之前的课程描述来看，CS 25 课程邀请了来自不同领域关于 Transformer 研究的前沿人士进行客座讲座。OpenAI 的研究科学家 Mark Chen，主要介绍基于 Transformers 的 GPT-3、Codex；Google Brain 的科学家 Lucas Beyer，主要介绍 Transformer 在视觉领域的应用；Meta FAIR 科学家 Aditya Grover，主要介绍 RL 中的 Transformer 以及计算引擎等。

值得一提的是，AI 教父 Geoff Hinton 也带来了一次讲座。