今天是我在 @GoogleDeepMind 的最后一天。 在谷歌工作了将近整整 10 年,包括 12 次实习和最后 2 年半的全职工作,真的感觉像是一个章节即将结束。我对在谷歌和 DeepMind 所获得的所有经历和结交的朋友心怀感激。 我仍然记得我在 2016 年与 James Davidson 和 @V_Vanhoucke 一起在山景城的第一次 Brain 实习,那时没有人有一个可用的 PPO 实现,我们正在与 TensorFlow 图形作斗争 😄 当 @lukaszkaiser 向我们展示第一个由 "大" LSTM 生成的合理维基百科页面时的那一刻。@ashVaswani 充满兴奋地解释一种新架构的计算效率,后来成为了 Transformer,并让我尝试将其用于 RL(我没有 :P) 在伦敦攻读硕士期间,兴奋地在 DeepMind 从事深度 RL 和生成模型的工作,这最终与 @countzerozzz 和 @itfische 一起变成了 PlaNet。与 Nicolas Heess 和 @AdaptiveAgents 一起弄清楚 Karl Friston 的自由能原理(这花了更多的时间才搞明白)。 在多伦多的 Brain Team 度过了我博士生涯的很大一部分,与 @mo_norouzi 一起研究多个版本的 Dreamer,进行各种合作,并与 @geoffreyhinton 一起庆祝图灵奖。 在过去的几年里,感谢 @countzerozzz 和 @koraykv 的支持,我在伯克利/SF 从事世界模型的工作,看到视频模型和世界模型取得的成果在几年前看起来完全不可及。 带着复杂的心情,但也充满期待,是时候开始新的篇章了!