Dnes je můj poslední den v @GoogleDeepMind. Po téměř přesně 10 letech v Googlu, včetně 12 stáží a posledních 2 1/2 roku na plný úvazek, to opravdu vypadá, jako by se jedna kapitola chýlila ke konci. Jsem vděčný za všechny zkušenosti a přátele, které jsem získal v Googlu a DeepMind. Stále si pamatuji na svou první stáž v Brain v Mountain View v roce 2016 s Jamesem Davidsonem a @V_Vanhoucke, v době, kdy nikdo neměl funkční implementaci PPO a my jsme se hádali s grafy 😄 TensorFlow V tomto okamžiku nám @lukaszkaiser ukázal první věrohodnou stránku Wikipedie vygenerovanou "velkým" LSTM. @ashVaswani plný vzrušení vysvětloval výpočetní efektivitu nové architektury, ze které se později stal Transformer, a žádal mě, abych to vyzkoušel pro RL (nevyzkoušel jsem :P) Nadšení z práce na Deep RL a generativních modelech ve společnosti DeepMind během mého magisterského studia v Londýně, které se s @countzerozzz a @itfische proměnilo v PlaNet. Přijít na princip volné energie Karla Fristona s Nicolasem Heessem a @AdaptiveAgents (což trvalo ještě několik let, než jsme to udělali správně). Velkou část svého doktorátu jsem strávil v Brain Teamu v Torontu, kde jsem s @mo_norouzi pracoval na několika generacích Dreameru, různých spolupracích a oslavoval jsem s @geoffreyhinton Turingovu cenu. A během posledních několika let práce z Berkeley/SF na světových modelech s @wilson1yan s významnými zdroji díky @countzerozzz a @koraykv, a viděl jsem video modely a světové modely dosahovat výsledků, které se ještě před několika lety zdály být zcela nedosažitelné. Se smíšenými pocity, ale také vzrušením, je čas začít novou kapitolu!