AI 論文只寫 8 頁就得了年度最佳獎，Google 大腦團隊領導人 Jeff Dean 到底有多強？
https://buzzorange.com/techorange/2018/08/29/jeff-dean-in-the-house/
22 歲時，你在幹嘛？
這兩天，現任 Google AI 掌門，傳奇一般的 Jeff Dean，再次收穫膜拜和引發熱議。全
因他的大學畢業論文首次曝光。
這篇論文只有 8 頁。
卻成為 1990 年的最優等大學論文，被明尼蘇達大學圖書館保存至今。
同時這篇論文表明，整整 28 年前，Jeff Dean 已經在用 C 語言，為神經網絡編寫並行
計算的代碼。
拜 Jeff Dean 教的眾人又沸騰了。
僅 8 頁的論文，卻拿下最優等論文
有位大概很年輕的網友，看了論文之後在 HackerNews 上發出感慨：不可思議，Jeff
Dean 在 1990 年就開始對神經網絡感興趣。
一句話，引來眾多科普和追憶。總結起來，就是當時神經網絡正當紅。
有人感慨：「神經網絡那時候是一件大事，在 1980 年代後期非常熱門，那真是一段美好
的時光。」
1990 年，正值第二次 AI 寒冬之前，當時，神經網絡、Prolog、LISP 語言、模糊邏輯都
正在流行，ANN 還沒有被 SVM 等超越，日本在 AI 領域還大有趕超美國之勢。
後來成為 Jeff Dean 同事（實習生 ^_^）的神經網絡之父 Geoffrey Hinton，當時也已
經有很多重要研究發表，反向傳播也出現了。
Jeff Dean 這篇論文提到的兩種並行訓練方法，就都是基於反向傳播的。
網友@silverlake 說，「我幾乎與 Dean 同齡，我的本科項目是用遺傳算法改進神經網絡
。當時人工智能很流行，但不久之後冬天來了。」
1990 年代早期，對神經網絡和機器學習來說是一段非常有趣的日子。當時物體識別、手
寫識別等都有出現，所有進展都在快速推進，但很快資金撤走了，項目全都陷入困頓。
「幸好後來 GPU、深度反向傳播的出現，數據量開始爆炸之後，神經網絡捲土重來。」網
友@dekhn 說。而對於那些在第二次 AI 寒冬中堅守至今的人來說，顯然已經得到了應有
的回報。
回憶往事之外，不少人得出類似 不忘初心，方得始終 的結論。
比方 Jeff Dean 大學畢業論文中研究的問題，被指仍然是今天 TensorFlow 的重大問題
之一。
「真正有趣和創新的早期工作，我認為這也解釋了為什麼 TensorFlow 不支持層內模型並
行。令人驚訝的是，早期的經歷對我們的影響有多大。」網友 @scottlegrand2 評價。
確實如此。實際上大學畢業之後，Jeff Dean 並沒有一直沿著 AI 的方向繼續研究下去。
隨後他的興趣轉向編寫高級面向對象語言的編譯器，並且在這個領域取得博士學位。
「然而那一絲覺得神經網絡很有意思的感覺，從來沒有真正消失過」，於是後來 Jeff
Dean 又在 Google 內部主導神經網絡、人工智能的研究，並且和吳恩達、Greg Corrado
共同發起成立了 Google Brain 項目並且擔任負責人。
有人評價說，Jeff Dean 是一位具有編譯器優化專業知識的計算機科學家，而
TensorFlow 本質上是一種將神經網絡加速，轉化為與編譯器優化相關問題的嘗試。
Jeff Dean 是誰？他可是 Google 的基石
1969 年生，49 歲。
1996 年博士畢業於華盛頓大學計算機系 (UW）。
美國國家工程院院士，ACM Fellow，AAAS Fellow。
1999 年加入初創期的 Google，設計並部署了 Google 廣告、抓取、索引和查詢服務系統
的大部分內容，以及位於 Google 大部分產品下方的各種分佈式計算基礎架構，也是
Google 新聞、Google 翻譯等產品的開發者。
發起創辦了 Google 大腦（Google Brain Team）。
發起打造了目前全球份額第一的深度學習框架平台 TensorFlow。
雖然官方 title 是 Google 高級研究員，但 Jeff Dean 在 Google 的地位僅次於創始人
拉里·佩奇和謝爾蓋·布林。
在 2018 年 4 月，Google 內部架構調整，Jeff Dean 接管 Google 整個 AI 業務和團隊
，據稱座位也與 Google 現任 CEO Pichai 相鄰。
Jeff 到底是一個多神的人？
當然，如果你對這位低調的大神瞭解有限，是時候又要祭出圈內口口相傳的 Jeff Dean
的段子集了。
我們也當面向 Jeff 轉述過這些軼聞，他當時笑著回答說：謝謝大家的喜愛。
一起來看看這些軼聞吧：
During his own Google interview, Jeff Dean was asked the implications if P=NP
were true. He said, “P = 0 or N = 1.” Then, before the interviewer had even
finished laughing, Jeff examined Google’s public certificate and wrote the
private key on the whiteboard.
當他被 Google 面試時，Jeff Dean 被問及如果 P=NP 意味著什麼。他說，「P=0 或者
N=1」。然後，在所有的面試官還沒笑完之前，Jeff 瞄了一眼 Google 的公共證書然後在
白板上寫上了對應的私鑰。
Compilers don’t warn Jeff Dean. Jeff Dean warns compilers.
編譯器從來不給 Jeff 編譯警告，而是 Jeff 警告編譯器。
--
https://buzzorange.com/techorange/2018/08/29/jeff-dean-in-the-house/
22 歲時，你在幹嘛？
這兩天，現任 Google AI 掌門，傳奇一般的 Jeff Dean，再次收穫膜拜和引發熱議。全
因他的大學畢業論文首次曝光。
這篇論文只有 8 頁。
卻成為 1990 年的最優等大學論文，被明尼蘇達大學圖書館保存至今。
同時這篇論文表明，整整 28 年前，Jeff Dean 已經在用 C 語言，為神經網絡編寫並行
計算的代碼。
拜 Jeff Dean 教的眾人又沸騰了。
僅 8 頁的論文，卻拿下最優等論文
有位大概很年輕的網友，看了論文之後在 HackerNews 上發出感慨：不可思議，Jeff
Dean 在 1990 年就開始對神經網絡感興趣。
一句話，引來眾多科普和追憶。總結起來，就是當時神經網絡正當紅。
有人感慨：「神經網絡那時候是一件大事，在 1980 年代後期非常熱門，那真是一段美好
的時光。」
1990 年，正值第二次 AI 寒冬之前，當時，神經網絡、Prolog、LISP 語言、模糊邏輯都
正在流行，ANN 還沒有被 SVM 等超越，日本在 AI 領域還大有趕超美國之勢。
後來成為 Jeff Dean 同事（實習生 ^_^）的神經網絡之父 Geoffrey Hinton，當時也已
經有很多重要研究發表，反向傳播也出現了。
Jeff Dean 這篇論文提到的兩種並行訓練方法，就都是基於反向傳播的。
網友@silverlake 說，「我幾乎與 Dean 同齡，我的本科項目是用遺傳算法改進神經網絡
。當時人工智能很流行，但不久之後冬天來了。」
1990 年代早期，對神經網絡和機器學習來說是一段非常有趣的日子。當時物體識別、手
寫識別等都有出現，所有進展都在快速推進，但很快資金撤走了，項目全都陷入困頓。
「幸好後來 GPU、深度反向傳播的出現，數據量開始爆炸之後，神經網絡捲土重來。」網
友@dekhn 說。而對於那些在第二次 AI 寒冬中堅守至今的人來說，顯然已經得到了應有
的回報。
回憶往事之外，不少人得出類似 不忘初心，方得始終 的結論。
比方 Jeff Dean 大學畢業論文中研究的問題，被指仍然是今天 TensorFlow 的重大問題
之一。
「真正有趣和創新的早期工作，我認為這也解釋了為什麼 TensorFlow 不支持層內模型並
行。令人驚訝的是，早期的經歷對我們的影響有多大。」網友 @scottlegrand2 評價。
確實如此。實際上大學畢業之後，Jeff Dean 並沒有一直沿著 AI 的方向繼續研究下去。
隨後他的興趣轉向編寫高級面向對象語言的編譯器，並且在這個領域取得博士學位。
「然而那一絲覺得神經網絡很有意思的感覺，從來沒有真正消失過」，於是後來 Jeff
Dean 又在 Google 內部主導神經網絡、人工智能的研究，並且和吳恩達、Greg Corrado
共同發起成立了 Google Brain 項目並且擔任負責人。
有人評價說，Jeff Dean 是一位具有編譯器優化專業知識的計算機科學家，而
TensorFlow 本質上是一種將神經網絡加速，轉化為與編譯器優化相關問題的嘗試。
Jeff Dean 是誰？他可是 Google 的基石
1969 年生，49 歲。
1996 年博士畢業於華盛頓大學計算機系 (UW）。
美國國家工程院院士，ACM Fellow，AAAS Fellow。
1999 年加入初創期的 Google，設計並部署了 Google 廣告、抓取、索引和查詢服務系統
的大部分內容，以及位於 Google 大部分產品下方的各種分佈式計算基礎架構，也是
Google 新聞、Google 翻譯等產品的開發者。
發起創辦了 Google 大腦（Google Brain Team）。
發起打造了目前全球份額第一的深度學習框架平台 TensorFlow。
雖然官方 title 是 Google 高級研究員，但 Jeff Dean 在 Google 的地位僅次於創始人
拉里·佩奇和謝爾蓋·布林。
在 2018 年 4 月，Google 內部架構調整，Jeff Dean 接管 Google 整個 AI 業務和團隊
，據稱座位也與 Google 現任 CEO Pichai 相鄰。
Jeff 到底是一個多神的人？
當然，如果你對這位低調的大神瞭解有限，是時候又要祭出圈內口口相傳的 Jeff Dean
的段子集了。
我們也當面向 Jeff 轉述過這些軼聞，他當時笑著回答說：謝謝大家的喜愛。
一起來看看這些軼聞吧：
During his own Google interview, Jeff Dean was asked the implications if P=NP
were true. He said, “P = 0 or N = 1.” Then, before the interviewer had even
finished laughing, Jeff examined Google’s public certificate and wrote the
private key on the whiteboard.
當他被 Google 面試時，Jeff Dean 被問及如果 P=NP 意味著什麼。他說，「P=0 或者
N=1」。然後，在所有的面試官還沒笑完之前，Jeff 瞄了一眼 Google 的公共證書然後在
白板上寫上了對應的私鑰。
Compilers don’t warn Jeff Dean. Jeff Dean warns compilers.
編譯器從來不給 Jeff 編譯警告，而是 Jeff 警告編譯器。
--
All Comments