離 2019 年還剩不到 1 個月的時間了。這幾年來，每個年初本文作者 Carlos E. Perez 都對預測當年深度學習的趨勢做預測，到年底再對預測進行回顧，今年亦不例外。本文是他對 2018 年深度學習預測的回顧，目的是量化深度學習的快速發展。通過回顧預測，對比新的一年的進展，我們可以了解這個領域發展到底有多快。

本文將回顧我對 2018 年深度學習的預測，并對這一年的進展進行評論：

注：

作者對 2018 年深度學習的預測見：【2018深度學習10大警示】多數芯片公司將破產；自我對弈可自動創造知識

1.多數深度學習硬件初創公司都將失敗

2018 年，深度學習硬件公司中，公開承認失敗的公司沒幾家（有一家公司已宣稱失敗：KnuEdge），但是它們都還沒有交付產品。有意思的是，盡管這些初創公司未能交付產品，卻仍然能夠籌集到更多的資金！

注：

這里有一份人工智能硬件初創公司列表：

https://github.com/basicmi/AI-Chip-List

去年我的觀點是，深度學習初創公司將無法正確地估計自己可以為自己的潛在的客戶群提供多少可用軟件的成本。隨著深度學習堆棧變得越來越豐富、越來越復雜，初創公司還能迎頭趕上嗎？這是個疑問。

最大的失敗來自 Intel。在 NIPS 2017 大會上，它們不是大張旗鼓地宣揚最終將提供硅片嗎？今年，它們的 Nervana 衍生產品是 MIA。它們是否能夠在明年春天之前推出 “Spring Crest”？讓我們拭目以待。

有多家初創公司都號稱自己有可用的硅片。深度學習人工智能如此熱門，每個人都想 “發明” 自己的芯片。簡單列舉一下，這些初創公司包括：GraphCore、Wave Computing、Groq、 Habana、Bitmain、Cabricon、Esperanto、Novumind、Gryfalcon、Hailo 和 Horizon。這還沒算上三星、ARM、Xilinx、高通和華為等傳統半導體制造商。另外有一個新情況是，現在傳統的云服務供應商并不是購買 AI 芯片，而是研發自己的 AI 芯片：比如 Amazon 的 Inferentia、Microsoft 的 Brainwave、Facebook、阿里巴巴的 AliNPU 和百度的昆侖。芯片領域將很快就會變得擁擠起來！

現在的情況是，深度學習硬件由極其龐大且有能力的公司來主導：Nvidia 和 Google。雖然你無法得到 Google TPU2 的物理硬件，但你可以通過云服務對 Google TPU2 進行虛擬訪問。相比之下，Nivida 提供了云計算（通過第三方云服務供應商）和硬件的兩種可用選項。

能夠與這兩大巨頭進行競爭的供應商是 AMD。AMD 支持最新版本的 TensorFlow，并且擁有逐漸成熟的深度學習堆棧。與 Nvidia 和 Google 不同，它們缺少 Tensor 核心組件（即 Systolic Array（脈動陣列））。但對更為傳統的訓練和推理工作來說，AMD 的硬件性能可與 Nvidia 媲美。這聽上去可能會覺得沒什么大不了的，但是你要知道，AMD 已經遙遙領先于任何其他初創公司的競爭對手。AMD 和 Nvidia 有著相似的規模經濟，因為它們的大部分硅片都是用于日常性用途（即游戲、渲染、高性能計算等）。

老實說，這個領域有太多的追隨者。成熟的深度學習市場可能只支持不超過 3 個競爭對手。Nvidia 和 Google 早已鞏固它們在市場的地位，如此一來，就只剩下一個空位了！為了生存下去，公司必須使解決方案的部署盡可能簡單容易、暢行無阻。此外，每家公司必須讓自己的產品具有自己的特色——不要每家公司都去做圖像處理！為了能夠有效地提供無縫體驗、同時建立起自己的市場定位，這些公司必須在軟件方面進行投資（順便說一句，我也正尋找硬件公司里的相關職位）。

2. 元學習將成為新的 SGD

元學習（Meta-learning）還沒有取代 SGD（Stochastic Gradient Descent，隨機梯度下降），但以神經架構搜索形式的元學習在這一領域中已經取得巨大的進步。本年的一個關鍵的進展與超網絡（Hypernetwork）搜索有關。請參閱 Medium 上的博文：

《Deep Learning Architecture Search and the Adjacent Possible》（《深度學習架構搜索及相鄰可能》）

https://medium.com/intuitionmachine/deep-learning-to-forget-or-not-forget-c8b7843479dd

我們在元學習中取得的另一個進步是在算法方面，它的靈感來自于少量學習（few-shot learning）MAML。這催生了各種算法：Reptile、PROMP 和 CAML。元學習方法需要大量的訓練數據，這是因為它是在各種各樣的任務中學習，而不僅僅是在不同的樣本中學習。它有兩個用于學習的迭代循環，一個是迭代任務的外部學習循環，一個是迭代訓練數據的內部循環。基于 MAML 的方法只考慮任務的初始化，因此不需要可比較相同類型的數據。

Reptile：https://blog.openai.com/reptile/

PROMP：https://arxiv.org/pdf/1810.06784.pdf

CAML：https://arxiv.org/pdf/1810.03642.pdf

我現在開始認為，無監督學習和元學習實際上是同一個問題。進化解決這個問題的方法是通過踏腳石（stepping stone ）技能的發展。這意味著它完全取決于正在解決的問題的類型：是用于預測，自助控制，還是生成設計的無監督學習或元學習任務？每一種問題都需要不同的基本技能，因此可以訓練一個聚合的基本模型，而不是每一個任務都從頭訓練。引導是一種虛構的方法，它吸引了那些相信可以通過數學來拯救世界的研究人員。

注：

關于作者提及的無監督學習和元學習實際是同一個問題，可參閱論文《Unsupervised Learning via Meta-learning》（《通過元學習進行無監督學習》）

https://arxiv.org/pdf/1810.02334.pdf

總而言之，在 2018 年看來最有前途的兩種元學習方法是進化啟發的架構搜索和少量學習 MAML 方法。

3. 生成模型驅動一種新的建模方式

目前，生成模型仍然主要局限于娛樂應用。當然，BigGAN 搜索創建了很多噩夢般的圖像，但不幸的是，使用高保真生成模型來取代標準計算方法的研究仍然在進行。

BigGAN 創建的圖像可見：https://www.fastcompany.com/90244767/see-the-shockingly-realistic-images-made-by-googles-new-ai

DeepMind 研究蛋白質折疊已有兩年，他們剛剛在 12 月份公布了研究成果：

《AlphaFold: Using AI for scientific discovery》（《AlphaFold：使用人工智能進行科學發現》）

https://deepmind.com/blog/alphafold/

DeepMind 訓練了一個生成神經網絡來編造新的蛋白質片段，這些蛋白質片段隨后被用來不斷提高所提議的蛋白質結構的得分。這是生成網絡最令人印象深刻的用途之一，超越了圖像、3D 結構或聲音的美學生成。

關于該領域的詳細信息，請參閱 Medium 上的博文：

《The Delusion of Infinite Precision Numbers》（《無窮精度數的迷惑》）

https://medium.com/intuitionmachine/the-delusion-of-infinite-precision-numbers-add501a1518d

4. 自我對決是一種自動化的知識創造

AlphaGo 引入的自我對決（Self-play）方法在應用程序使用方面上，并沒有深入人心。然而在研究中，OpenAI 的 Dota Five 已經證明，自我對決可以解決一個非常困難的 AI 問題（即，即時戰略游戲）。阻止這種使用的主要障礙似乎是在這種場景中框架問題的困難，以及現實問題中存在的多種不確定性。

深度強化學習（Deep Reinforcement Learning）在 2018 年遭到了很多嚴厲的批評，但是 OpenAI 的 Ilya Stuskever 卻對 Dota Five 看似無限的深度強化學習可擴展性非常著迷，他比大多數人更早如此預測通用人工智能，見 Medium 這篇博文：

《Why AGI is Achievable in Five Years》（《為什么通用人工智能在五年內能夠實現》）

https://medium.com/intuitionmachine/near-term-agi-should-be-considered-as-a-possibility-9bcf276f9b16

盡管強化學習可擴展性得到了明顯的驗證，仍然有一些新論文對深度強化學習的穩健性提出了質疑，如論文《Are Deep Policy Gradient Algorithms Truly Policy Gradient Algorithms?》（《深度策略梯度算法是否真的是策略梯度算法？》https://arxiv.org/abs/1811.02553v2）

我個人傾向于支持內在激勵方法而不是深度強化學習方法。原因在于，大多數難題的回報函數（reward）都是稀疏的，有些還具有欺騙性。

5. 直覺機器將縮小語義鴻溝

當 Yoshua Bengio 開始使用雙重過程理論（Dual Process theory）來解釋深度學習的局限性時，你就知道他在正確的軌道上。

因此，深度學習機器就是人工直覺（Artificial intuition）的想法，在 2018 年已經成為主流。雖然，雙重過程理論是人類思維的一個很好的模型，但我們需要更充分地理解直覺思維的豐富性（System 1），直覺思維不僅僅是快速思考，也不僅僅是攤銷推理（Amortized inference）。人類大腦中有很多東西我們還沒有在深度學習中復制出來，請參閱 Medium 上的這篇博文：

《Where is the Artificial Ingenuity in Deep Learning?》（《深度學習里的人工智能在何處？》）

https://medium.com/intuitionmachine/the-key-to-general-intelligence-is-the-mechanism-of-artificial-ingenuity-dad26bc99043

6. 可解釋性是無法實現的

現在的問題是，總體來說，我們在理解深度學習網絡的本質方面并沒有取得任何進展。越來越多的和我們認知相悖的研究被發布出來，打破了我們關于深度學習網絡應該如何工作的理論。DeepMind 就拋出了一個打破認知的 “破壞性” 研究成果：

《Deep Learning’s Uncertainty Principle》（《深度學習的不確定性原理》）

https://medium.com/intuitionmachine/deep-learnings-uncertainty-principle-13f3ffdd15ce

接著就是神經網絡的對抗性重編程（Adversarial Reprogramming），論文《Adversarial Reprogramming of Neural Networks》（《神經網絡的對抗性重編程》https://arxiv.org/abs/1806.11146）證明了可以使用對抗特征來對神經網絡進行重編程。在論文中他們演示了如何破壞在 Imagenet 中訓練的 MNIST 分類網絡：

神經網絡內部發生了什么，我們對其的理解仍然是遠遠不夠的。

至于如何做出直觀的解釋，我認為這仍然是一個 “富饒” 的領域，還需要進行更多的研究。2018 年是暴露出許多深度學習局限性的一年，在這一年里，我們在開發更好的人機界面方面的進展并不大。請參閱 Medium 的這篇博文：

《Fake Intuitive Explanations in AI》（《人工智能中虛假直覺的解釋》）

https://medium.com/intuitionmachine/achieving-fake-explanations-in-ai-5e63b289a3ef

7. 深度學習研究信息泛濫成災

今年，關于深度學習的論文數量翻了一番。更槽糕的是，審稿人的素質卻在急劇下降。因此，雜訊比已跌至谷底。現在，每個人都需要在堆積如山的新研究論文中為自己篩選出真正有價值的研究。有些工具，如 SemanticScholar、Arxiv Sanity 和 Brundage Bot 等論文網站都可以用來幫助你了解其中的大量信息。只是那些真正新穎的發現，卻太容易成為 “漏網之魚”，讓人錯過。

8. 通過教學環境實現工業化

深度學習在工業化方面，并沒有進展。

2018 年是人工智能結盟問題變得更加清晰的一年。

人工智能結盟對人工智能教學環境至關重要。目前有幾個團隊已經發布了他們的框架，這些框架可以在強化學習實驗中提供更好的再現性（參見：Facebook Horizon、OpenAI Baselines、DeepMind TRFL）。

Facebook Horizon：https://code.fb.com/ml-applications/horizon/

OpenAI Baselines：https://github.com/openai/baselines

DeepMind TRFL：https://deepmind.com/blog/trfl/

我們已經目睹了遷移學習從虛擬環境到真實環境的進展（參見：OpenAI Learning Dexterity，（https://blog.openai.com/learning-dexterity/））。我們還見證了通過稀疏回報來教授復雜技能的進展，請參閱 Medium 上的這篇博文：

《How to Bootstrap Complex Skills with Unknown Rewards》（《如何使用未知回報引導復雜技能》）

https://medium.com/intuitionmachine/how-to-learn-complex-skills-with-unknown-rewards-27a105429e6b

9. 會話認知

我最終描繪了一幅如何獲得會話認知更為清晰的路線圖。不幸的是，表中提到的 “達到第三階段” 意味著必須完成這份列表中的第 5 項，而這在未來幾年內不太可能發生。因此，在未來幾年內人們不大可能會獲得會話認知。唯一的好處就是，這種認知概念已經被認可。也就是說，它已成為一個已知的未知。

作者提到的路線圖，參閱：https://medium.com/intuitionmachine/conversational-cognition-a-new-approach-to-agi-95486ffe581f

要了解其中的重要發展節點，參閱：

《A New Capability Maturity Model for Deep Learning》（《一種新的深度學習能力成熟度模型》）

https://medium.com/intuitionmachine/an-advanced-capability-maturity-level-for-artificial-general-intelligence-b300dafaca3f

10. 人工智能的道德應用

人們終于意識到這個問題了！最值得注意的是，美國加利福尼亞州議會要求，聊天機器人必須主動聲明它們不是人類。

法國人感到驚慌失措，于是制定了 “人類的人工智能”（AI for Humanity）計劃，有關詳情，請參見 Medium 這篇博文：

《Six Months Later, France has Formulated their Deep Learning Strategy》（《六個月后，法國制定了深度學習戰略》）

https://medium.com/intuitionmachine/six-months-later-france-has-released-their-deep-learning-strategy-d2cbf18927d

在人工智能武器化方面上，許多公司也已經劃清了界限：

《Drawing the Ethical Line on Weaponized Deep Learning Research》（《為深度學習研究武器化劃定道德底線》）

https://medium.com/intuitionmachine/drawing-the-ethical-line-on-weaponized-a-i-research-316e865e9d18

當然，問題在于，我們的經濟體系更傾向于給人工智能賦予 “人格”，而不是“制造” 真正的人類。詳情請參閱 Medium 這篇博文：

《Artificial Personhood is the Root Cause Why A.I. is Dangerous to Society》（《人工人格是人工智能危害社會的根本原因》）

最終，對于人工智能研究人員來說，他們必須決定自己是想一輩子向孩子們出售糖水呢，還是做一些真正有意義的事情，請參閱 Medium 上的這篇博文：

《Is the Purpose of Artificial Intelligence to Sell Sugar Water?》（《人工智能的目的是出售糖水么？》）

https://medium.com/intuitionmachine/is-the-purpose-of-ai-to-sell-sugar-water-e6466d574ec0

結語

總之，回顧 2018 年，對于我年初做出的預測，現在看來，很多都做過了頭。

鑒于此，我必須降低對 2019 年的期望。

我們開始意識到，在指定回報函數并基于這些回報進行優化的整個機器學習范式中，存在著重大的復雜性問題。這種學習范式只會讓你的系統學會利用回報函數。很多時候，盡管看似取得了明顯的進展，但底層系統學會的往往只是在測試中作弊。這是一個元級別的問題，不可能一蹴而就。在提高課程學習質量方面，我們充其量只能取得漸進式的進步。

《Fooled by the Ungameable Objective》（《不可玩目標的愚弄》）

https://medium.com/intuitionmachine/the-illusion-of-the-ungameable-objective-538a96a53efe

注：其中 “Ungameable” 是作者生造的詞，用來形容一套沒有任何漏洞的規則。譯者進行了意譯。

請繼續關注我對 2019 年的深度學習預測。