Shuler說：“傳感器融合是20世紀90年代出現的一種理念。你要把它變成機器可以處理的通用的數據格式。如果你在軍隊里，你擔心有人向你開槍。對于自動駕駛汽車而言，這就像面前有人推嬰兒車。所有這些系統都需要非常高的帶寬，并且都必須在其中內置安全措施。最重要的是，你必須保護數據，因為安全正在成為越來越大的問題。因此，你需要的是計算效率和編程效率。”

這是今天的許多設計中所缺少的，因為太多的開發是由現成的零件搭建的。

Cadence高級架構師以及深度學習小組總監Samer Hijazi說：“如果你優化網絡、優化問題、最小化位數，并使用為卷積神經網絡定制的硬件，那么你可以實現功率降低2~3倍的改進。效率來自軟件算法和硬件IP。”

谷歌正嘗試改變這個公式。谷歌開發了Tensor處理單元（TPU），這是專門為機器學習而創建的ASIC。為了加快AI的發展，谷歌在2015年開源了TensorFlow軟件。

其他公司擁有自己的平臺。但這些都不是最終產品。這是進化的過程，沒有人能確定未來十年AI將如何發展。部分是因為AI技術的使用案例正在逐漸被發現。在某個領域里有效的AI技術（如視覺處理）不一定適用于另一個領域（例如確定某種氣味是危險的還是安全的，抑或是二者的組合）。

NetSpeed Systems營銷和業務開發副總裁Anush Mohandass說：“我們在黑暗中摸索，我們知道如何做機器學習和人工智能，但卻不知道它們真正的工作方式。目前的方法是使用大量擁有不同計算能力和不同種類的計算引擎——用于神經網絡應用的CPU、DSP，你需要確定它是有效的。但這只是第一代AI。重點是計算能力和異構性。”

然而，隨著問題的解決變得更有針對性，這有望改變。就像早期版本的物聯網器件一樣，沒有人知道各類市場如何演變，因此系統公司投入了一切，并使用現有的芯片技術將產品推向市場。在智能手表的案例中，結果是電池充電后只能續航幾個小時。隨著針對這些特定應用的新芯片的開發，功耗和性能會實現平衡，方法是更有針對性的功能、本地處理與云處理之間更智能的分布、以及對于設計中的瓶頸的更深入的理解這三者的結合。

ARM模型技術總監Bill Neifert說：“我們的挑戰是找到未知的瓶頸和限制。但根據于工作負載，處理器與軟件的交互方式不同，軟件本質上是并行應用程序。因此，如果你正在考慮工作負載，如金融建模或天氣圖，它們強調基礎系統的方式是不同的。你只能通過深入探索來理解。”

Neifert指出，軟件方面需要解決的問題需要從更高層次的抽象來看，因為這使得它們更容易約束和修復。這是拼圖的一個關鍵部分。隨著AI進軍更多市場，所有這些技術都需要發展，以達到一般技術行業，特別是半導體行業的同等效率。

Mohandass說：“現在我們發現，如果他們只處理好一種類型的計算，那么架構就會很困難。但異構性的缺點是，將整體分而治之的方法變得土崩瓦解。因此，該解決方案通常涉及到超量供應或供應不足。”

新方法

隨著AI的應用案例超越了自動駕駛汽車領域，其應用將會擴展。

這就是為什么英特爾去年八月收購了Nervana。Nervana開發了2.5D深度學習芯片，該芯片利用高性能處理器內核，將數據通過中介層移動到高帶寬內存。 Nervana聲稱的目標是，與基于GPU的解決方案相比，該芯片訓練深度學習模型的時間將縮短100倍。

eSilicon營銷副總裁Mike Gianfagna說：“這些看起來很像高性能計算芯片，本質上是使用硅中介層的2.5D芯片。你將需要大量的吞吐量和超高帶寬內存。我們已經看到一些公司在關注它，但尚不足幾十家。它還為時尚早，實現機器學習和自適應算法，以及如何將這些與傳感器和信息流整合，是非常復雜的。例如自動駕駛汽車，它從多個不同的來源串流數據并添加自適應算法，以避免碰撞。”

Gianfagna表示，實現這些器件有兩個挑戰。其一是可靠性和認證。其二是安全。

對于AI，可靠性需要在系統級考慮，其中包括硬件和軟件。ARM在12月收購Allinea提供了一個參照。另一個參照來自斯坦福大學，研究人員試圖量化來自軟件的裁剪計算的影響。他們發現，大規模切割或修剪不會對最終產品產生顯著影響。加州大學伯克利分校已經開發了一個類似的方法，基于的計算接近100%的準確率。

正在研究節能深度學習的斯坦福大學博士研究生韓松說“與精粒修剪相比，粗粒修剪不會降低精度。”他表示，斯坦福開發的稀疏矩陣要求計算減少10倍，內存占用減少8倍，比DRAM的能耗減少120倍。它應用于斯坦福所謂的高效語音識別引擎，壓縮導致了推理過程的加快。（Cadence最近的嵌入式神經網絡峰會上提出了這些發現。）

量子計算為AI系統增加了另一個選擇。 Leti首席執行官Marie Semeria表示，量子計算是她的團隊未來的方向之一，特別是AI應用。IBM Research的科學與解決方案團隊副總裁Dario Gil解釋說，使用經典計算，如果四張卡片三藍一紅，那么有四分之一的機會猜中那張紅色的卡片。使用量子計算機和量子比特的疊加和糾纏，通過扭轉糾纏，系統每次都會給出正確答案。

結論

AI不是一件事，因此沒有單一的系統在任何地方都能完美地工作。但AI系統有一些通用要求，如下圖所示。

AI在許多市場都有應用，所有這些都需要廣泛的改進、昂貴的工具，以及支持它們的生態系統。經過多年來依靠萎縮器件來提高功率、性能和成本，如今整個市場部門都在重新思考如何進入新市場。這對于架構師來說是一個巨大的勝利，這為設計團隊增加了巨大的創造性選擇，也將刺激從工具和IP供應商一直到包裝和流程開發的巨大發展。這就像為技術行業按下了重啟按鈕，可以證明，這對于未來整個生態系統的業務都是有益的。