色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

算力荒緩解,自主化智算還有必要嗎?

腦極體 ? 來源:腦極體 ? 作者:腦極體 ? 2024-12-23 11:01 ? 次閱讀

wKgZPGdo0nWALojkAAqPBb7uwEU656.jpg

2023年大煉模型興起,全球范圍內都出現了算力供不應求、一卡難求的情況。各地紛紛興建數據中心、智算中心,來解決國產大模型的算力短缺問題。

今年算力市場又倒向了另一個方向,算力開始過剩和大量閑置了。

主要體現在,高端顯卡囤積居奇的生意不好做了,“GPU倒爺”的朋友圈已經從“欲購從速,過時不候”,變成了“A100/H100滯銷,幫幫我們”。而算力租賃市場,理想情況下的上架率應該是80%,但很多集群只能達到30%甚至更低,投入大量資金建設的算力閑置,租不出去。

于是一種聲音開始甚囂塵上,認為算力荒已經緩解了,供過于求,應該放慢自主化智算的建設。還有人說,智算中心建的太多了,大模型都用不完了。

發展自主化智算,到底還有沒有必要?

wKgZPGdo0naAdNk3AAJhzAurqOk162.jpg

還記得2023年算力荒焦灼、智算建設突飛猛進的時候,倪光南院士曾提到過:各地盲目建設各種低水平智算中心,讓人唏噓不已,一定要警惕“技術房地產”和“數字爛尾樓”。所謂“技術房地產”,就是算力資源賣不出去,只能變成一堆放著服務器的磚頭水泥房子,閑置在那里。

短短一年多時間,從算力短缺到算力過剩,究竟是怎么發生的?目前來看,閑置算力主要集中在三種情況:

1.用不起。英偉達的高端顯卡GPU是AI訓練的首選,2023年一度一卡難求。以N卡為主的智算資源閑置,一是因為巨頭們此前已經大量囤積采購了GPU,需求減少;二是炒作之后價格昂貴,即使價格回落,中小企業還是用不起。在很多討論“算力過剩”的評論區,我們總能看到“降價試試”的留言,說明高端AI算力的需求仍在,只是昂貴的N卡被價格勸退了。

2.不好用。國產卡組成的算力集群,也存在上架率不高、資源閑置的問題,主要是不好用。因為國產卡的集中度不高,一個千卡或萬卡集群,往往是由各類國產算力卡組成的,異構算力之間的協同調度,涉及大量工程化細節,沒有做好就無法開箱即用。勉強用了,又時不時出現業務中斷、算效不高、恢復訓練慢等各種問題,導致客戶流失。這類被迫閑置的國產算力,正是沒有考慮配套,盲目建設的低水平智算中心。

3.用不上。“百模大戰”之后,企業不再大煉模型,預訓練的算力需求也就大幅下降,算力市場開始轉向以推理算力為主。但推理市場的爆發,需要一個過程,目前AI的行業滲透率還比較低,總體不到10%,很多企業對AI的投入以嘗試為主,還沒有大規模爆發。所以,訓練用算力開始出現閑置,而推理用算力還未大規模崛起,因此短缺問題尚未完全顯現。

低水平算力的閑置與過剩,再一次警醒我們:一個繁榮健康的算力市場,關鍵不是建出來,而是用起來。

wKgZPGdo0naAC-z0AAH4xXRpIuk209.jpg

這種情況下,仍然大力發展自主化智算,還有必要嗎?

我們認為,這個問題的答案不該有猶豫,要旗幟鮮明地,鼓勵自主化智算基礎設施的繼續建設、加速建設。

首先,從長期看,國內智算屬于后發,基礎仍然薄弱。

中國智算的進步速度是很快的,但也要客觀看到,美國這樣的IT先行者,從20世紀90年代以來就在IT建設上大力投入。根據彼得森國際經濟研究所的消息,在2024年美國在電子制造業建設方面(主要是芯片)的投資,就超過了1996年至2020年(24年的時間跨度)的總投資。而產業界,xAI、Meta、OpenAI等海外AI巨頭,都在積極布局十萬卡、五十萬卡規模的智算集群。

所以,國內自主化智算近年來的發展雖然迅猛,也是在積極補課,打牢基礎。這時候如果停止,不僅會前功盡棄,還會讓中美在AI基礎設施上的差距進一步拉大。

從近期看,自主化AI算力需求仍然沒有得到充分滿足,算力荒仍在。

一方面,海外AI算力進口受到限制,極不穩定。目前,國內AI訓練芯片市場英偉達占據了80%~80%的市場份額,要避免威脅供應鏈安全,這種情況必須盡快改變。上海的“算力浦江”智算行動實施方案(2024—2025年)要在2025年,實現新建智算中心的國產算力芯片使用占比超過50%;《北京市算力基礎設施建設實施方案(2024—2027年)》則提出,2027年要具備100%自主可控智算中心建設能力。

三年左右,從不到20%發展到100%。所以,如今的自主化智算不是太多了,而是還不夠。

與此同時,算力需求仍在增長。大模型的規模法則仍在繼續,以Sora為代表的視頻生成模型對算力的需求量是LLM大模型的數倍,已經出現了“一棟樓放不下一個模型”“一個模型需要多個集群”的情況,超萬卡智算中心是必不可少的基礎設施,目前國內的十萬卡集群還遠遠不足。

此外,大煉模型的階段雖然結束了,但基礎模型的市場集中度提高和能力提高,又會釋放AI應用需求,促進AI的行業滲透率、普及率,導致AI推理算力的需求爆發,急需要更多高質量算力來滿足。目前部分國產AI算力集群的利用率極高,西安昇騰智能科技有限公司的人工智算中心算力使用率就高達98.5%;曙光在長沙的5A級智算中心,也吸引上百家企業入駐,實現萬余個商業應用接入。因此,隨著產業智能化升級的繼續推進,國產AI算力荒不是已經解決,而是從現在開始重視和應對。

互聯網產業的核心,當然不是寬帶和機房,但沒有“寬帶高速公路”,就沒有美國互聯網經濟的爆發;移動互聯網的核心,也不是基站,但沒有廣泛覆蓋的4G基站,就沒有智能手機和移動應用軟件的興起。AI大模型也是一樣, AI作為一種依附在基礎設施之上的軟件技術,核心不是智算,但沒有自主化智算,國內AI絕不可能獨善其身、獨自蓬勃發展。

因此,自主化智算并不存在過剩,更不該就此放慢發展。

wKgZPGdo0niAeCxJAAJVXfK1gHM154.jpg

綜上,“國內AI算力過剩”,是個假問題,“如何合理地推進自主化智算的建設”,才是真問題。

解決這個真問題,國內智算產業已經來到了承上啟下的新階段。不僅要追求把智算中心“建起來”,還要能運營好、用起來。

因此,智算廠商的競爭,也從售賣硬件資源與智算解決方案,轉變為多維度、綜合性、長期服務的競爭。比如華為昇騰AI全棧、中科曙光的“立體計算”、寧暢的“全局智算”、聯想的“萬全生態”,新華三的“1+N”智算等,以更全面的能力,支撐自主化智算的建設運營。

wKgZO2do0niAR8yCAABY6QimnW4345.jpg

追求全面,并不意味著胡子眉毛一把抓,目前來看,智算廠商們主要集中解決自主化AI算力的幾個痛點問題:

1.異構問題。目前,國產AI芯片還無法規模化出貨,市場集中度較低,因此都是以混合算力的形式,來加入智算集群。多元異構算力的協同調度、管理、算效、業務可靠性等,面臨很多技術挑戰。如果一個企業或開發者,要針對ABCD不同廠商的卡進行適配開發,是不可能的。所以,就需要智算廠商提供相應的系統平臺,屏蔽底層異構硬件的復雜性,讓大家用好國產算卡。比如聯想的萬全異構智算平臺,實現異構化AI算力的管理與調配;新華三面向異構智算的智能管理平臺,一站式應對多樣化的AI應用場景。

2.算效問題。解決“低質量算力過剩,自主化高質量算力不足”的結構性問題,需要進一步提高國產AI的性能。面對工藝制程的限制,可以通過軟硬件系統的無縫配合,從而實現國產算卡性能的充分釋放。以昇騰為例,就與昇思緊密結合,為各類智算場景提供高性能的自主化AI算力,深圳鵬城實驗室的“鵬城云腦Ⅱ”就依托昇騰實現了中國首個自主可控的E級智能算力平臺,可以提供不低于1000Pops的整機AI計算能力。

3.運營問題。如今,一些地方在智算中心建設之前,開始提出上架率、收益率等要求,需要保證項目投運后有一定的使用率。同時,也會要求建設方提供設計、使用、運營等一體化服務,避免智算中心因無人運營而成為“數字爛尾樓”。以用促建、以服促用,已經是自主化智算發展的必然潮流。比如新華三與杭州市合作,打造“圖靈小鎮”,培育AIGC產業和數字人才;中科曙光“立體計算”主張“算力建設、應用賦能、生態共生”三位一體,推動多元算力向新質生產力轉化,目前已經在5A級智算中心落地實踐。

wKgZPGdo0nmAP-crAAM0iGTYFJI731.jpg

回顧這一年多來,國內智算的發展突飛猛進,取得了舉世矚目的成績,我們不必再為算力荒而憂心忡忡。但人無遠慮必有近憂,AI算力的自主化之路不能就此戛然而止,而要一鼓作氣,再加把勁,把已經取得的成果夯實,為接下來的智能浪潮做好準備。

避免低質量算力過剩,與加速自主化智算發展,這兩件事可以并行不悖,也應該理性分開看待。

wKgZO2do0nqAIjXLAAHUxLhXXGs779.jpg

審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • AI
    AI
    +關注

    關注

    87

    文章

    31399

    瀏覽量

    269806
  • 算力
    +關注

    關注

    1

    文章

    1009

    瀏覽量

    14899
收藏 人收藏

    評論

    相關推薦

    中心的如何衡量?

    作為當下科技發展的重要基礎設施,其的衡量關乎其能否高效支撐人工智能、大數據分析等智能應用的運行。以下是對智中心算衡量的詳細闡述:一、
    的頭像 發表于 01-16 14:03 ?288次閱讀
    <b class='flag-5'>算</b>智<b class='flag-5'>算</b>中心的<b class='flag-5'>算</b><b class='flag-5'>力</b>如何衡量?

    科技云報到:要更要“利”,“精裝”觸發大模型產業新變局?

    科技云報到:要更要“利”,“精裝”觸發大模型產業新變局?
    的頭像 發表于 01-16 10:24 ?84次閱讀

    基礎篇:從零開始了解

    即計算能力(Computing Power),狹義上指對數字問題的運算能力,而廣義上指對輸入信息處理后實現結果輸出的一種能力。雖然處理的內容不同,但處理過程的能力都可抽象為。比
    的頭像 發表于 11-15 14:22 ?945次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>基礎篇:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>

    企業AI租賃是什么

    企業AI租賃是指企業通過互聯網向專業的提供商租用所需的計算資源,以滿足其AI應用的需求。以下是對企業AI
    的頭像 發表于 11-14 09:30 ?965次閱讀

    GPU開發平臺是什么

    隨著AI技術的廣泛應用,需求呈現出爆發式增長。AI租賃作為一種新興的服務模式,正逐漸成為企業獲取
    的頭像 發表于 10-31 10:31 ?223次閱讀

    本源量子等向北京“金融量子云實驗平臺”提供自主量子

    近日,由本源量子提供自主量子主的“金融量子云實驗平臺”正式上線,該平臺由北京金融科技產業聯盟主辦,本源量子公司聯合共建,云端可提供量子真機
    的頭像 發表于 10-30 08:05 ?257次閱讀
    本源量子等向北京“金融量子云實驗平臺”提供<b class='flag-5'>自主</b>量子<b class='flag-5'>算</b><b class='flag-5'>力</b>

    大模型時代的需求

    現在AI已進入大模型時代,各企業都爭相部署大模型,但如何保證大模型的,以及相關的穩定性和性能,是一個極為重要的問題,帶著這個極為重要的問題,我需要在此書中找到答案。
    發表于 08-20 09:04

    中科曙光入選2024服務產業圖譜及服務產品名錄

    近日,中國信通院公布首個《服務產業圖譜(2024年)》及《服務產品名錄(2024年)》。曙光智構建的全國一體
    的頭像 發表于 08-06 14:23 ?765次閱讀

    曙光攜手“互聯公共服務平臺”提高全國匹配效率

    的互聯互通,助力“互聯公共服務平臺”功能完善,實現全國一體體系建設目標。 ? ? ? ? ? 按規劃,“
    的頭像 發表于 07-16 15:45 ?719次閱讀

    力系列基礎篇——與計算機性能:解鎖超能力的神秘力量!

    在《力系列基礎篇——101:從零開始了解》中,相信各位粉絲初步了解到人工智能的“發動機”和核心驅動力:
    的頭像 發表于 07-11 08:04 ?104次閱讀
    <b class='flag-5'>算</b>力系列基礎篇——<b class='flag-5'>算</b><b class='flag-5'>力</b>與計算機性能:解鎖超能力的神秘力量!

    基礎設施的風險與挑戰

    編者按網絡有一個美好的愿景,就是希望網,能像電力和電網一樣:
    的頭像 發表于 06-13 08:27 ?596次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>基礎設施的風險與挑戰

    力系列基礎篇——101:從零開始了解

    相信大家已經感受到,我們正處在一個人工智能時代。如果要問在人工智能時代最重要的是什么?那必須是:
    的頭像 發表于 04-24 08:05 ?1002次閱讀
    <b class='flag-5'>算</b>力系列基礎篇——<b class='flag-5'>算</b><b class='flag-5'>力</b>101:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>

    十問:超,通存比

    鄔賀銓指出,現有測算方法難以精準衡量。國內企業服務器的出貨量并不等于國內市場的使用量,而且進口國外的服務器未統計在內;服務器出貨量也不等于上架量,更不等于已經加電使用量。通常服務器集群的
    的頭像 發表于 04-13 11:40 ?4709次閱讀

    智能規模超通用,大模型對智能提出高要求

    電子發燒友網報道(文/李彎彎)是設備通過處理數據,實現特定結果輸出的計算能力,常用FLOPS作為計量單位。FLOPS是Floating-point Operations Per Second
    的頭像 發表于 02-06 00:08 ?6472次閱讀

    大茉莉X16-P,5800M大稱王稱霸

    Rykj365
    發布于 :2024年01月25日 14:54:52
    主站蜘蛛池模板: 男同志在线观看| 桃色窝| 76人遣返航班上71人呈阳性| 亚洲人成人毛片无遮挡| 免费观看美女的网站| 欧美四虎精品二区免费| 我解开了岳的乳第一个女人 | chinese东北老年tv视频| 相声flash| 一区两区三不卡| 亚洲国产AV一区二区三区四区| 国产在线精品亚洲另类| 在线综合 亚洲 欧美| 三级黄视频| 教室眠催白丝美女校花| 99久久久无码国产精品免费人妻| 色综合久久网女同蕾丝边| 久久久大香菇| 囯产免费久久久久久国产免费| 亚洲一品AV片观看五月色婷婷| 欧美日韩亚洲成人| 韩国和日本免费不卡在线| bt成人种子| 亚洲午夜精品A片久久WWW软件| 欧美日韩高清一区二区三区| 国产亚洲欧洲日韩在线观看| x69老师x日本| 一区二区三区高清视频| 跳蛋按摩棒玉势PLAY高H| 麻豆国产自制在线观看| 国产免国产免费| poronovideos动物狗猪| 永久精品视频无码一区| 午夜AV国产欧美亚洲高清在线| 免费精品国产日韩热久久| 含羞草传媒在线观看| 成人在线观看免费视频| 最新国产精品福利2020| 亚洲国产中文在线视频免费| 色欲AV精品人妻一区二区麻豆| 麻豆天美国产一区在线播放|