色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

智慧有數,浪潮信息發布生成式AI存儲解決方案

浪潮存儲 ? 來源:未知 ? 2023-07-07 20:45 ? 次閱讀

當前,生成式AI(AIGC)已經成為AI產業化發展的主戰場,隨著大模型參數量和數據量的爆發式增長,多源異構數據的傳、用、管、存,正在成為制約生成式AI落地的瓶頸之一。為了化解生成式AI的數據存儲與管理瓶頸,7月6日,浪潮信息在“數智未來”AIGC數據應用創新論壇上,正式發布面向生成式AI的存儲解決方案,該方案以極致融合、極致性能、極致節能,和熱溫冷冰四級數據全生命周期管理,助力開啟生成式AI新局面,創造智慧時代新機遇。

生成式AI亟待突破多源異構和存儲性能瓶頸

生產式AI是人工智能從1.0時代進入2.0時代的重要標志,其具備強大的認知智能,在搜索引擎、藝術創作、影音游戲,以及金融、教育、醫療、工業等領域有著廣闊的應用前景。Gartner預測,到2023年將有20%的內容被AIGC所創建;到2025 年人工智能生成數據占比將達到10%。據分析師預測,到2032年,生成式人工智能市場規模將達到2,000億美元,占據人工智能支出總額的約20%,顯著高出當前的5%。換言之,未來十年市場規模可能每兩年就會翻一番。

生成式AI主要應用場景涵蓋文本生成、語音生成、圖片生成、視頻生成、代碼生成、虛擬人生成等,在每種應用的背后是基于行業上下游對數據進行采集、標注、訓練、推理、歸檔,其特征是數據量大、多元數據類型復雜、服務協議多樣、性能要求苛刻、要求服務持續在線。生成式AI對數據存儲提出如下挑戰:

  • 異構數據的融合:生成式AI訓練模型的數據呈現來源多、格式多的多源異構現狀,傳統存儲面向單一數據類型設計,需要以搬移數據的方式實現多協議訪問,存儲成為應用平臺的關鍵瓶頸;

  • 持續的低延遲與高帶寬:模型訓練過程中,頻繁地從數據集取Token,每個Token一般4字節,實時高并發小IO性能需要極低的延遲;存儲模型Checkpoint時,為Checkpoint數據可快速寫入,需要高帶寬;

  • EB級大容量存儲需求:越多的數據投喂結果越精準的工作原理,決定了大模型訓練存在深度學習網絡層數多、連接多、參數和數據集種類復雜、數據量大的特征,隨著模型參數和數據量的快速增長,對于存儲的大容量和擴展需求也迫在眉睫。

數據存儲產業需要進行全方位的技術升級,通過在多源異構融合、數據高速傳輸、海量數據管理等方面持續創新,打造專業的生成式AI存儲產品與解決方案。

浪潮信息讓生成式AI智慧有數

浪潮信息是最早布局大模型的企業之一,打造了算力、算法、數據全棧的解決方案能力。在數據存儲領域,浪潮信息準確識別行業痛點、積極布局,經過持續攻關,在融合存儲架構、系統性能設計、數據全生命周期管理算法等方面不斷突破,打造出生成式AI存儲解決方案。

浪潮信息生成式AI存儲解決方案基于AS13000融合存儲系統,可以支撐AIGC產業上中下游業務應用,并針對不同業務階段的數據存儲需求,提供熱溫冷冰四級存儲,實現數據在各級存儲間自動流轉。用高性能節點形態來滿足數據訓練、數據推理兩個階段的高帶寬、低延時、高并行讀寫性能存儲需求,用大容量節點形態來滿足數據采集、數據準備、數據歸檔三個階段的海量多元數據存儲需求,方案具備極致融合、極致性能、極致節能三大能力,以及熱、溫、冷、冰四級數據全生命周期存儲管理能力,助力生成式AI突破海量數據存力瓶頸,加速釋放數據的價值。

  • 極致融合。為了應對不同模態的多樣性需求,浪潮信息提出“協議互通、數據融合”設計理念,一個集群內支持多個存儲池,一個存儲池內支持文本、圖片、音頻、視頻等多種類型數據存儲,一份數據又可以被前端不同業務場景同時以文件、對象、大數據、視頻四種存儲協議進行并行訪問。用一套存儲實現支持多模態場景應用,免除了數據跨應用時的復制,實現真正意義上非結構化數據的協議互訪互通,讓數據融合。

  • 極致性能。AIGC場景數據類型多樣化,文件大小不一、數量多,且讀寫頻繁,對存儲系統的百GB級高帶寬、百萬級IOPS需求成了常態。浪潮信息在軟件方面,通過數控分離架構減少東西向數據量的轉發,通過GDS、RMDA技術縮短I/O路徑,通過SPDK、緩存零拷貝技術減少I/O路徑上的數據拷貝,以及基于自研NVMe SSD開發的盤控協同技術,減少I/O訪問SSD盤的次數,使存儲性能得到進一步釋放。在硬件方面,優化IO路徑通道,均衡IO路徑,最大化發揮硬件性能,全閃單節點帶寬超過50GB/s,IOPS超過50萬;此外,創新性地引入雙控全閃節點,帶寬超100GB/s,IOPS超100萬,真正使系統具備千萬級IOPS、EB級帶寬,充分滿足AIGC場景對存儲系統的苛刻要求。

  • 極致節能。浪潮信息近期最新發布了G7硬件平臺,存儲專用的液冷服務器涵蓋性能型和容量型,且均采用模塊化冷板組件設計模式。在系統方案層面,浪潮信息具有風液式、液液式等完善的端到端解決方案,能夠為用戶全方位打造液冷數據中心交鑰匙工程,并且完成了業界首次液冷整機柜批量交付,實現PUE<1.1。

  • 端到端的數據全生命周期管理。除了三大“極致”能力之外,得益于“資源互通、管理融合”的設計理念,浪潮生成式AI存儲方案基于閃存、磁盤、磁帶、光盤四種介質提供熱溫冷冰四種存儲資源,通過資源互通實現數據全生命周期管理。基于數據的熱度識別,自動釋放在線存儲空間,可以將海量數據自動歸檔到光盤庫,降低長期存儲成本;實現冷數據的分鐘級快速回調,滿足0~4級應用的存儲需求。四種介質、四類存儲節點,提供熱溫冷冰自動流轉,滿足各類應用的靈活配置需求,通過性能型、均衡型、容量型、高密容量型四種機型的按需靈活配置,進一步降低整體投入。

浪潮信息生成式AI存儲解決方案

目前,浪潮信息生成式AI存儲解決方案已經在全球領先的中文語言大模型“源1.0”中成功落地,面對千億級參數量和PB級數據量帶來的挑戰,浪潮信息通過AS13000高吞吐并行存儲系統實現了多存儲協議互通、數據融合,利用全閃的極致性能,助力“源1.0”大模型實現了16天完成訓練的超高效率。國內AI獨角獸公司采用浪潮信息提供的并行文件存儲,承載5000億參數量的NLP語言類大模型的數據集Token和CheckPoint文件,輕松應對大/小文件的讀寫挑戰,配置AS13000全閃存儲集群,支持高性能RocE組網和GPU直通存儲功能,帶寬超過300GB、存儲性能超過350 IOPS,保證存儲集群的高可用與敏捷擴容。

面對生成式AI掀起的變革熱潮,誰能掌握數字化變革的先機,誰就能把握未來AI革命的致勝關鍵,而數據底座將成為千行百業創新變革的重要基石。浪潮信息存儲秉承“存儲即平臺”的產品理念,精耕數據存儲產品與解決方案,攜手合作伙伴,助力生成式AI在金融虛擬客服、圖片編輯設計、智能駕駛、跨模態檢索等場景的落地,激活數據要素新潛能,駕馭智慧化轉型新趨勢,在機遇與挑戰并存的新格局下,為行業轉型注入新價值、新動能。


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4333

    瀏覽量

    85969
  • 浪潮
    +關注

    關注

    1

    文章

    465

    瀏覽量

    23898
  • 生成式AI
    +關注

    關注

    0

    文章

    509

    瀏覽量

    506

原文標題:智慧有數,浪潮信息發布生成式AI存儲解決方案

文章出處:【微信號:inspurstorage,微信公眾號:浪潮存儲】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    浪潮信息剖析智能時代數據存儲領域面臨的挑戰與機遇

    在當今數字化時代,算力與存力的協同增長已成為驅動各行各業發展的關鍵力量。特別是在人工智能(AI)這一前沿領域,隨著數據量的爆炸增長,對存儲系統的需求日益復雜和多樣。近期,在首屆CCF中國存儲
    的頭像 發表于 12-30 09:43 ?229次閱讀

    浪潮信息AI存儲性能測試的領先之道

    AI技術的無限可能。近日,在MLCommons的子項目MLPerf Storage v1.0性能基準評測中,浪潮信息再度展現了在AI存儲領域的卓越實力。
    的頭像 發表于 10-29 16:30 ?270次閱讀
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>AI</b><b class='flag-5'>存儲</b>性能測試的領先之道

    浪潮信息:元腦企智EPAI助力金融大模型快速落地

    浪潮信息AI算力底座建設、大模型開發領域積累的成熟、成功經驗工具化,助力金融機構又快、又穩地部署生成AI應用,助力金融數智化跨越
    的頭像 發表于 09-20 16:07 ?375次閱讀
    <b class='flag-5'>浪潮信息</b>:元腦企智EPAI助力金融大模型快速落地

    浪潮信息推出AIGC存儲解決方案

    近日,在科技創新的浪潮中,浪潮信息成功舉辦了“元腦中國行”全國巡展的杭州站活動,此次盛會不僅匯聚了業界的精英與目光,更見證了浪潮信息在AIGC(人工智能生成內容)領域的一次重大突破。會
    的頭像 發表于 07-03 11:16 ?747次閱讀

    浪潮信息推出基于新一代分布存儲平臺AS13000G7的AIGC存儲解決方案

    6月28日,浪潮信息“元腦中國行”全國巡展杭州站順利舉行。會上,浪潮信息重磅推出基于新一代分布存儲平臺AS13000G7的AIGC存儲
    的頭像 發表于 07-01 19:00 ?1460次閱讀
    <b class='flag-5'>浪潮信息</b>推出基于新一代分布<b class='flag-5'>式</b><b class='flag-5'>存儲</b>平臺AS13000G7的AIGC<b class='flag-5'>存儲</b><b class='flag-5'>解決方案</b>

    CCF-TCIST走進浪潮信息 共話AI時代存儲創新

    CCF信息存儲技術專委會走進浪潮信息 共話大模型時代的存儲創新之道 北京2024年6月7日?/美通社/ -- 近日,中國計算機學會信息
    的頭像 發表于 06-07 14:27 ?297次閱讀
    CCF-TCIST走進<b class='flag-5'>浪潮信息</b> 共話<b class='flag-5'>AI</b>時代<b class='flag-5'>存儲</b>創新

    浪潮信息與北京伙伴共筑AI新生態

    近日,2024浪潮信息區域ISP伙伴戰略簽約儀式在京圓滿落幕。此次盛會,浪潮信息與航天星橋、中天瑞合、圣世博泰、浩然泰同、浩普誠華、眾創佳業等20家北京元腦生態伙伴共襄盛舉,簽署了戰略合作協議。
    的頭像 發表于 05-31 11:33 ?772次閱讀

    浪潮信息發布AS13000G7-N系列分布全閃存儲

    浪潮信息近日推出了專為大型AI模型優化的AS13000G7-N系列分布全閃存儲。該系列基于浪潮信息自研的分布
    的頭像 發表于 05-14 10:03 ?586次閱讀

    【中心動態】 走進浪潮信息

    5月8日,RISC-V國際人才培養認證中心主任蔣學剛一行,到訪浪潮電子信息產業股份有限公司(以下簡稱“浪潮信息”),受到深圳區域副總經理段青云、產品經理陶耀民的熱情接待。浪潮信息是全球
    的頭像 發表于 05-13 17:42 ?472次閱讀
    【中心動態】 走進<b class='flag-5'>浪潮信息</b>

    為大模型專門優化 浪潮信息發布分布全閃存儲AS13000G7-N系列

    北京2024年5月10日?/美通社/ -- 近日,浪潮信息發布為大模型專門優化的分布全閃存儲AS13000G7-N系列。該系列依托浪潮信息
    的頭像 發表于 05-10 16:37 ?450次閱讀
    為大模型專門優化 <b class='flag-5'>浪潮信息</b><b class='flag-5'>發布</b>分布<b class='flag-5'>式</b>全閃<b class='flag-5'>存儲</b>AS13000G7-N系列

    浪潮信息發布為大模型專門優化的分布全閃存儲AS13000G7-N系列

    近日,浪潮信息發布為大模型專門優化的分布全閃存儲AS13000G7-N系列。該系列依托浪潮信息自研分布
    的頭像 發表于 05-08 09:38 ?584次閱讀
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>發布</b>為大模型專門優化的分布<b class='flag-5'>式</b>全閃<b class='flag-5'>存儲</b>AS13000G7-N系列

    一圖讀懂浪潮信息新一代分布全閃存儲AS13000G7-N系列

    一圖讀懂浪潮信息新一代分布全閃存儲AS13000G7-N系列
    的頭像 發表于 05-08 09:35 ?1303次閱讀
    一圖讀懂<b class='flag-5'>浪潮信息</b>新一代分布<b class='flag-5'>式</b>全閃<b class='flag-5'>存儲</b>AS13000G7-N系列

    浪潮信息發布企業大模型開發平臺&quot;元腦企智&quot;EPAI,加速AI創新落地

    北京2024年4月18日?/美通社/ -- 4月17日,在2024浪潮信息生態伙伴大會(IPF2024)上,浪潮信息發布企業大模型開發平臺"元腦企智"EPAI(Enterprise Platform
    的頭像 發表于 04-18 21:21 ?477次閱讀
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>發布</b>企業大模型開發平臺&quot;元腦企智&quot;EPAI,加速<b class='flag-5'>AI</b>創新落地

    浪潮信息發布企業大模型開發平臺“元腦企智”EPAI

    4月17日,在2024浪潮信息生態伙伴大會(IPF2024)上,浪潮信息重磅發布企業大模型開發平臺“元腦企智”EPAI(Enterprise Platform of AI),為企業
    的頭像 發表于 04-18 10:12 ?407次閱讀
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>發布</b>企業大模型開發平臺“元腦企智”EPAI

    浪潮信息推出全球首個單存儲即可支持16節點的SAP HANA集群方案

    近日,浪潮信息成功實現并推出全球首個單存儲即可支持16節點的SAP HANA集群方案,全閃存儲HF5000系列作為該方案的數據
    的頭像 發表于 04-01 10:03 ?465次閱讀
    主站蜘蛛池模板: 精品视频一区二区三三区四区 | 欧美一区二区三区激情视频 | 无码欧美毛片一区二区三在线视频 | 日本一区二区三区在线观看网站 | 精品国产人成亚洲区 | 国产精品JK白丝AV网站 | 精品一二三区久久AAA片 | 六六影院午夜伦理 | 91精品婷婷国产综合久久8 | 欧美色图天堂网 | 99久久就热视频精品草 | 欧美亚洲曰韩一本道 | 男人插女人动态图 | 国产免费啪嗒啪嗒视频看看 | 亚洲精品久久久992KVTV | 国产自产视频在线观看香蕉 | 欧美精品成人久久网站 | 久久这里只有精品1 | 单亲妈妈3韩国电影免费观看 | 久久精品国产视频澳门 | 青柠在线观看视频在线高清 | 無码一区中文字幕少妇熟女网站 | 亲嘴扒胸摸屁股视频免费网站 | 欧美兽交YOYO | 亚洲免费在线观看视频 | 精品免费视在线视频观看 | 红尘影院在线观看 | 国产精品av免费观看 | 夫外出被公侵犯日本电影 | 5g天天奭视频 | 人妻体内射精一区二区 | 花蝴蝶在线高清视频观看免费播放 | 久久久久亚洲精品影视 | 国产99久久九九精品无码不卡 | YELLOW高清在线观看2019 | 邪恶肉肉全彩色无遮琉璃神社 | 美女搞鸡网站 | 国产精品亚洲污污网站入口 | 亚洲国产免费观看视频 | 国产人妻人伦精品久久无码 | 国产WW久久久久久久久久 |