色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

華中科大馮丹教授:加速數(shù)據(jù)中心向Diskless架構演進,近數(shù)據(jù)處理新型盤框技術創(chuàng)新發(fā)力

章鷹觀察 ? 來源:電子發(fā)燒友原創(chuàng) ? 作者:章鷹 ? 2023-04-23 17:41 ? 次閱讀
電子發(fā)燒友網(wǎng)報道 文/章鷹)“我們把計算中心分為三大塊,計算、傳輸和存儲。但是當前數(shù)據(jù)中心存算分離不徹底,導致計算和存儲分別還有大量的冗余空間。比如計算器、存儲服務器都有配置相應的硬盤,通過計算服務器的硬盤做緩存,將存儲域的數(shù)據(jù)拉到計算這塊進行處理,導致我們配備最大容量的配置,導致存儲資源的浪費;另外一方面,采用通用的算力進行處理,使得IO的處理在計算域這一側(cè)采用CPU來做網(wǎng)絡和讀寫的操作,需要消耗30%的算力,而在存儲域采用通用CPU做控制器,使得性能降低20%。”華中科技大學計算機科學與技術學院院長馮丹表示點出當前數(shù)據(jù)中心存儲領域的痛點問題。


圖:華中科技大學計算機科學與技術學院院長 馮丹

4月20日,在中國深圳舉辦的華為分析師大會分論壇上,長江學者特聘教授、華中科技大學計算機科學與技術學院院長馮丹對數(shù)據(jù)中心Diskless架構及近數(shù)據(jù)處理發(fā)展趨勢做出了權威解讀。

馮丹指出,傳統(tǒng)存算融合架構下,企業(yè)通常采用應用與本地盤耦合的服務器一體化架構,存在存力效率低、無效數(shù)據(jù)遷移、資源浪費等典型問題。表現(xiàn)為:一、數(shù)據(jù)從盤到計算域CPU,需要8次以上數(shù)據(jù)搬遷,無效搬遷帶來了網(wǎng)絡和算力資源的浪費;二、在存算融合的上千節(jié)點大規(guī)模集群中,算力、容量空間配比無法均衡,擴容時需要額外遷移數(shù)據(jù),不僅帶來現(xiàn)有業(yè)務風險,還會浪費投資;三、數(shù)據(jù)爆發(fā)增長,面向結構化數(shù)據(jù)的數(shù)據(jù)縮減策略不完全適用于非結構化場景。

國際調(diào)研機構IDC的數(shù)據(jù)顯示,2025年數(shù)據(jù)量將達到175ZB,積累的數(shù)據(jù)量90%主要來自于近兩年,大部分數(shù)據(jù)來自金融、基因、分子、動力、IoT等等,從結構化到非結構化大量數(shù)據(jù)的產(chǎn)生,使得對容量、成本的壓力越來越大。但是傳統(tǒng)的面向結構化數(shù)據(jù)的數(shù)據(jù)壓縮方法,可以使壓縮比達到3:1,但是對于非結構化數(shù)據(jù),壓縮比小于2,甚至是無效的。如何在存儲域?qū)崿F(xiàn)對于用戶來說,透明的、高效、自適應的數(shù)據(jù)縮減算法也成為一個難題。

隨著算力多樣化、高性能網(wǎng)絡和存儲介質(zhì)的發(fā)展,數(shù)據(jù)中心架構從以CPU中心朝著以數(shù)據(jù)為中心的Diskless架構演進。Diskless架構下,單一CPU算力發(fā)展到GPU、DPU、XPU等多樣算力,算力效率得以充分發(fā)揮;網(wǎng)絡從IP、NOF發(fā)展到高通量的CXL,為算力和存力等硬件解耦奠定了基礎;存力也從傳統(tǒng)HDD到SSD,性能、功耗實現(xiàn)全面提升。Intel、華為、KIOXIA、阿里云等業(yè)界芯片、存儲、云和互聯(lián)網(wǎng)廠商的積極推進下,Diskless架構借助專用DPU/IPU等數(shù)據(jù)處理芯片和OceanDisk等專用存儲模塊,進一步提升數(shù)據(jù)處理和存儲的效能,充分調(diào)動數(shù)據(jù)中心資源。

馮丹教授表示,資源池化共享的Diskless架構應具備以下關鍵技術:

1、網(wǎng)存協(xié)同,DPU硬件卸載加速,數(shù)據(jù)高效協(xié)同處理。通過DPU等專有數(shù)據(jù)處理模塊,使服務器CPU全為應用服務,基礎設施與應用任務解耦,將VirtIO、NVMe-oF等CPU計算效率低任務轉(zhuǎn)移到DPU的專用加速器執(zhí)行,實現(xiàn)資源彈性擴展。

2、數(shù)控分離+IO直通,實現(xiàn)控制流與IO流分離,IO直通到存儲介質(zhì),進一步提升存儲效率。通過數(shù)控分離,可達到極致IO訪問時延,通過存儲域IO讀寫數(shù)據(jù)流與IO控制處理的分離,使得讀寫IO直通到存儲介質(zhì)中,減少IO處理路徑,降低處理復雜度,極大提升存儲域訪問性能。計算域則可以借助DPUbypassCPU,減少數(shù)據(jù)拷貝開銷,提升IO訪問性能。

3、盤控協(xié)同,盤芯片與控制器芯片配合,提升集成度,達到最佳成本和能耗。盤控協(xié)同技術的關鍵是要實現(xiàn)高性能、低成本的大盤,通過硬件對盤控系統(tǒng)內(nèi)的算法進行加速,比如利用FPGA實現(xiàn)FTL/DIF/在線壓縮/加密/EC/GC等硬化,提升性能;盤內(nèi)和框內(nèi)的各類驅(qū)動和緩存層合一,實現(xiàn)盤框一體,構建極致成本和能耗的大盤存儲。

4、算子卸載,EC、數(shù)據(jù)縮減等算法通過硬件卸載到存儲端,實現(xiàn)近數(shù)據(jù)處理。通過計算語義的卸載,存儲直出語義接口,主機側(cè)軟件棧打薄,減少80%的IO交互次數(shù),實現(xiàn)對整系統(tǒng)

的CPU和網(wǎng)絡帶寬節(jié)省。同時,在大數(shù)據(jù)/數(shù)據(jù)倉庫場景,可以利用引擎的下推接口,下推謂詞和投影等運算操作到存儲資源池,減少無效數(shù)據(jù)的搬移。

華為去年發(fā)布的OceanDisk智能盤框產(chǎn)品,是一個標準的大存力新型盤框產(chǎn)品。OceanDisk通過NoF+高速網(wǎng)絡連接Diskless服務器,實現(xiàn)計算和存儲獨立彈性擴展,幫助客戶提高資源利用率,機柜空間和設備功耗分別降低40%;內(nèi)置FlashLink?智能盤框協(xié)同算法等軟硬結合技術,帶來最大250萬IOPS,50GB/s帶寬的高性能;依托華為多年存儲研發(fā)實力,OceanDisk智能盤框提供硬盤亞健康管理、智能慢盤優(yōu)化等技術,保持大規(guī)模數(shù)據(jù)中心10萬級硬盤的性能穩(wěn)定,大幅降低運維難度。OceanDisk作為業(yè)界首個面向Diskless架構的新型盤框,將以高性能、高可靠、綠色集約重新定義下一代云和互聯(lián)網(wǎng)數(shù)據(jù)中心存儲架構。

馮丹教授表示:“從技術趨勢來看,高性能異構算力、高速網(wǎng)絡、大存力新型盤框、算子卸載等技術的發(fā)展,帶來了數(shù)據(jù)中心架構的變革,加速了以CPU為中心的耦合架構走向徹底存算分離、資源池化共享的以數(shù)據(jù)為中心的Diskless架構,這種架構進一步簡化了數(shù)據(jù)中心基礎設施構建,能夠?qū)崿F(xiàn)存力和算力資源的集約高效發(fā)展,已經(jīng)成為大規(guī)模數(shù)據(jù)中心發(fā)展的重要技術趨勢。”

本文由電子發(fā)燒友原創(chuàng),轉(zhuǎn)載請注明以上來源。微信號zy1052625525。需入群交流,請?zhí)砑游⑿舉lecfans999,投稿爆料采訪需求,請發(fā)郵箱zhangying@elecfans.com。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 華為
    +關注

    關注

    216

    文章

    34530

    瀏覽量

    252622
  • intel
    +關注

    關注

    19

    文章

    3483

    瀏覽量

    186308
  • 數(shù)據(jù)中心

    關注

    16

    文章

    4855

    瀏覽量

    72314
收藏 人收藏

    評論

    相關推薦

    維諦技術:如何讓貴州醫(yī)科大數(shù)據(jù)中心遷移0業(yè)務影響?

    搬家是什么感覺?麻煩,累,折騰……而且稍不留神就會丟三落四。普通人搬家尚且如此,那數(shù)據(jù)中心“搬家”會更讓人崩潰,過程會涉及大量設備、重要數(shù)據(jù)和核心資產(chǎn)的轉(zhuǎn)移。貴州醫(yī)科大學就經(jīng)歷了這樣的大場面
    的頭像 發(fā)表于 12-18 15:20 ?195次閱讀
    維諦<b class='flag-5'>技術</b>:如何讓貴州醫(yī)<b class='flag-5'>科大</b>學<b class='flag-5'>數(shù)據(jù)中心</b>遷移0業(yè)務影響?

    華為數(shù)據(jù)中心能源榮膺W.Media 2024技術領袖獎

    近日,W.Media 2024亞太云和數(shù)據(jù)中心頒獎晚宴在新加坡舉辦,華為數(shù)據(jù)中心能源憑借卓越的技術領導和廣泛的市場影響,榮獲“
    的頭像 發(fā)表于 12-09 09:51 ?227次閱讀

    NIDA發(fā)布《智算數(shù)據(jù)中心網(wǎng)絡建設技術要求》

    Alliance,以下簡稱 “NIDA”)攜手中國信息通信研究院等9家組織成員共同發(fā)布了《智算數(shù)據(jù)中心網(wǎng)絡建設技術要求》(以下簡稱 “技術要求”)。該技術要求明確了智算場景下
    的頭像 發(fā)表于 12-04 11:13 ?419次閱讀

    電力模塊如何在數(shù)據(jù)中心建設中創(chuàng)新使用?為設計提供思路

    高密化、規(guī)模化的發(fā)展,供電系統(tǒng)作為數(shù)據(jù)中心的“心臟”,為滿足數(shù)據(jù)中心的增長,以及綠色能源的發(fā)展趨勢,在建設中不僅要保障供電的安全性,更要對供電系統(tǒng)進行技術創(chuàng)新,為客戶創(chuàng)造更大價值。結合相關技術
    的頭像 發(fā)表于 11-26 14:33 ?410次閱讀
    電力模塊如何在<b class='flag-5'>數(shù)據(jù)中心</b>建設中<b class='flag-5'>創(chuàng)新</b>使用?為設計提供思路

    速看!Atlassian云版與數(shù)據(jù)中心版的創(chuàng)新進展

    數(shù)據(jù)中心
    龍智DevSecOps
    發(fā)布于 :2024年11月22日 17:29:05

    面向未來數(shù)據(jù)中心的存儲平臺技術挑戰(zhàn)與探索

    教授華中科技大學金海教授,清華大學舒繼武教授,李輝等20余位專家出席會議。秀湖會議學術委員會主席、CCF副理事長、清華大學胡事民教授在開幕
    的頭像 發(fā)表于 11-06 10:43 ?265次閱讀

    如何選擇數(shù)據(jù)中心服務

    的規(guī)模、所需的服務類型(如托管服務、云服務、存儲服務等)、數(shù)據(jù)處理和存儲的需求、安全性要求以及預算等。這些需求將直接影響選擇數(shù)據(jù)中心服務的方向和重點。 二、考察數(shù)據(jù)中心的位置 數(shù)據(jù)中心
    的頭像 發(fā)表于 10-24 16:14 ?245次閱讀

    當今數(shù)據(jù)中心技術趨勢

    計算 數(shù)據(jù)中心的首要趨勢是追求更高的效能和性能。隨著數(shù)字化轉(zhuǎn)型的深入推進,各行業(yè)對數(shù)據(jù)中心處理能力和存儲容量提出了更高要求。為了滿足這些需求,數(shù)據(jù)中心正不斷引入新
    的頭像 發(fā)表于 10-24 15:15 ?538次閱讀

    簡述數(shù)據(jù)中心網(wǎng)絡架構的演變

    隨著全球?qū)θ斯ぶ悄埽ˋI)的需求不斷增長,數(shù)據(jù)中心作為AI計算的重要基礎設施,其網(wǎng)絡架構與連接技術的發(fā)展變得尤為關鍵。
    的頭像 發(fā)表于 10-22 16:23 ?359次閱讀

    人工智能數(shù)據(jù)中心新型連接解決方案

    支持新型人工智能數(shù)據(jù)中心架構的先進連接解決方案不斷涌現(xiàn)。高速板對板連接器、下一代電纜、背板和近似集成電路連接器對電纜解決方案的運行速度高達224Gb/s-PAM4,將加速未來計算的發(fā)展
    的頭像 發(fā)表于 06-13 08:26 ?623次閱讀
    人工智能<b class='flag-5'>數(shù)據(jù)中心</b>的<b class='flag-5'>新型</b>連接解決方案

    第十三期CCF秀湖會議:共話未來數(shù)據(jù)中心的存儲平臺技術挑戰(zhàn)與探索

    、清華大學鄭緯民教授華中科技大學金海教授,清華大學舒繼武教授,浪潮存儲產(chǎn)品線總經(jīng)理李輝等20余位專家出席會議。秀湖會議AC主席、CCF副理事長、清華大學胡事民
    的頭像 發(fā)表于 06-04 16:33 ?403次閱讀
    第十三期CCF秀湖會議:共話未來<b class='flag-5'>數(shù)據(jù)中心</b>的存儲平臺<b class='flag-5'>技術</b>挑戰(zhàn)與探索

    八大科技巨頭攜手推進UALink,加速數(shù)據(jù)中心AI互聯(lián)

    近日,英特爾、Google、微軟、Meta等八家科技巨頭宣布共同成立超加速器鏈接(UALink)推廣小組,致力于推動數(shù)據(jù)中心內(nèi)AI加速器芯片的連接組件發(fā)展。UALink旨在優(yōu)化數(shù)據(jù)中心
    的頭像 發(fā)表于 05-31 10:59 ?872次閱讀

    智慧醫(yī)療的綠色大腦 中科曙光風改液數(shù)據(jù)中心

    中科曙光及旗下子公司曙光數(shù)創(chuàng)積極探索,推出液冷數(shù)據(jù)中心解決方案。該方案在華中科技大學協(xié)和深圳醫(yī)院(以下簡稱南山醫(yī)院)成功應用。 不僅為智慧醫(yī)療的發(fā)展提供了強有力的支撐,也為實現(xiàn)“雙碳”目標作出了積極貢獻。 ? ?
    發(fā)表于 04-08 09:53 ?375次閱讀

    #mpo極性 #數(shù)據(jù)中心mpo

    數(shù)據(jù)中心MPO
    jf_51241005
    發(fā)布于 :2024年04月07日 10:05:13

    華中科大在近場光學成像方向取得重要進展

    近日,《自然·納米技術》(Nature Nanotechnology)在線刊發(fā)華中科技大學李培寧教授團隊題目為“Van der Waals quaternary oxides for tunable low-loss aniso
    的頭像 發(fā)表于 03-19 09:17 ?839次閱讀
    <b class='flag-5'>華中科大</b>在近場光學成像方向取得重要進展
    主站蜘蛛池模板: 成人在线观看免费视频 | 极品少妇高潮啪啪AV无码 | 草草色 | 大胸美女被吊起来解开胸罩 | 日韩中文亚洲欧美视频二 | 一个人日本的视频免费完整版 | www色小姐 | 中文视频在线 | 亚洲第一成年网站视频 | 秋霞电影在线观看午夜伦 | 思思99精品国产自在现线 | 久久WWW免费人成一看片 | 99久久久无码国产精品AAA | 亚洲成人免费观看 | 伸到同桌奶罩里捏她胸h | 色一欲一性一乱一区二区三区 | 手机在线免费看毛片 | 久青草国产在线视频 | 国产成人免费高清在线观看 | TUBE19UP老师学生 | 大地影院在线播放 | 亚洲免费高清视频 | 文中字幕一区二区三区视频播放 | 久久高清免费视频 | 日本888 xxxx| 午夜福利不卡片在线播放免费 | 久久精品一卡二卡三卡四卡视频版 | 成人毛片手机版免费看 | 美女与男人对肌免费网站 | 99精彩免费观看 | 国产全部视频列表支持手机 | 菠萝视频高清版在线观看 | a视频免费在线观看 | 狠狠色狠狠色综合日日2019 | 97色伦图片7778久久 | 国内精品伊人久久久影院 | 青娱乐国产精品视频 | CHINA中国东北GURMA | 最近的2019中文字幕国语版 | 日韩成人在线视频 | 国产亚洲精品视频在线网 |