色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

軟硬件雙向驅(qū)動(dòng) 英特爾加速AI on PC落地

looger123 ? 來源:looger123 ? 作者:looger123 ? 2023-08-30 14:23 ? 次閱讀

以ChatGPT、Claude2、Stable Diffusion、Midjourney等為代表的生成式AI崛起的背后,是大眾用戶親眼看到了AI技術(shù)切實(shí)落地到了實(shí)際應(yīng)用之中,并為工作、創(chuàng)作、創(chuàng)意帶來前所未有的效率提升。它與AI1.0時(shí)代的卷積神經(jīng)網(wǎng)絡(luò)深度學(xué)習(xí)等看起來就頗具技術(shù)門檻的核心技術(shù)相比,顯然更接地氣,更容易為大眾所接受。

毫無疑問,如今的我們正處在人工智能技術(shù)發(fā)展的關(guān)鍵階段,它正在逐漸滲透到人類生活、工作、學(xué)習(xí)的方方面面。而生成式AI作為AI宏觀體系中的一次大突破,正以驚人速度改變著自然語言處理、創(chuàng)意生成以及智能助手等領(lǐng)域的實(shí)踐落地。而在這個(gè)過程中,英特爾作為半導(dǎo)體、軟件、AI等技術(shù)領(lǐng)域的領(lǐng)導(dǎo)者和領(lǐng)先者,正以其強(qiáng)大的軟硬件支持,為生成式AI的蓬勃發(fā)展構(gòu)筑核心生態(tài)。

·硬件:AI普及的關(guān)鍵是讓普通電腦也能輕松跑動(dòng)各種大模型

一般來說,絕大部分AI相關(guān)應(yīng)用的著力點(diǎn)在GPU,因?yàn)樗鼡碛袕?qiáng)大的并行計(jì)算能力和浮點(diǎn)性能。但是此前在大灣區(qū)的一場(chǎng)技術(shù)分享會(huì)上,英特爾顛覆了我們對(duì)于AI計(jì)算硬件的認(rèn)知。

通過構(gòu)建BigDL-LLM庫(kù)的方式,英特爾讓ChatGPT這樣的大語言模型順利運(yùn)行在了支持AI加速引擎的第12代和13代酷睿處理器平臺(tái)上,并通過一系列優(yōu)化使其速度達(dá)到了非常流暢的級(jí)別。即便是主打續(xù)航、便攜能力的輕薄本,也能在16GB及以上內(nèi)存容量平臺(tái)中順利運(yùn)行最高達(dá)160億參數(shù)的大語言模型。而讓普普通通的筆記本電腦都能夠順利支持AI應(yīng)用,這必然會(huì)為AI普及構(gòu)筑出前所未有的堅(jiān)實(shí)基礎(chǔ)。

此外,BigDL-LLM庫(kù)不僅支持ChatGPT一種大語言模型,它還實(shí)現(xiàn)了對(duì)LLaMA/ LLaMA2、ChatGLM/ChatGLM2、MPT、Falcon、RedPajama等多個(gè)大語言模型的支持。而且英特爾還提供了易用的LangChain開源框架、Transformers神經(jīng)網(wǎng)絡(luò)API接口,并順利支持Windows、Linux操作系統(tǒng),從而為不同平臺(tái)的開發(fā)者們也帶來了巨大便利。

此外別忘了,英特爾現(xiàn)在也是高性能GPU領(lǐng)域的參與者,旗下的銳炫GPU不僅擁有應(yīng)用于大型數(shù)據(jù)中心、服務(wù)器領(lǐng)域的產(chǎn)品,在消費(fèi)市場(chǎng)落地的銳炫A系列顯卡同樣能夠?yàn)樯墒紸I應(yīng)用提供可靠的算力支持。因此在Stable Diffusion、Midjourney這樣的需要GPU算力的圖像生成式AI應(yīng)用領(lǐng)域,英特爾同樣能夠提供“專業(yè)對(duì)口”的硬件支持。如臺(tái)式機(jī)端的13代酷睿i7-13700K處理器加上銳炫A770獨(dú)顯,就能夠非常高效地運(yùn)行Stable Diffusion。

·軟件:積極擁抱AI社區(qū)通過軟件優(yōu)化提升AI應(yīng)用體驗(yàn)

如果說硬件為應(yīng)用落地構(gòu)建了基礎(chǔ),那么軟件就是如何在基礎(chǔ)之上構(gòu)建高樓,而軟件層面的優(yōu)化,則是考慮如何讓“高樓”從毛坯變成精裝。

一直以來,英特爾在軟件領(lǐng)域的投入都十分令人矚目。通過精心構(gòu)建軟件生態(tài),優(yōu)化模型性能,英特爾為生成式AI在個(gè)人電腦端的應(yīng)用創(chuàng)造了有利條件。

英特爾積極擁抱AI社區(qū),通過基于OpenVINO PyTorch后端的方案,使得開源模型能夠在英特爾的客戶端處理器、集成顯卡、獨(dú)立顯卡和專用AI引擎上順暢運(yùn)行。

同樣以生成式AI應(yīng)用中最火的圖形視覺領(lǐng)域?yàn)槔⑻貭栭_發(fā)了一套專門的AI框架,它可以在開啟OpenVINO加速的情況下,僅通過一行代碼的安裝,就可以加速PyTorch模型運(yùn)行。此時(shí),就可以讓Stable Diffusion Automatic1111 WebUI在集成顯卡和銳炫獨(dú)立顯卡上流暢運(yùn)行。

wKgaomTu4EmAKS5pAACrFB7gZrg988.png

我們?cè)谝慌_(tái)13代酷睿i7-13700H處理器+銳炫Xe核顯機(jī)器上試著讓Stable Diffusion生成一張圖片,所提的需求并未太過復(fù)雜,總體耗時(shí)為44秒,完成速度算是相當(dāng)快的了,畢竟這是在移動(dòng)平臺(tái)的核顯上做的圖片渲染和生成。

wKgZomTu4EqAKU8EAAE2OWcOpgg935.png

目前,單單是96EU的銳炫Xe核顯,就可以支持在Stable Diffusion上運(yùn)行FP16精度的模型,從而快速生成高質(zhì)量圖片,為內(nèi)容創(chuàng)作、視覺創(chuàng)意提供便利。

從這一案例可以看出,無論是文字生成圖片還是圖片生成圖片,英特爾通過軟件優(yōu)化、模型優(yōu)化,將模型對(duì)硬件資源的需求盡可能降到最低,從而提升模型的推斷速度,確保那些以往需要高性能顯卡才能運(yùn)行的開源模型能夠在個(gè)人電腦上也能高效運(yùn)行,這對(duì)于AI應(yīng)用普及同樣是意義非凡。

·英特爾大語言模型應(yīng)用落地12代、13代酷睿電腦全部支持

在8月18日舉辦的大灣區(qū)技術(shù)分享會(huì)上,英特爾還進(jìn)一步展示了其軟硬件體系在大語言模型應(yīng)用方面的實(shí)際表現(xiàn)。通過集成了ChatGLM2、LLa MA2和Star Coder三個(gè)大語言模型的英特爾大語言模型應(yīng)用Demo,成功展示了這些大語言模型在中文和英文應(yīng)用方面的表現(xiàn)。

比如我們通過它詢問了“AI在PC領(lǐng)域上的應(yīng)用”,它的首次響應(yīng)延遲只有215.3ms,也就是在提交問題到AI識(shí)別問題,再到開始生成問題答案的過程只有215.3ms,可以說是非常迅速。

wKgZomTu4EqAZOCyAACS9OJIJnk280.png

此外可以看到,這款軟件集成了中文、英文、代碼三種語言環(huán)境,對(duì)應(yīng)功能的指向性也很明確。聊天、情感分析、中文翻譯、故事創(chuàng)作等等,可以說是涵蓋了大語言模型的常見應(yīng)用。這樣的分類可以幫助用戶更加明確地向AI提出需求,而如何明確、正確提出需求,本身也是目前AI應(yīng)用中的難點(diǎn)之一。

我們也試著向AI提出了“和女朋友吵架了怎么哄她”的情感分析需求,首次響應(yīng)時(shí)間為249.8ms,比上一個(gè)問題響應(yīng)慢一些,可見和女朋友的情感問題擺在AI面前,它也需要多加思考一番。

wKgaomTu4EqAQiHNAABhHzR-4pc687.png

英特爾借助軟件端優(yōu)化和量化操作,使得大語言模型在進(jìn)行回答時(shí)能夠以非常快的速度生成答案,并且不影響整機(jī)使用流暢性,這同樣也是AI應(yīng)用普及的重要一步。目前英特爾已經(jīng)發(fā)布了這套Demo,任何搭載英特爾12代和13代酷睿的電腦都可以直接安裝并進(jìn)行體驗(yàn)。

·英特爾:AI on PC的核心賦能者

英特爾不僅僅是AI技術(shù)的提供者,更是讓AI on PC從“PPT”走向?qū)嶋H落地的核心賦能者。

借助支持AI加速引擎的12代、13代酷睿處理器,借助具備高效浮點(diǎn)性能的銳炫GPU等強(qiáng)力硬件,并且快速推出英特爾大語言模型應(yīng)用Demo以及通過后端優(yōu)化和OpenVINO加速來更好地支持Stable Diffusion圖形視覺領(lǐng)域的AI應(yīng)用,AI借助PC實(shí)現(xiàn)全面普及只是時(shí)間問題。

現(xiàn)階段,大眾用戶對(duì)于生成式AI應(yīng)用的使用意愿極為強(qiáng)烈,因?yàn)樗_實(shí)能夠解決很多實(shí)際問題。如提升辦公效率、提供輔助設(shè)計(jì)和創(chuàng)意理念等等,這些應(yīng)用能夠徹底改變?nèi)祟惉F(xiàn)階段的工作、生活方式,激發(fā)人們?cè)趧?chuàng)作、創(chuàng)意層面的靈感,而硬件性能強(qiáng)大的電腦無疑是最佳載體。

除了已經(jīng)發(fā)布的第12代與13代酷睿之外,英特爾下一代Meteor Lake處理器也將進(jìn)一步強(qiáng)化對(duì)于AI的底層支持,專門設(shè)計(jì)的NPU將為AI應(yīng)用帶來更加高效的體驗(yàn)。

在生成式AI集中落地的大潮中,英特爾是一個(gè)不可或缺的關(guān)鍵因素。從強(qiáng)勁性能的硬件支持到模型優(yōu)化的軟件技術(shù),英特爾為生成式AI的發(fā)展提供了全方位支持。在英特爾的引領(lǐng)下,生成式AI與PC將實(shí)現(xiàn)驚人的化學(xué)反應(yīng),為人類帶來更智能、更富創(chuàng)意PC使用體驗(yàn)。

文章來源:中關(guān)村在線

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    19404

    瀏覽量

    230874
  • 英特爾
    +關(guān)注

    關(guān)注

    61

    文章

    10007

    瀏覽量

    172178
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    31491

    瀏覽量

    269999
  • ChatGPT
    +關(guān)注

    關(guān)注

    29

    文章

    1566

    瀏覽量

    7964
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    英特爾2024產(chǎn)品年鑒:AI軟硬件的融合發(fā)展

    潛力,并攜手廣泛的生態(tài)合作伙伴促進(jìn)應(yīng)用落地。具體而言,2024年英特爾軟硬件產(chǎn)品及生態(tài)方面主要取得了以下進(jìn)展: 12月 英特爾發(fā)布代號(hào)為Battlemage的全新 銳炫B系列顯卡 。
    的頭像 發(fā)表于 12-31 17:28 ?176次閱讀
    <b class='flag-5'>英特爾</b>2024產(chǎn)品年鑒:<b class='flag-5'>AI</b>與<b class='flag-5'>軟硬件</b>的融合發(fā)展

    英特爾目標(biāo)明年出貨1億臺(tái)AI PC

    英特爾近日宣布,其目標(biāo)是在明年實(shí)現(xiàn)1億臺(tái)AI PC的出貨,相較于2024年4000萬臺(tái)的出貨目標(biāo),實(shí)現(xiàn)了150%的大幅增長(zhǎng)。這一雄心勃勃的目標(biāo)展示了英特爾
    的頭像 發(fā)表于 10-31 17:07 ?350次閱讀

    英特爾計(jì)劃明年AI PC出貨一億臺(tái)

    目標(biāo)相較于原先2024年4000萬臺(tái)的目標(biāo)有了大幅提升。這些AI PC將由英特爾AI處理器驅(qū)動(dòng),其中大部分將基于去年年底推出的Meteor
    的頭像 發(fā)表于 10-31 14:26 ?488次閱讀

    英特爾攜手百度智能云加速AI落地

    在2024年9月25日-26日舉辦的2024百度云智大會(huì)上,作為大會(huì)的聯(lián)合主辦方,英特爾帶來了AI全棧軟硬件方案,深入講解了如何基于英特爾 至強(qiáng) 處理器和新一代極具性價(jià)比的
    的頭像 發(fā)表于 10-12 10:08 ?532次閱讀

    英特爾軟硬件構(gòu)建模塊如何幫助優(yōu)化RAG應(yīng)用

    軟硬件構(gòu)建模塊如何幫助優(yōu)化RAG應(yīng)用,在簡(jiǎn)化部署和支持?jǐn)U展的同時(shí),增強(qiáng)其上下文感知能力和實(shí)時(shí)響應(yīng)性能。 1 為您的應(yīng)用量身定制GenAI ChatGPT的面世改變了AI的發(fā)展格局。企業(yè)爭(zhēng)相利用這項(xiàng)新技術(shù)
    的頭像 發(fā)表于 07-24 15:12 ?478次閱讀
    <b class='flag-5'>英特爾</b><b class='flag-5'>軟硬件</b>構(gòu)建模塊如何幫助優(yōu)化RAG應(yīng)用

    Intel Vision 2024大會(huì): 英特爾發(fā)布全新軟硬件平臺(tái),全速助力企業(yè)推進(jìn)AI創(chuàng)新

    的下一代英特爾?至強(qiáng)?6處理器的全新品牌。 ?推出英特爾?Gaudi 3 AI加速器,其推理能力和能效均有顯著提高。多家OEM客戶將采用,為企業(yè)在A
    的頭像 發(fā)表于 04-12 14:52 ?587次閱讀
    Intel Vision 2024大會(huì): <b class='flag-5'>英特爾</b>發(fā)布全新<b class='flag-5'>軟硬件</b>平臺(tái),全速助力企業(yè)推進(jìn)<b class='flag-5'>AI</b>創(chuàng)新

    英特爾預(yù)測(cè)2024年出貨4000萬AI PC,覆蓋輕薄PC及游戲掌機(jī)設(shè)備

    有國(guó)外媒體曾報(bào)道稱,上個(gè)月末,英特爾公司公布AI PC加速計(jì)劃——該項(xiàng)目新增了兩個(gè)關(guān)于人工智能(AI)的重大推進(jìn)策略,具體措施包括設(shè)立一項(xiàng)名
    的頭像 發(fā)表于 04-10 14:17 ?481次閱讀

    英特爾澎湃動(dòng)力驅(qū)動(dòng)商用AI PC,打造AI+時(shí)代的新質(zhì)生產(chǎn)工具

    近日,英特爾舉辦了“2024全新英特爾商用客戶端AI PC產(chǎn)品發(fā)布會(huì)”,將基于英特爾酷睿Ultra處理器的
    的頭像 發(fā)表于 04-02 10:12 ?477次閱讀

    英特爾面向AI PC軟件開發(fā)者與硬件供應(yīng)商新增助力計(jì)劃

    英特爾公司近日宣布“AI PC加速計(jì)劃”再添兩項(xiàng)人工智能(AI)新舉措,即新增“AI
    的頭像 發(fā)表于 04-02 10:09 ?355次閱讀

    英特爾升級(jí)AI PC加速計(jì)劃

    近日,英特爾公司正式推出“AI PC加速計(jì)劃”,旨在通過兩大新舉措進(jìn)一步推動(dòng)人工智能技術(shù)在個(gè)人電腦領(lǐng)域的應(yīng)用與發(fā)展。
    的頭像 發(fā)表于 03-28 11:46 ?715次閱讀

    英特爾宣布AI PC加速計(jì)劃新增兩項(xiàng)AI舉措

    首先,“AI PC 開發(fā)者計(jì)劃”面向軟件研發(fā)人員和獨(dú)立軟件開發(fā)商,為他們提供便捷的開發(fā)環(huán)境,助力加速大規(guī)模運(yùn)用新型 AI技術(shù)。此計(jì)劃包含一系列全面的工具、優(yōu)化工作流方案、
    的頭像 發(fā)表于 03-27 16:03 ?425次閱讀

    英特爾發(fā)布AI PC加速計(jì)劃,確立AI PC新標(biāo)準(zhǔn)

    同時(shí),英特爾也自定了更為簡(jiǎn)化的AI PC定義,即CPU、GPU和NPU均應(yīng)具備專屬AI加速能力,這恰恰反映了其最新力作Meteor Lake
    的頭像 發(fā)表于 03-27 10:10 ?478次閱讀

    英特爾酷睿Ultra通過全新英特爾vPro平臺(tái)將AI PC惠及企業(yè)

    近日,英特爾在2024年世界移動(dòng)通信大會(huì)(MWC 2024)上宣布,全新英特爾?vPro?平臺(tái)將AI PC的優(yōu)勢(shì)惠及商用客戶。
    的頭像 發(fā)表于 03-18 15:07 ?576次閱讀

    英特爾推出全新vPro平臺(tái),將AI PC的優(yōu)勢(shì)延伸至商用領(lǐng)域

    在2024年世界移動(dòng)通信大會(huì)(MWC 2024)上,英特爾宣布了其全新英特爾?vPro?平臺(tái)的發(fā)布,旨在將AI PC的先進(jìn)功能帶給商用客戶。這一平臺(tái)結(jié)合了內(nèi)置
    的頭像 發(fā)表于 03-03 15:47 ?1224次閱讀

    英特爾vPro讓AI PC造福企業(yè)

    全新vPro平臺(tái)為各種規(guī)模的企業(yè)提供出色的生產(chǎn)力、安全性、可管理性和穩(wěn)定性 最新消息:今天,英特爾在2024年世界移動(dòng)通信大會(huì)(MWC 2024)上宣布,全新英特爾??vPro?平臺(tái)將AI P
    的頭像 發(fā)表于 02-28 16:01 ?410次閱讀
    主站蜘蛛池模板: 美女扒开腿让男人桶个爽 | 好男人好资源视频高清 | 小短文H啪纯肉公交车 | 亚洲日韩精品AV中文字幕 | 亚洲精品高清AV在线播放 | 好男人的视频在线观看 | 日韩一区二区三区视频在线观看 | WWW亚洲精品久久久无码 | 乳巨揉みま痴汉电车中文字幕动漫 | 暖暖 免费 日本 高清 在线1 | 亚洲 欧美 国产 伦 综合 | 欧美疯狂做受xxxxx喷水 | 日本国产精品无码一区免费看 | 波多野结衣的AV一区二区三区 | 亚洲永久精品ww47app | 自拍 偷拍 亚洲 经典 | 国产成人精品男人的天堂网站 | 国产在线观看91精品 | 日韩精品 中文字幕 有码 | 少妇人妻偷人精品视蜜桃 | 色欲精品久久人妻AV中文字幕 | 国产精华av午夜在线观看 | 欧美高清 videos sexo | 久久亚洲伊人中字综合精品 | 亚洲精品成人A8198A片漫画 | 欧美日韩午夜群交多人轮换 | 边做边爱播放3免费观看 | 欧美一级久久久久久久久大 | 成人亚洲视频 | 女人会操出水图 | 亚洲熟妇无码乱子AV电影 | 国产对白精品刺激一区二区 | 中文字幕精品在线观看 | 国产精品久AAAAA片 | 日韩欧美一区二区三区在线 | 秘密教学26我们在做一次吧免费 | 日日干夜夜啪蕉视频 | 最新2017年韩国伦理片在线 | 天天影视网网色色欲 | 黑丝女仆恋上我 | 午夜国产精品免费观看 |