色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

下一代視頻編解碼技術(shù)優(yōu)化應(yīng)用的探索

LiveVideoStack ? 來源:LiveVideoStack ? 2020-08-10 16:28 ? 次閱讀

本文由華為云資深產(chǎn)品專家左雯在LiveVideoStackCon2020線上峰會的演講內(nèi)容整理而成,本文從視頻編解碼技術(shù)的趨勢、難點(diǎn)和挑戰(zhàn)以及華為云視頻產(chǎn)品的編解碼關(guān)鍵技術(shù)實(shí)踐與成果兩方面介紹下一代視頻編解碼技術(shù)優(yōu)化應(yīng)用的探索。

大家下午好,非常榮幸參加LiveVideoStack首屆音視頻線上峰會。先自我介紹一下,我叫左雯,來自華為云,是云視頻服務(wù)的產(chǎn)品經(jīng)理。在做產(chǎn)品經(jīng)理之前,一直從事視頻編解碼算法研究優(yōu)化、轉(zhuǎn)碼產(chǎn)品架構(gòu)設(shè)計(jì)等工作!今天參加這個(gè)專題目的有兩個(gè),一個(gè)是想通過這次峰會,向大家分享一下華為云視頻對下一代視頻編碼技術(shù)發(fā)展的想法和應(yīng)用成果,另一個(gè)是像各位專家學(xué)習(xí),相互交流,促進(jìn)下一代視頻編碼技術(shù)的快速發(fā)展,推動云視頻這個(gè)行業(yè)的發(fā)展。

今天分享的主題包括三個(gè)部分,首先是華為云視頻對視頻行業(yè)發(fā)展趨勢的一些看法,以及這些趨勢對下一代視頻編碼技術(shù)提出的挑戰(zhàn);其次從標(biāo)準(zhǔn)角度來介紹下一代視頻編碼技術(shù)以及華為相關(guān)工作;最后從云視頻應(yīng)用角度來具體介紹華為云在視頻編碼技術(shù)上的一些實(shí)踐和探索。希望能給大家?guī)砀韶浐图夹g(shù)啟發(fā)。

1

視頻行業(yè)趨勢

5G、云、AI已經(jīng)成為ICT行業(yè)甚至是整個(gè)社會的發(fā)展趨勢,促使整個(gè)視頻行業(yè)需求和技術(shù)不斷演進(jìn),推動整個(gè)視頻行業(yè)不斷升級。如圖所示,視頻生命周期的每個(gè)環(huán)節(jié)都在更新升級,包括視頻生產(chǎn)、視頻處理、視頻傳輸和視頻消費(fèi)。

視頻生產(chǎn):多源數(shù)據(jù)的采集,包括超高清、VR、自由視角、3D建模和視頻渲染。

視頻處理:基于AI讓視頻處理更實(shí)時(shí)、智能和準(zhǔn)確,包括各種編碼方式。

視頻傳輸:超低時(shí)延的傳輸,云邊協(xié)同等等。

視頻消費(fèi):智能終端的深度結(jié)合提供視頻服務(wù)的最佳體驗(yàn)。

視頻行業(yè)本質(zhì)是對媒體數(shù)據(jù)的處理,背后是算力、存儲、網(wǎng)絡(luò)、AI的支撐,同時(shí)視頻行業(yè)又推動著5G、云、AI的不斷前行,相輔相成!

視頻演進(jìn)帶動了算力、存儲、帶寬需求的大幅增長。簡單來看,視頻分辨率越來越高,從高清到超高清再到8K/VR。算力增長 24倍,存儲增長12倍,帶寬增長 20倍。這些需求通過云,也只有通過云才能很好的滿足,實(shí)現(xiàn)高質(zhì)量的視頻體驗(yàn)。云原生視頻是行業(yè)趨勢,視頻將成為云的基礎(chǔ)服務(wù)能力。

前面說的是行業(yè)的整體趨勢,下面說一下具體場景。互聯(lián)網(wǎng)視頻發(fā)展已經(jīng)歷兩個(gè)階段,第一階段從08年到13年,以長視頻VOD、點(diǎn)播觀看為熱點(diǎn);第二階段,從13年到19年,也就是去年,其實(shí)還在延續(xù),以直播、短視頻為熱點(diǎn);第三階段,也就是下一代會以什么為熱點(diǎn)?我們認(rèn)為因?yàn)?G、云、AI的推動,視頻將進(jìn)入實(shí)時(shí)互動、VR/AR時(shí)代。

互動視頻方式從IM向?qū)崟r(shí)音視頻過渡。直播連麥,主播PK,直播帶貨,視頻分發(fā)方式的升級,百毫秒級超低時(shí)延實(shí)時(shí)互動視頻成為趨勢。

VR/AR,360度視角帶來沉浸式體驗(yàn)革命,用戶從看視頻向玩視頻過渡,體驗(yàn)提升的同時(shí),視頻傳輸能力也從兆級向十兆甚至百兆級單流帶寬提升。

RTC實(shí)時(shí)音視頻會成為5G時(shí)代基礎(chǔ)設(shè)施的核心控制點(diǎn),RTC應(yīng)用很廣泛,它的市場年增長率是30%左右,而且這項(xiàng)技術(shù)不僅能賦能直播、游戲等泛娛樂行業(yè),更能在在線醫(yī)療、教育、金融等大視頻行業(yè)滲透。現(xiàn)有的實(shí)時(shí)音視頻市場正處于爆發(fā)期,玩家很多,但由于它是非云廠商,難以持續(xù)發(fā)展。原因之一是它的技術(shù)門檻比較高,特別是像音視頻編碼或者整個(gè)RTC網(wǎng)絡(luò)的構(gòu)建,另一點(diǎn)是目前各家均采用私有協(xié)議的方式接入,各家互通、客戶的自由切換都比較困難。在RTC視頻業(yè)務(wù)產(chǎn)品上,我們認(rèn)為音視頻編碼處理將是各家構(gòu)建技術(shù)壁壘和性能差異化競爭力的關(guān)鍵之一。

另外一個(gè)應(yīng)用場景就是Cloud VR,我們一直認(rèn)為VR是5G技術(shù)發(fā)展下的關(guān)鍵場景。VR發(fā)展是一波三折的,但在目前來看,之前碰到的一些問題正在逐漸改善。從終端的角度來看,之前的終端很貴,但是目前千元終端機(jī)已經(jīng)逐漸來臨,而且體驗(yàn)也會越來越好。除了設(shè)備終端,VR此前還面臨內(nèi)容缺失的重大問題,而VR直播很大程度上緩解了內(nèi)容缺乏的問題。 雖然困境在逐步改善,但VR目前還面臨著新的問題。互聯(lián)網(wǎng)VR業(yè)務(wù)很難形成商業(yè)閉環(huán),主要原因在于VR業(yè)務(wù)帶來了收入增加,但與此同時(shí)帶寬增加更多,VR追求的高質(zhì)量體驗(yàn)需要通過更高帶寬來實(shí)現(xiàn),高帶寬勢必會帶來高成本,而高成本就會導(dǎo)致商業(yè)無法閉環(huán)。在這樣的前提下,很多玩家都會通過降低體驗(yàn)來開展VR,比如說內(nèi)容采用4K以下,碼率采用10兆以下,終端采用卡片機(jī)來體驗(yàn)VR,雖然這樣可以將VR的業(yè)務(wù)打通,但體驗(yàn)效果是很差的,也導(dǎo)致付費(fèi)用戶非常少,產(chǎn)業(yè)發(fā)展比較緩慢。所以在VR的發(fā)展上,我們認(rèn)為通過視頻壓縮編碼以降低帶寬是關(guān)鍵,是可以幫助實(shí)現(xiàn)商業(yè)閉環(huán)的一個(gè)環(huán)節(jié)。

從前面講述視頻行業(yè)趨勢不難看出,用戶體驗(yàn)升級、視頻產(chǎn)業(yè)升級、商業(yè)成本等驅(qū)動著視頻全方位升級,分辨率從高清到8K,幀頻從30幀到120幀,視場角從不到90度到360度,SDR到HDR等,這些參數(shù)升級推動視頻壓縮編碼技術(shù)不斷演進(jìn),追求壓縮比是永恒不變的!

另外,前車之鑒,HEVC/H.265,其實(shí)是很優(yōu)秀的編碼技術(shù),但因?yàn)榍捌诓挥押玫膶@撸袌稣加新室恢辈桓?3%。還好目前有所好轉(zhuǎn)!整個(gè)行業(yè)急需壓縮比更高、生態(tài)更完善、專利政策更合理的視頻編碼技術(shù)。

提升壓縮比有兩條路線,這也是各廠商正在做的。

標(biāo)準(zhǔn)技術(shù)路線,作為基礎(chǔ)內(nèi)核,H.266、AV1、AVS3、AI編碼

非標(biāo)技術(shù)路線,依賴基礎(chǔ)標(biāo)準(zhǔn),結(jié)合人眼感知特征,感知編碼、內(nèi)容編碼、ROI編碼

2

下一代視頻編碼技術(shù)

下面將從這兩個(gè)角度來介紹華為云視頻在下一代視頻編碼技術(shù)上的一些工作。這些技術(shù)得力于華為2012媒體技術(shù)院全力支持。 2.1 下一代視頻編碼標(biāo)準(zhǔn)技術(shù)

從上圖看出,下一代的視頻編碼標(biāo)準(zhǔn)大概分為三個(gè)陣營或者三個(gè)類型:

國際標(biāo)準(zhǔn):由MPEG、VVC聯(lián)合推動的像VVC/H.266還有EVC;

國內(nèi)標(biāo)準(zhǔn):國內(nèi)標(biāo)準(zhǔn)組織正在推出或已經(jīng)推出的AVS3的phase1、AVS3的phase2,兩者主要差別在于AVS3的第1階段標(biāo)準(zhǔn)瞄準(zhǔn)H.266,第二階段的標(biāo)準(zhǔn)則是瞄準(zhǔn)未來,可能會加入一些智能編碼的技術(shù);

谷歌牽頭的AOM聯(lián)盟推出的AV1,是一個(gè)開源技術(shù)。

下一代的視頻編碼技術(shù)仍是采用傳統(tǒng)的演進(jìn)思路——在經(jīng)典架構(gòu)上做模塊增強(qiáng)。在H.266CFP時(shí),華為聯(lián)合其他幾家公司提了P41提案,在PSNR和MOS評估方面都是排名第一,這個(gè)提案也是后面基礎(chǔ)。華為在VVC里的核心專利數(shù)量已屬于第一陣營,這是一個(gè)了不起的成就,也說明了國內(nèi)的視頻壓縮編碼基礎(chǔ)研究實(shí)際上不弱于歐美傳統(tǒng)的公司。

上圖是以VVC為例,對其新增的增強(qiáng)工具進(jìn)行盤點(diǎn)。縱軸是每個(gè)工具的壓縮收益,橫軸是每個(gè)工具編解碼復(fù)雜度,編碼復(fù)雜度的權(quán)重可能會更高一點(diǎn)。VVC在塊劃分、幀內(nèi)預(yù)測、幀間預(yù)測、熵編碼、變換量化等多個(gè)模塊上進(jìn)行了增強(qiáng),其中主要的增強(qiáng)是幀內(nèi)、幀間預(yù)測、塊劃分、濾波的增強(qiáng)以及機(jī)器學(xué)習(xí)工具演進(jìn)帶來的收益。VVC暫時(shí)沒有引入深度學(xué)習(xí)這一類編碼工具。 圖中還有三個(gè)用紅圈標(biāo)出來的工具,這是VVC中公認(rèn)trade off比較好的三個(gè)工具點(diǎn)。藍(lán)色的是ALF,這是大家比較熟悉的自適應(yīng)環(huán)路濾波,其實(shí)它在H.265的時(shí)代就已經(jīng)有了, H.266將它引入標(biāo)準(zhǔn)中;綠色的是仿射運(yùn)動預(yù)測,這個(gè)主要是由華為提出的;橙色的是量化技術(shù)。

EVC標(biāo)準(zhǔn)的提出某種程度是因?yàn)镠.265/H.266的專利政策不友好,有可能導(dǎo)致H.266的落地都比較困難。MPEG希望能通過一個(gè)新的專利友好的標(biāo)準(zhǔn)來推動落地,同時(shí)也促使改變H.266、H.265的專利授權(quán)政策。EVC由華為、三星高通等共同提出推動,華為在這里面加入了很多技術(shù)。在標(biāo)準(zhǔn)立項(xiàng)時(shí)期望它比H.265的壓縮性能提升20%,實(shí)測在4K娛樂視頻上相比H.265壓縮效率提升達(dá)30%以上,目前已經(jīng)進(jìn)入了最終的標(biāo)準(zhǔn)投票階段。 AVS3是國內(nèi)提出的標(biāo)準(zhǔn),它的phase1是瞄準(zhǔn)H.266標(biāo)準(zhǔn)的,并且在2019年3月份就已經(jīng)制定完成率先推出,在2019年9月份,華為海思也同步推出了AVS3 8K的解碼芯片,AVS3相對H.265性能提升了20%以上,并且針對娛樂視頻和監(jiān)控視頻做了很多針對性的設(shè)計(jì),性能上還可進(jìn)一步提升。

H.266實(shí)際已經(jīng)基本定稿,它的壓縮效率在4K視頻場景下相較于H.265能提升40%左右,其解碼復(fù)雜度相對提升60%,目前看最大的問題還是專利政策不夠透明,而且專利費(fèi)可能比較高,推廣節(jié)奏可能相對比較慢。

EVC也基本定稿,而且其壓縮效率也能提升30%左右,解碼復(fù)雜度相對H.265增加60%。其專利收費(fèi)可能相對比較低,第二是他的專利收費(fèi)比較透明和明確,目前主要依靠三星、華為、高通來做產(chǎn)業(yè)的推動和生態(tài)的構(gòu)建。

AVS3在2019年3月份推出,在性能上還是有保證的,壓縮效率能夠提升25%,復(fù)雜度增加相對較低,其專利收費(fèi)也是比較低的,正通過互聯(lián)網(wǎng)等行業(yè)做產(chǎn)業(yè)的推動和生態(tài)構(gòu)建,目前實(shí)際上有很多聯(lián)盟和和公司正在做推動,我們也希望AVS3盡快落地。

表格中沒有列舉AV1的數(shù)據(jù),這主要是因?yàn)樗推渌齻€(gè)標(biāo)準(zhǔn)不太一樣,AV1開源軟件實(shí)際上是瞄準(zhǔn)商用化去做的,大家也比較清楚其壓縮效率和解碼復(fù)雜度。AV1有個(gè)很大的優(yōu)勢就是沒有專利費(fèi),這是AOM聯(lián)盟的承諾。在產(chǎn)業(yè)落地方面AV1做的很好,生態(tài)構(gòu)建走的較前。

2.2 AI編碼 下一代視頻編碼標(biāo)準(zhǔn)還有一個(gè)趨勢就是AI編碼,這一塊實(shí)際上從HEVC、VVC標(biāo)準(zhǔn)制定就有提出,但因?yàn)榭紤]計(jì)算復(fù)雜度以及AI硬件普適性,都暫時(shí)擱置了。但這是個(gè)技術(shù)趨勢。

AI編碼包括兩個(gè)演進(jìn)思路,第一個(gè)是全新架構(gòu),類似于圖像編碼,實(shí)際上AI的圖像編碼已經(jīng)取得了不錯的成效,谷歌牽頭的AI圖像編碼技術(shù)都已經(jīng)得到了很好地應(yīng)用,但針對視頻中的應(yīng)用還在探索過程中。所謂的全新架構(gòu),就是不用傳統(tǒng)架構(gòu),視頻進(jìn)入黑盒后會得出一個(gè)壓縮過的視頻,這個(gè)視頻可能沒有塊劃分,也沒有各種其他的方式,它的壓縮效率會非常高,但這一切還處于研究的過程中。

另外一個(gè)思路是基于經(jīng)典架構(gòu),對每個(gè)架構(gòu)里的模塊做增強(qiáng)。例如針對塊劃分、變換、矢量量化、幀內(nèi)預(yù)測做不同的AI網(wǎng)絡(luò)適應(yīng)和增強(qiáng)。實(shí)際上華為也在做這方面的研究,未來可能會提出一些AI編碼方面的論文或提案。并且我們認(rèn)為AI編碼的這兩種思路,最終將是融合設(shè)計(jì)的過程,不會呈相互獨(dú)立的狀態(tài)。

3

華為云視頻應(yīng)用和實(shí)踐

3.1 云視頻簡介 上面簡單介紹了下一代視頻編碼標(biāo)準(zhǔn)技術(shù),下面介紹一下從實(shí)際商用及非標(biāo)角度,介紹一下華為云視頻在視頻編碼技術(shù)上的應(yīng)用和實(shí)踐。

首先介紹一下華為云視頻,華為云視頻是從2017年開始構(gòu)建的,目前包括兩大類業(yè)務(wù),一種是比較傳統(tǒng)的直播、點(diǎn)播、媒體處理以及監(jiān)控業(yè)務(wù),另一種是整個(gè)行業(yè)正在新晉的服務(wù),比如RTC、VR/AR以及超高清制播。華為云視頻面向很多的場景,例如娛樂直播、短視頻、在線教育、企業(yè)直播、4K直播、4K制作等等,我們致力于幫助行業(yè)客戶、伙伴、開發(fā)者、ISV快速上線應(yīng)用,并幫他們構(gòu)建差異化的競爭力,實(shí)現(xiàn)商業(yè)閉環(huán)。這里需要重點(diǎn)提一下RTC,RTC是華為云視頻對下一代視頻的理解并作出了實(shí)際的推動,針對RTC,我們重點(diǎn)構(gòu)建超低時(shí)延、音視頻質(zhì)量等差異化競爭力。 3.2 視頻編碼技術(shù) 3.2.1 視頻編碼框架

結(jié)合今天的主題,下面重點(diǎn)講解華為云視頻在視頻編碼技術(shù)上的一些工作。這些技術(shù)得力于華為2012媒體技術(shù)院全力支持。上圖比較直觀地表達(dá)了這點(diǎn)。圖中黃框表示了編碼器的內(nèi)核,所有的華為云視頻編碼的編碼能力、編碼服務(wù)都是基于編碼內(nèi)核。編碼內(nèi)核采用了一個(gè)標(biāo)準(zhǔn)的編碼器,類似于前面提到的H.264、H.265、AVS3、H.266或者EVC這一類,在這個(gè)編碼內(nèi)核的基礎(chǔ)上,我們面向不同的場景做了不同的編碼技術(shù)的優(yōu)化和實(shí)踐。比如 面向RTC實(shí)時(shí)音視頻場景,采用低時(shí)延編碼技術(shù);面向VR場景,采用FOV tile編碼;面向多視角場景,采用空間云邊協(xié)同編碼;面向監(jiān)控場景,采用智能語義編碼;面向直播、點(diǎn)播,采用感知編碼和畫質(zhì)增強(qiáng)等;另外,華為云視頻借助鯤鵬、昇騰兩大專有硬件,加速視頻編轉(zhuǎn)碼效率。鯤鵬主要面向CPU這類計(jì)算,昇騰主要面向AI方面的加速。 3.2.2 標(biāo)準(zhǔn)編碼內(nèi)核

接下來分別介紹一下視頻編碼的技術(shù),第一是編碼內(nèi)核,華為云在商用編碼器上面也有很多的技術(shù)積累。比如說近幾年在MSU的大賽上,HW265編碼器連續(xù)兩年獲得多項(xiàng)測評的第1名,今年我們也會向MSU推出新的編碼器。 3.2.3 高清低碼

第二個(gè)技術(shù)是高清低碼,高清低碼目前在各個(gè)廠商或者商業(yè)領(lǐng)域里是大家比較默認(rèn)的技術(shù),也就是說在基于標(biāo)準(zhǔn)編碼內(nèi)核的基礎(chǔ)上,能降低碼率的同時(shí)保證主觀質(zhì)量沒有下降,但實(shí)際上高清低碼理論可行性是現(xiàn)有視頻編碼是基于香農(nóng)定理,它的率失真模型都是連續(xù)的,但是人眼視覺模型是階梯性非連續(xù)的,在這個(gè)階梯上存在一個(gè)降碼率的空間。 高清低碼一般情況下包括三個(gè)模塊,第一是基于人眼JND模型,就是說如何找出JND,第二是基于JND去做感知編碼,第三就是通過感知編碼來控制標(biāo)準(zhǔn)編碼內(nèi)核輸出,在主觀質(zhì)量不變的情況下大幅降低碼率。華為云視頻在這方面做了很多的工作,目前針對不同的應(yīng)用場景,能達(dá)到30~50%的碼率降低。

高清低碼技術(shù)現(xiàn)在也走到了一個(gè)瓶頸期,原有高清低碼的考慮僅來源于編碼與傳輸信道,隨著AI技術(shù)的發(fā)展,是否還有進(jìn)一步的發(fā)展空間?華為提出了一種新的思路:在原有的率失真模型上,加入一個(gè)接收端(解碼端)復(fù)雜度的因子,也就是在發(fā)送端主動退化,把它通過時(shí)域或者空域的下采樣變成一個(gè)相對數(shù)據(jù)量比較小的視頻,這樣做使得編碼的碼率相對更低,達(dá)到有效降低碼率的目標(biāo)。通過一些輔助信息再加上低碼率、低分辨率的編碼碼流,在接收端通過AI技術(shù)進(jìn)行超分、插幀或者是增強(qiáng),將視頻還原,如此整個(gè)鏈路上傳輸?shù)拇a率會大幅下降,我們初步試驗(yàn)發(fā)現(xiàn)至少能降低60%以上的碼率。 3.2.4 超低時(shí)延編碼

RTC場景是我們面向下一代視頻產(chǎn)業(yè)重點(diǎn)打造的服務(wù)能力,RTC場景下主要是超低時(shí)延的編碼,我們提出了一個(gè)綜合的超低時(shí)延方案,比如編碼和渲染聯(lián)合優(yōu)化、編碼的內(nèi)核以及分層編碼和信源信道協(xié)同等技術(shù)手段,面向不同的實(shí)時(shí)場景會做不同的組合或者應(yīng)用,我們初步試驗(yàn)發(fā)現(xiàn)在1080P這種場景下進(jìn)行編碼和解碼,整體的時(shí)延能達(dá)到十毫秒級別。 3.2.5 VR FOV編碼

面向VR場景,特別是面向360°場景,我們提出來FOV TWS的編碼技術(shù)。這個(gè)技術(shù)原理是將高分辨率的全景視頻分片,多個(gè)FOV的小分片加上一路4K的背景流,這樣4K終端的播放器就能通過相應(yīng)的視角FOV分片和4K全景背景流實(shí)現(xiàn)8K VR全景視頻播放,同時(shí)還能保證MTP,不會出現(xiàn)眩暈感。該技術(shù)已經(jīng)寫入OMAF的標(biāo)準(zhǔn)。整體體驗(yàn)上也得到了用戶的認(rèn)可。 3.2.6 智能語義編碼

當(dāng)面向監(jiān)控場景的時(shí)候,我們提出了一種智能語義的編碼,主要通過背景建模加上視頻內(nèi)容和運(yùn)動分析,再加上端側(cè)的一些實(shí)時(shí)超分、插幀來構(gòu)建智能語義編碼的方案。監(jiān)控場景的畫面往往有很多細(xì)節(jié),各種機(jī)器分析的識別率不能降低,如果壓的太狠,識別率可能就會下降。初步的原型結(jié)果顯示能做到在人和機(jī)器的識別率都不降低的前提下,達(dá)到70%以上的碼率節(jié)省。 3.2.7 空間視頻云邊協(xié)同編碼

另外一個(gè)技術(shù)是空間視頻編碼,所謂空間視頻就是是自由視角或多視角,這也是以后技術(shù)發(fā)展的一個(gè)方向。人們不再滿足于一個(gè)固定視角視頻觀看,希望多視點(diǎn)或者自由視角的觀看視頻。在空間視頻的編解碼當(dāng)中,我們提出一種云邊協(xié)同編碼,通過這種編碼可以在邊緣非常短的時(shí)間內(nèi)按需動態(tài)的生成任意時(shí)刻的切換流,大幅減少一般方案中切換流的碼率,初步試驗(yàn)發(fā)現(xiàn)至少能降低60%左右的帶寬成本。 3.2.8 AI視頻增強(qiáng)

視頻質(zhì)量、視頻碼率是視頻產(chǎn)業(yè)最關(guān)鍵的兩個(gè)指標(biāo)。前面講的技術(shù),不管是標(biāo)準(zhǔn)的技術(shù)、還是非標(biāo)的技術(shù),都是追求在同等畫質(zhì)的前提下,如何降低碼率。

硬幣的另一面則是,在同等碼率下,如何追求視頻主觀體驗(yàn)質(zhì)量。我們在這方面也做了很多嘗試,根據(jù)不同的場景特征,基于云端、終端AI能力,從分辨率、幀頻動態(tài)范圍等維度對視頻進(jìn)行修復(fù)、增強(qiáng)和重建。并且考慮真實(shí)場景中往往是包含多種混合失真的等因素,我們提出一種面向混合失真的多任務(wù)視頻增強(qiáng)框架,能夠很好地適應(yīng)不同場景和不同需求。

以上內(nèi)容介紹的是華為云視頻在視頻編解碼上的一些實(shí)踐和探索,希望能帶給大家一些干貨或者啟發(fā)。謝謝大家!

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 視頻編碼
    +關(guān)注

    關(guān)注

    2

    文章

    113

    瀏覽量

    21061
  • 云視頻
    +關(guān)注

    關(guān)注

    0

    文章

    28

    瀏覽量

    4681
  • 華為云
    +關(guān)注

    關(guān)注

    3

    文章

    2682

    瀏覽量

    17586

原文標(biāo)題:下一代視頻編碼技術(shù)的云視頻應(yīng)用探索

文章出處:【微信號:livevideostack,微信公眾號:LiveVideoStack】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    視頻編解碼標(biāo)準(zhǔn)課件

    編解碼起初的MEPG-1開始,及相關(guān)專業(yè)組織的各個(gè)標(biāo)準(zhǔn)開始,詳細(xì)介紹講解了各編碼原理。
    發(fā)表于 12-06 15:07 ?0次下載

    基于Arm架構(gòu)的珠峰芯片加速極致視頻體驗(yàn)

    ;H.265/HEVC 進(jìn)步提高了壓縮效率,在傳輸高清視頻流和 4K 視頻時(shí)所需的帶寬大約是 H.264 的半。然而,新一代
    的頭像 發(fā)表于 11-01 13:54 ?1517次閱讀
    基于Arm架構(gòu)的珠峰芯片加速極致<b class='flag-5'>視頻</b>體驗(yàn)

    下一代機(jī)器人技術(shù):工業(yè)自動化的五大趨勢

    隨著人工智能(AI)技術(shù)的迅猛發(fā)展和全球制造業(yè)的轉(zhuǎn)型升級,下一代機(jī)器人技術(shù)正在引領(lǐng)工業(yè)自動化領(lǐng)域的新輪變革。這些變革不僅深刻影響著生產(chǎn)模式,還為企業(yè)帶來了前所未有的機(jī)遇和挑戰(zhàn)。
    的頭像 發(fā)表于 10-23 15:52 ?770次閱讀

    通過電壓轉(zhuǎn)換啟用下一代ADAS域控制器應(yīng)用說明

    電子發(fā)燒友網(wǎng)站提供《通過電壓轉(zhuǎn)換啟用下一代ADAS域控制器應(yīng)用說明.pdf》資料免費(fèi)下載
    發(fā)表于 09-11 11:32 ?0次下載
    通過電壓轉(zhuǎn)換啟用<b class='flag-5'>下一代</b>ADAS域控制器應(yīng)用說明

    實(shí)現(xiàn)具有電平轉(zhuǎn)換功能的下一代無線信標(biāo)

    電子發(fā)燒友網(wǎng)站提供《實(shí)現(xiàn)具有電平轉(zhuǎn)換功能的下一代無線信標(biāo).pdf》資料免費(fèi)下載
    發(fā)表于 09-07 10:23 ?0次下載
    實(shí)現(xiàn)具有電平轉(zhuǎn)換功能的<b class='flag-5'>下一代</b>無線信標(biāo)

    IaaS+on+DPU(IoD)+下一代高性能算力底座技術(shù)白皮書

    大規(guī)模生產(chǎn)環(huán)境落地應(yīng)用的條件。某種程度上,IoD 技術(shù)已成為下一代高性能算力底座的核心技術(shù)與最佳實(shí)踐。 白皮書下載:*附件:IaaS+on+DPU(IoD)+下一代高性能算力底座+
    發(fā)表于 07-24 15:32

    24芯M16插頭在下一代技術(shù)中的潛力

      德索工程師說道隨著科技的飛速發(fā)展,下一代技術(shù)正逐漸展現(xiàn)出其獨(dú)特的魅力和潛力。在這背景下,24芯M16插頭作為種高性能、多功能的連接器,將在
    的頭像 發(fā)表于 06-15 18:03 ?394次閱讀
    24芯M16插頭在<b class='flag-5'>下一代</b><b class='flag-5'>技術(shù)</b>中的潛力

    賽輪思與NVIDIA合作,利用生成式AI打造下一代車內(nèi)體驗(yàn)

    AI 驅(qū)動的移動出行創(chuàng)新企業(yè)與 NVIDIA 合作,打造下一代車內(nèi)體驗(yàn)。
    的頭像 發(fā)表于 05-23 10:12 ?1296次閱讀

    【RTC程序設(shè)計(jì):實(shí)時(shí)音視頻權(quán)威指南】音視頻編解碼壓縮技術(shù)

    實(shí)現(xiàn)更高的壓縮比和更好的圖像質(zhì)量。兩種都是有損壓縮的技術(shù),可以通過平衡壓縮比和圖像質(zhì)量,選擇不同的質(zhì)量級別。 視頻編解碼也是種用于壓縮和解壓縮數(shù)字
    發(fā)表于 04-28 21:04

    【RTC程序設(shè)計(jì):實(shí)時(shí)音視頻權(quán)威指南】新書

    應(yīng)用,為開發(fā)者提供了完整的RTC解決方案。 首先RTC 是個(gè)涉及音視頻編解碼、網(wǎng)絡(luò)傳輸、實(shí)時(shí)交互等多個(gè)領(lǐng)域的復(fù)雜技術(shù)。希望能通過這本書從基礎(chǔ)知識開始,逐步深入到高級應(yīng)用和系統(tǒng)設(shè)計(jì)。
    發(fā)表于 04-22 09:09

    國產(chǎn)可編程振蕩器在視頻編解碼器中的應(yīng)用,兼容SiTime

    國產(chǎn)可編程振蕩器在視頻編解碼器中的應(yīng)用,兼容SiTime
    的頭像 發(fā)表于 04-17 09:39 ?2307次閱讀
    國產(chǎn)可編程振蕩器在<b class='flag-5'>視頻</b><b class='flag-5'>編解碼</b>器中的應(yīng)用,兼容SiTime

    使用NVIDIA Holoscan for Media構(gòu)建下一代直播媒體應(yīng)用

    NVIDIA Holoscan for Media 現(xiàn)已向所有希望在完全可重復(fù)使用的集群上構(gòu)建下一代直播媒體應(yīng)用的開發(fā)者開放。
    的頭像 發(fā)表于 04-16 14:04 ?738次閱讀

    烽火通信在MWC 2024展示基于下一代PON和Wi-Fi7的全光接入網(wǎng)

    在全球數(shù)字化浪潮中,烽火通信在2024年的世界移動通信大會(MWC)上引領(lǐng)了下一代網(wǎng)絡(luò)技術(shù)的新潮流。該公司展示了基于下一代PON和Wi-Fi7技術(shù)的新
    的頭像 發(fā)表于 03-01 09:51 ?1159次閱讀

    三星擴(kuò)大與Arm合作,優(yōu)化下一代GAA片上系統(tǒng)IP

    三星方面確認(rèn),此舉目的在于提升無晶圓廠商使用尖端GAA工藝的可能性,并縮減新品開發(fā)周期及費(fèi)用。GAA被譽(yù)為下一代半導(dǎo)體核心技術(shù),使晶體管性能得以提升,被譽(yù)為代工產(chǎn)業(yè)“變革者”。
    的頭像 發(fā)表于 02-21 16:35 ?833次閱讀

    超越4K!高清視頻編碼器引領(lǐng)的下一代視頻革命

    隨著科技的飛速發(fā)展,4K視頻已經(jīng)逐漸融入我們的日常生活,成為了許多家庭、企業(yè)和內(nèi)容創(chuàng)作者的首選。然而,當(dāng)我們還在沉浸于4K帶來的視覺盛宴時(shí),高清視頻編碼器已經(jīng)悄然引領(lǐng)著下一代視頻革命,
    的頭像 發(fā)表于 02-20 15:20 ?458次閱讀
    主站蜘蛛池模板: 日本XXXXZZX片免费观看 | 久久视频这只精品99re6 | 超碰97人人做人人爱网站 | 久久偷拍国2017的 | 国产看黄网站又黄又爽又色 | 俄罗斯少女人体 | 一本道久在线综合色色 | 国产欧美亚洲综合第一页 | 259luxu高跟黑色丝袜系列 | www.中文字幕在线观看 | 国产成人免费全部网站 | 最近免费中文字幕完整版HD | 特污兔午夜影视院 | 亚洲h视频在线观看 | 6080yy 久久 亚洲 日本 | 欧美成人一区二免费视频 | 人妻免费视频公开上传 | 精品视频在线一区 | 国产精品无码AV天天爽人妻蜜桃 | 在线 无码 中文 强 乱 | 色爱AV综合区 | 国产精品高清在线观看地址 | 丰满女友bd高清在线观看 | 韩国精品无码少妇在线观看网站 | 国产精品禁18久久久夂久 | 诱人的女邻居9中文观看 | 国产在线播放精品视频 | 麻豆久久婷婷五月国产 | 久久久久久久国产精品视频 | 欧美一区二区高清 | 花蝴蝶高清在线视频免费观看 | 广东95后小情侣酒店自拍流出 | 清晨紧湿爱运动h高h | 国内精品自产拍在线少密芽 | 乳巨揉みま痴汉电车中文字幕动漫 | 国产精品1区在线播放 | 成人在无码AV在线观看一 | 国产精自产拍久久久久久蜜 | 欧美日韩高清一区二区三区 | 在线观看永久免费网站 | 东日韩二三区 |