會上,百度 AR 宣布技術(shù)開放平臺 DuMix AR 全面升級5.0,帶來一體化人機(jī)交互與大場景物理世界交互兩大 AR 技術(shù)系統(tǒng)級革新;并以持續(xù)構(gòu)建的虛實融合基礎(chǔ)設(shè)施和不斷變革的人機(jī)交互創(chuàng)新體驗,推出六大行業(yè)解決方案。
兩大AR交互系統(tǒng)創(chuàng)新發(fā)布
2017年,百度 AR 在百度 AI 開發(fā)者大會上首次發(fā)布技術(shù)開放平臺 DuMix AR ,將 AR 技術(shù)賦能廣大開發(fā)者。兩年后,百度 AR 交出新的成績單 —— 全面升級 DuMix AR 5.0平臺,發(fā)布兩大 AR 交互系統(tǒng),實現(xiàn)從認(rèn)識物到理解人,到探知世界的智能感知能力進(jìn)階,將 AR 技術(shù)應(yīng)用的邊界從眼前的空間擴(kuò)展至物理世界大場景。
由人臉、人體、手勢等相關(guān)視覺技術(shù),及完備的環(huán)境特效能力共同構(gòu)成的一體化人機(jī)交互系統(tǒng),實現(xiàn)了人與周遭環(huán)境的實時跟蹤互動,目前正廣泛應(yīng)用于視頻拍攝和游戲互動場景,為人們帶來持續(xù)創(chuàng)新的交互體驗。
為實現(xiàn)人臉特征點和輪廓點的精準(zhǔn)定位,百度 AR 從自建人臉數(shù)據(jù)庫的海量數(shù)據(jù)中提取東方人臉型基底,并以此為基礎(chǔ)構(gòu)建了一套穩(wěn)定高效的用戶臉型三維重建算法,使得在進(jìn)行人臉驅(qū)動表情估計時,能夠提取到更精確的表情結(jié)果。
此外,基于百度飛槳 Paddle Paddle 高性能深度學(xué)習(xí)框架,人臉關(guān)鍵點檢測在大姿態(tài)、極端表情、遮擋等復(fù)雜場景下都表現(xiàn)出可靠的魯棒性和準(zhǔn)確性。在這之上,拓展出人臉美型、美妝、 3D 道具及 3D 動畫表情等十余項豐富的?臉特效能力,為全民小視頻、好看視頻等應(yīng)用和華為、魅族等企業(yè)級合作伙伴提供了視頻特效拍攝方案。
百度 AR 還建立了一系列業(yè)內(nèi)領(lǐng)先的超輕量級(計算量小,體積小)手部交互算法能力矩陣,涵蓋手勢識別、指尖點檢測和手勢關(guān)鍵點檢測,除了常見的控雨等手勢控制操作,還能自定義手部特效、空間作畫等多種創(chuàng)意玩法。
在移動端,百度率先實現(xiàn)了肢體骨骼點/輪廓點檢測跟蹤,支持人體實時定位與動作捕捉;同時以18點/59點兩種不同輸出方式,跨平臺兼容各主流終端設(shè)備。包含人像分割、天空分割、頭發(fā)分割、物體檢測等多項算法能力在內(nèi)的環(huán)境特效能力矩陣,致力于打造人像與虛擬環(huán)境的自然融合,可以任意選擇背景替換、染發(fā)、天空特效、動畫疊加等 AR 效果。
同時,我們將一體化人機(jī)交互系統(tǒng)全面接入百度智能云平臺,支持為企業(yè)提供更全面、更易用的智能化能力和更完善的視頻解決方案。
VPAS-視覺定位與增強(qiáng)服務(wù)首發(fā),復(fù)現(xiàn)圓明園大水法盛景
未來是什么?是無數(shù)個過去和現(xiàn)在疊加在一起。當(dāng)我們站在此時此刻,能否借一雙未來的眼去回看歷史的景象?
在開發(fā)者大會上,百度 AR 首次發(fā)布 VPAS (視覺定位與增強(qiáng)服務(wù)),通過視覺定位與 AR 技術(shù)的突破性結(jié)合,將虛擬信息與真實地理位置準(zhǔn)確重合,實現(xiàn)大場景物理世界的 AR 交互。當(dāng)你跟隨百度地圖導(dǎo)航走進(jìn)圓明園西洋樓景區(qū), VPAS 將自動“找到”大水法遺址,在這片殘垣斷壁上重現(xiàn)100多年前雕欄玉砌、“獵狗逐鹿”的恢宏奇景。
VPAS 主要包含離線高精地圖構(gòu)建、在線定位與融合跟蹤三大基礎(chǔ)模塊,相比 GPS 具備更穩(wěn)定的實時跟蹤能力,支持室外大場景及室內(nèi)場景厘米級高精度定位。
百度 AR 在視覺信息要素積累的基礎(chǔ)上實現(xiàn)了一套完整的視覺地圖構(gòu)建方案,即實行眾源數(shù)據(jù)采集模式,對用戶通過手機(jī)收集反饋的圖像數(shù)據(jù)進(jìn)行處理分析,結(jié)合百度地圖的地理位置信息持續(xù)更新完善視覺地圖。
目前,百度 AR 已打通常見三維重建數(shù)據(jù)導(dǎo)入接口,并且兼容相同格式下的第三方數(shù)據(jù),具備易集成特性和數(shù)據(jù)批量化生產(chǎn)能力。
VPAS 采用了最具前瞻性的視覺技術(shù)方案,以及兼容 Google 、 Apple 平臺的持續(xù)跟蹤能力與獨有自研跟蹤能力共同構(gòu)成的融合跟蹤方案,能夠支持當(dāng)前市場主流機(jī)型的全場景體驗需求。同時結(jié)合百度視覺語義化能力,持續(xù)提升在線定位與實時跟蹤的穩(wěn)定性和精準(zhǔn)度。
在 AI+5G 論壇上,通過 VPAS 復(fù)現(xiàn)圓明園大水法為大家展現(xiàn)了百度 AI 能力與 5G 結(jié)合的一大可落地應(yīng)用場景,隨著 5G 時代到來, AI 與 5G /邊緣計算相互賦能不斷深化,我們將以大水法為起點,拓展景區(qū)、商圈等更多室內(nèi)外場景,結(jié)合 VPAS 為物理世界可視化導(dǎo)航服務(wù)帶來體驗式變革。
六大行業(yè)解決方案,助力產(chǎn)業(yè)智能化升級
在技術(shù)能力持續(xù)積累的同時,百度 AR 與開發(fā)者和生態(tài)伙伴一起不斷探索 AR 在各個行業(yè)的實用場景和解決方案。
本次 AI 開發(fā)者大會上,百度 AR 發(fā)布全新 DuMix AR 5.0平臺,針對娛樂互動、智能營銷、智能設(shè)備、景區(qū)行業(yè)、教育行業(yè)及汽車行業(yè),發(fā)布六大解決方案,覆蓋從 AR 內(nèi)容生產(chǎn)到消費應(yīng)用全場景。
01. 娛樂互動解決方案
百度 DuMix AR 聚焦精細(xì)美化方向,在人臉特效、美化特效、人體及環(huán)境特效方面都帶來了出色表現(xiàn),實現(xiàn)了虛擬特效貼紙、動畫表情、美化濾鏡等與人臉/人體的精準(zhǔn)貼合,人像與虛擬環(huán)境的自然融合。
在兼容性方面,百度 DuMix AR 人機(jī)交互能力進(jìn)行全機(jī)型覆蓋,兼容市場上絕大多數(shù)高中低端移動設(shè)備,支持和滿足各類視頻、直播、實時通話等應(yīng)用需求。
此外,百度 AR 還將內(nèi)容平臺服務(wù)向視頻特效方向延伸,為廣大開發(fā)者/設(shè)計師提供低門檻的 AR 特效內(nèi)容制作工具,擴(kuò)大 AR 內(nèi)容規(guī)模和開發(fā)效率;平臺提供內(nèi)容的管理與存儲服務(wù),開發(fā)者也可以通過平臺將自己的作品上傳至全民小視頻等接入百度 AR 能力的應(yīng)用,形成從內(nèi)容生產(chǎn)、管理到分發(fā)的一站式解決方案,打造 AR 娛樂互動領(lǐng)域的開放閉環(huán)。
02. 智能營銷解決方案
在智能營銷領(lǐng)域,百度將 AR 的趣味性與交互性融入虛實結(jié)合的全新場景,定義創(chuàng)意表達(dá)的不同形態(tài),更多元化地向用戶傳遞品牌價值,提升營銷轉(zhuǎn)化率。
百度 AR 擁有專業(yè)的內(nèi)容生產(chǎn)團(tuán)隊和高效的內(nèi)容制作體系,提供 AR 內(nèi)容的個性化定制和一站式模板服務(wù),幫助開發(fā)者實現(xiàn)創(chuàng)意內(nèi)容的快速 AR 化。此外,百度還擁有高效的分發(fā)優(yōu)勢,線上依托生態(tài)億級分發(fā)矩陣和大數(shù)據(jù)資源,精準(zhǔn)觸達(dá)目標(biāo)人群;線下通過 AR “掃一掃”入口延伸至線上場景,形成打通的營銷閉環(huán)。
03. 智能設(shè)備解決方案
2018年,百度將肢體互動能力與智能大屏結(jié)合, AR 打太極項目落地全球首個 AI 公園-海淀公園,獨特的健身互動方式受到了大家的廣泛關(guān)注,天津南翠屏公園、福州飛鳳山公園等先后引入,每天都有絡(luò)繹不絕的游客前來體驗。
通過將人機(jī)交互,智能感知和跟蹤等領(lǐng)先技術(shù)能力及視覺定位與增強(qiáng)服務(wù)( VPAS ),與智能大屏、 AR 眼鏡、 PAD 等更多智能設(shè)備結(jié)合,AR 技術(shù)將突破手機(jī)的約束為人們帶來解放雙手的 AR 交互新體驗,在公園、景區(qū)、商圈、店鋪等挖掘豐富的使用場景。
04. 景區(qū)行業(yè)解決方案
基于端云一體化的視覺定位與增強(qiáng)服務(wù)( VPAS ),融合百度地圖場景化能力,百度 DuMix AR 為景區(qū)打造了覆蓋行前、行中、行后的全流程交互解決方案。用戶可以通過線上 AR 導(dǎo)覽進(jìn)行實景體驗,依托 VPAS 探索景區(qū)知名地標(biāo)并將關(guān)聯(lián)信息在現(xiàn)實空間疊加呈現(xiàn),豐富的人機(jī)交互能力為線下提供了多樣化的娛樂互動形式,而通過設(shè)備攝像頭采集分析呈現(xiàn)的用戶畫像,將為景區(qū)管理和優(yōu)化提供可靠依據(jù)。
05. 教育行業(yè)解決方案
百度 DuMix AR 以領(lǐng)先 AR 技術(shù)為圖書/出版物進(jìn)行數(shù)字化改造,將 AR 內(nèi)容應(yīng)用于豐富的教學(xué)場景。面向教育行業(yè)開發(fā)者和從業(yè)者,提供從 SDK 接入到內(nèi)容生產(chǎn)制作全流程的平臺級解決方案,針對不同年齡段定制化 AR 內(nèi)容,推動教育領(lǐng)域應(yīng)用的快速規(guī)模化落地。
人才培養(yǎng)方面,百度 DuMix AR 平臺與高校和教育培訓(xùn)機(jī)構(gòu)共同編撰專業(yè) AR 教育課程,并攜手百度云智學(xué)院推出 AR 技術(shù)認(rèn)證資質(zhì)體系,強(qiáng)化國內(nèi) AR 領(lǐng)域人才隊伍建設(shè)。百度擁有豐富的生態(tài)產(chǎn)品矩陣與線上教育平臺,百度 DuMix AR 將聯(lián)動國內(nèi)優(yōu)質(zhì)教育出版資源,攜手專業(yè)教育垂類合作伙伴,建立更完善的 AR 教育生態(tài)。
06. 汽車行業(yè)解決方案
百度將 AR 技術(shù)應(yīng)用于汽車行業(yè),可廣泛用于線上 AR 展示、產(chǎn)品說明及工業(yè)維修等各類產(chǎn)業(yè)相關(guān)場景,助力汽車產(chǎn)業(yè)上下游企業(yè)實現(xiàn)智能化轉(zhuǎn)型。同時,百度 DuMix AR 還將針對不同需求端場景,定制化提供從 SDK 到分發(fā)的整套嵌入式應(yīng)用方案。
以上六大解決方案涵蓋了當(dāng)前 AR 技術(shù)應(yīng)用的核心場景和領(lǐng)域。本次大會的 DuMix AR 解決方案應(yīng)用與實戰(zhàn)公開課,百度 AR 資深研發(fā)工程師、百度 AI 交互設(shè)計院資深用戶研究工程師及百度 AR 生態(tài)合作伙伴,為開發(fā)者解讀兩大交互系統(tǒng)背后的核心算法與技術(shù),比較分享 AR 內(nèi)容制作的交互設(shè)計邏輯。
百度 AR 始終以開放心態(tài)將全棧 AR 核心技術(shù)、平臺產(chǎn)品與開發(fā)者共享,探索共建更多行業(yè)解決方案。依托視覺技術(shù)優(yōu)勢所構(gòu)建的虛實場景融合的基礎(chǔ)設(shè)施,不斷彌合虛擬世界與物理世界的間隙,攜 AR 能力擁抱 5G 時代與產(chǎn)業(yè)智能化時代的來臨。
-
Ar
+關(guān)注
關(guān)注
24文章
5107瀏覽量
169937 -
百度
+關(guān)注
關(guān)注
9文章
2277瀏覽量
90637
原文標(biāo)題:Baidu Create 2019丨百度技術(shù)開放平臺 DuMix AR 全面升級
文章出處:【微信號:dspadvert,微信公眾號:TODE營銷】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
評論