電子發燒友網報道(文/周凱揚)作為蘋果的下一個殺手級產品,Vision Pro 可謂承載了不少人的期待,AR/VR 設備廠商也都嚴陣以待,隨時準備好跟進蘋果帶來的下一輪應用爆點。然而在這款產品 2024 年正式發布前,蘋果已經在其軟硬件基礎上進行了部署,尤其是編碼格式和錄制設備上。
空間視頻需要怎樣的編碼
由于無線AR與 VR 設備在傳輸速度上的天然劣勢,尤其是在網絡流式傳輸時,如果沒有高效的編碼格式,就很難真正實現空間視頻的網絡傳播。更何況如今哪怕是社交網絡上的視頻,如今也在追求更高效的編碼,比如 H265、AV1 等等,從而節省存儲空間。
而Apple Vision Pro 所用到的空間視頻編碼,正是 MV-HEVC(Mutiview HEVC多視角 HEVC)。之所以選擇這一編碼,與蘋果的 Apple Silicon 芯片設計有關。Apple Silicon本身支持蘋果推出的 Prores 編解碼,但即便是最小的Prores 422 Proxy 格式,也會占用不少的空間,遠不如 H265/HEVC這么高效。
但與此同時,Apple Silicon也支持 H265/HEVC 編碼,而 MV-HEVC 恰好就是 HEVC 的一個擴展,在第二版 HEVC 規范推出時被囊括在內,所以Apple Silicon也是原生支持的。即便顯示設備并不支持解碼或播放MV-HEVC內容,而僅支持標準的 HEVC時,也可以正常播放 2D內容,比如左眼或右眼的 2D 平面視頻。
錄制設備的要求
Vision Pro 的另一大硬件基礎,或者說是硬件門檻,就是錄制設備了。在蘋果更新了 iOS 17.2版本后,最新的 iPhone 15 Pro 系列機型終于支持了空間視頻的錄制,不過,為了保證空間視頻的最佳錄制效果,蘋果還是提出了幾點要求,首先就是要保持橫屏狀態下的穩定和水平,其次主體要離相機 0.9米到 2.4 米左右,最后是使用均勻明亮的照明。
這三大要求其實很好理解,空間視頻由于沉浸感更強,所以哪怕是一點小的抖動都會造成觀看不適,且視場角的偏移也更為明顯,所以必須保證穩定和水平。其次,為了給到足夠的深度信息塑造空間感,主體最好和鏡頭保持一定的距離。最后是均勻的照明,由于 iPhone 15 Pro 系列同時用到了主攝和超廣角進行空間視頻的錄制,所以錄制范圍會較大,如果場景亮度分布不均的話,很容易出現視頻拼接后亮度不均勻的局面。
不過值得注意的是,即便是最新的iPhone機型,也僅僅支持1080p/30fps 的錄制,且一分鐘空間視頻的大小約為 130MB。可以看出蘋果并不打算 iPhone 錄制的空間視頻作為高端制作的選擇,而是作為隨拍隨手分享的一種格式。
畢竟當下AR/VR 視頻的高端制作還是依靠雙目/多目攝像機,或者常規攝像機配合雙目鏡頭來實現高分辨率視頻的錄制。
寫在最后
雖然發布在即,但蘋果在Vision Pro 未來的應用以及生態開發還是相當低調,公開活動僅僅是定期聚集開發者交流開發與制作經驗。但依照過去蘋果發布新產品線的思路來看,其軟件硬件生態都是緊隨其后的,而這次 Vision Pro 應該也不例外。
-
蘋果
+關注
關注
61文章
24459瀏覽量
199541
發布評論請先 登錄
相關推薦
評論