在沉浸視頻邁向消費化的進程中,高效編碼技術成為關鍵底座。MV-HEVC 作為多視角視頻壓縮標準,正是支撐 Apple 沉浸視頻體驗的核心技術之一。本篇聚焦其技術背景與應用起點,揭示 MV-HEVC 如何為 8K 3D 視頻的輕量傳輸與沉浸敘事提供可能。
Apple Vision Pro 的推出標志著 Apple 正在打造前所未有的沉浸視頻體驗。所謂 Apple 沉浸視頻(Apple Immersive Video),是一種令人驚嘆的敘事形式,借助 8K 分辨率的3D視頻(180°視域)與空間音頻結合,實現讓觀眾仿佛置身場景中心的效果[1]。用戶佩戴 Vision Pro 頭顯,可以在 Apple TV 等應用中觀看這類180°全景的8K 3D影片,配合頭部追蹤和空間音頻技術,獲得身臨其境的沉浸感。在這種場景下,畫面會隨用戶轉頭而變化,聲音也會根據觀眾視角實時調整,營造出“人在片中”的真實感受。
圖1 觀看 Apple 沉浸視頻
Apple 沉浸視頻內容涵蓋紀錄片、演唱會、體育等多個類型,目標是通過逼真的3D畫面和音效將觀眾“傳送”到故事現場,革命性地提升視覺敘事的沉浸深度 。值得一提的是,Apple 還引入了**空間視頻(Spatial Video)**功能,允許用戶使用 iPhone 15 Pro 等設備錄制3D影片以供回看。這類空間視頻通常是傳統矩形視窗內的3D內容,偏重于個人記錄,而沉浸視頻則指代可包圍觀眾視野的 VR180 全景3D影片[2]。無論是用戶自拍的空間視頻,還是 Apple 提供的沉浸視頻,底層編碼格式都是 MVHEVC 多視角視頻編碼。MVHEVC 的引入對于在高分辨率3D視頻中保持優秀畫質和可用帶寬至關重要,它是支撐 Apple 沉浸視頻體驗的核心技術之一。因此,深入了解 MV-HEVC 技術,有助于更好理解 Apple 沉浸視頻在編碼質量與沉浸體驗上的優勢。
來源: 中移科協