2018年VR視頻技術打造視覺盛宴助力互娛產業體驗升級.pdf

1、VR視頻技術打造視覺盛宴，助力互娛產業體驗升級視頻專場-傳統企業云端多媒體智能化轉型之路VR技術背景與優酷VRVR視頻技術阿里云VR視頻解決方案VR技術背景與優酷VRVR產業現狀WHY VR？Why NOT VR?360全景視頻模式，單目裸眼沉浸式VR模式，雙目模式WHY NOT VR？VR游游戲戲是是這這樣樣：暈暈操操作作難難畫畫面面差差VR視視頻頻問問題題更更大大VR視頻天然地體驗不佳對對頭頭顯顯而而言言，屏屏幕幕太太近近了了：柵柵格格效效應應，透透鏡鏡畸畸變變對對雙雙目目而而言言，顯顯示示面面積積太太小小了了：有有效效像像素素不不夠夠多多，模模糊糊小小FOV：管管中中窺窺豹豹典典型型設設

2、備備FOV：HTV Vive 110 Oculus Rift 110 Sony PS VR 110三三星星GearVR 96暴暴風風魔魔盒盒4 96 Pico VR 96人人眼眼220而且對帶寬還有浪費分分辨辨率率壓壓縮縮前前（理理論論值值）H.264H.264編編碼碼后后H.265H.265編編碼碼后后2K(2560 x1440)3Gbps6Mbps20Mbps3Mbps10Mbps4K(3840 x2160)6Gbps12Mbps40Mbps6Mbps20Mbps8K(7680 x4320)24Gbps48Mbps160Mbps12Mbps80MbpsVR視視頻頻還還只只挖挖其其中中小小小

3、小一一塊塊來來顯顯示示：2K視視頻頻傳傳過過來來，當當480p看看。同時滿足帶寬與質量的解決方式帶寬有浪費換不浪費帶寬的新方法新方法帶來新問題解決新問題O K了顯示面積占視頻源面積比例太小增大顯示面積占比轉換視角時有模糊的過程縮短模糊時間、提高切換流暢性O K了優酷VR演進5月9月6月201620162016首次發布天貓魔盒支持V R優酷V R直播12月201710月4K、全景聲2017提案被采納為國家標準20182月阿里云V R服務12月8K典型內容覆蓋阿里巴巴年會 大場館全方位5機位直播 圖文包裝系統，做2D直播的加法鄒市明拳擊賽 首場杜比全景聲體驗 源端推流優化，同等上行帶寬畫質提升杭州

4、云棲蝦米音樂節 累計觀看量超30萬人 3天連續室外直播，高穩定保障VR視頻技術從投影到切流從3維到2維：投影對稱投影25%12.5%12.5%12.5%6.25%6.25%25%25%25%12.5%12.5%12.5%12.5%12.5%12.5%12.5%12.5%12.5%12.5%75%比比如如Cube map對稱投影如何省帶寬？優優化化投投影影模模型型：依依內內容容類類型型的的中中部部/四四周周面面積積占占比比調調整整縮縮小小傳傳輸輸面面積積：360到到180，投投影影面面優優化化，削削天天削削地地編編解解碼碼：H.265，動動態態量量化化，非非關關鍵鍵區區域域降降清清晰晰度度基基于

5、于Tile的的流流切切換換基于Tile的帶寬優化BASE LAYEREQUI FRAMETILE LAYERTILE LAYER基于Tile的流切換原理觀看范圍觀看范圍不不同同的的方方向向用用不不同同tile平平均均50%左左右右碼碼率率節節省省解解碼碼器器、播播放放器器需需定定制制轉轉方方向向會會模模糊糊一一下下+基礎層，2Mbps增強層，10Mbps非對稱投影：FacebookFront(High Quality)Back(Low Quality)10%22.5%10%2.5%2.5%2.5%2.5%Facebook的的金金字字塔塔方方案案非對稱投影：阿里阿阿里里的的改改進進四四棱棱錐錐方

6、方案案（for AVS VR&IEEE 1857.9）不不同同方方向向用用不不同同流流 70%+碼碼率率節節省省支支持持通通用用解解碼碼器器轉轉方方向向會會模模糊糊一一下下改進四棱錐的各方向視頻流EQUI FRAMEFRONTBACKLEFTRIGHT非對稱投影的流切換GOP1GOP2GOP3GOP2GOP3GOP1視角 1視角 2視角切換問題1：它慢GOP1GOP2GOP3GOP2GOP3GOP1視角 1視角 2視角切換開始下載模糊時長GOP1GOP2GOP3GOP2GOP3GOP1視角 1視角 2視角切換開始下載模糊時長GOP1GOP2GOP3GOP2GOP3GOP1視角 1視角 2視角切

7、換開始下載模糊時長視角 2短G O P問題2：它卡GOP1GOP2GOP3GOP2GOP3GOP1視角 1視角 2預測視角切換開始下載模糊時長視角 2短G O P開始轉頭確認視角切換GOP1GOP2GOP3GOP2GOP3GOP1視角 1視角 2開始下載提前下載時間視角 2短G O P預測視角切換開始轉頭確認視角切換問題3：它糊視視頻頻源源直直接接拉拉伸伸+渲渲染染超超分分辨辨率率+渲渲染染端到端VR直播鏈路現場實時多維度的圖像處理增強能力：包含銳化、降噪、HDR等畫質增強技術全面支持傳統2D直播信號、圖片、三維模型嵌入VR視頻，做VR體驗的加法支持端到端全景聲解決方案，通過360度音頻體驗進

8、一步加強沉浸感采集端多機位圖像增強3D 圖文包裝全景聲多臺攝像機的實時畫面采集系統，完美支持現場導播和多機位切換VR圖文包裝最高支持8K VR片源直播，將原始8K片源實時映射到多路4K的視角信號進行編碼結合標準的非對稱映射編碼技術，最高可節省70%以上碼率，3M碼率可看高清4K一鍵創建直播場次，基于OSS可靠存儲的有序VR內容管理，快速的直播轉點播能力云端異構計算8K 直播3Mbps 高清4K直播/點播管理基于異構計算的映射編碼系統，支持一路進多路出的高并發映射編碼結合非對稱映射編碼技術，根據用戶視角進行多方向動態流瞬切，比秒級切換更快支持2D/3D、180/360度VR格式，豐富的映射模型終

9、端渲染支持支持基于手機姿態和手勢的視角控制，可手勢縮放視角客戶端全終端覆蓋動態流瞬切技術豐富的VR格式交互操作便捷全面覆蓋Android、IOS平臺，針對主流VR頭顯適配優化，H5播放支持提升結果：指標對稱投影模型非對稱投影模型H.265優化的H.265O K了20M bps4K H.264優質V R內容源約540p20M bps6M bps4M bps約720p960p960p3M bps960p帶寬可看分辨率百百兆兆光光纖纖入入戶戶20M你你就就給給看看這這個個？好好像像能能看看了了家家里里得得有有個個好好網網差差不不多多1080p了了普普通通人人家家都都能能看看提升結果：主觀阿里云VR視

10、頻解決方案https:/ 1極致體驗快速部署領先技術VR國標提案采納|多模型場景適配|動態切流|3Mbps4K專業/消費級設備一鍵直播|全終端SDK集成適配|3億次驗證2 23 3180/360|2D/3D|4K/8K|H.264/H.265 全面保障全球CDN節點|可視化監控|運營/存儲安全|防盜鏈/加密4 4Live直播逼逼近近、逼逼真真 演唱會/生日會/LiveHouse 全景聲多多機機位位 圖文包裝外景直播熱熱烈烈刺刺激激的的現現場場氛氛圍圍體體育育賽賽事事/新新聞聞現現場場 3D直播 圖文包裝秀場直播給給主主播播全全新新的的表表現現能能力力現現在在VR最最火火的的內內容容是是快快速速接接入入沉沉浸浸式式互互動動游戲直播先先拍拍后后播播，精精心心制制作作更更像像自自己己玩玩輕輕松松接接入入高高質質內內容容視頻專場-傳統企業云端多媒體智能化轉型之路