2018年1月30日，IPTV VR技術產(chǎn)業(yè)論壇在中國電信上海研究院4樓報告廳正式召開，作為整個VR行業(yè)的推動者，通信運營商無疑有著管道、終端、用戶等多方面的優(yōu)質資源，4K乃至8K VR如何借助運營商之手順利進入到千家萬戶，實現(xiàn)產(chǎn)業(yè)的快速崛起，觀察運營商的動態(tài)無疑有著深遠的意義。本文為眾視媒體DVBCN記者現(xiàn)場整理報道。
圖為ARM區(qū)域市場經(jīng)理王田
在會議上，ARM區(qū)域市場經(jīng)理王田在現(xiàn)場以“從芯架構，虛擬世界”為題發(fā)表演講，從一個芯片及IP Core的角度出發(fā)，談及ARM如何支撐VR成為現(xiàn)實。
從未來XR產(chǎn)業(yè)的發(fā)展來看，基于4K乃至8K的多屏編解碼能力將成為未來的重點，隨著VR直播及8K VR的進一步推進，1Gbps以上的碼率也將成為未來關注的重點，同時為滿足用戶在XR體驗時的交互行為，Machine Learning也成為未來必須要解決的重心之一。
王田經(jīng)理表示，從GPU這塊，ARM引領VR的體驗，未來的視頻一定是基于HDR而不是SDR的內(nèi)容，Mali將通過其HDR10的運算能力，幫助視頻更好地實現(xiàn)HDR色域及幀率上的優(yōu)化。Mali能夠通過DDK拓展，降低延遲，解決帶寬延遲的問題，通過AFBC降低更高分辨率所需要的系統(tǒng)帶寬。芯片和OEM廠商共同合作，在高端設備上，提供高端體驗，Mali的GPU通過軟件的方式降低延遲，提供支持無損壓縮的模式，加深抗鋸齒能力，頭顯設備對于顆粒感的敏感度，如果存在鋸齒狀的內(nèi)容，由于360度全景近眼，整個視頻的鋸齒就會被放大，影響到體驗。
同時，提供多路視頻的解碼與緩沖能力，提供Foveated Rendering的能力，將中央的圖像進行深度4K乃至8K的解碼，同時在底層提供一個低分辨率的圖層，降低芯片解碼的要求。
由于頭顯設備需要感應人的轉動方向，通過視角去捕捉，減少芯片處理的能力，通過ARM大小核能力，通過解碼與編碼的引擎，需要用專業(yè)的解碼能力，GPU將圖像分成左右兩個Buffer，到屏幕顯示，通過單眼2K的頭顯，用戶能夠獲得75幀的視頻，獲得優(yōu)質的體驗。
其他例如人工智能的技術，一些新的應用，上面賦有很多新的應用，交互，例如人臉識別、手勢識別等，可以跑在ARM Mali的GPU上，也可以跑在其他專用的能力上，除了VR的體驗以外，如何保障用戶更優(yōu)質的體驗也是考慮的方向。
ARM不管是GPU（4K 60幀以上的渲染和加速），現(xiàn)有的Display能夠提供VR的加速，系統(tǒng)級解決端到端的延遲，達到10ms左右。ARM的整合解決方案能夠為IPTV的VR用戶提供最優(yōu)質的體驗，在GPU上，實現(xiàn)4K單線程緩沖，達到60fps的4K。另一線程實現(xiàn)Timewarp，鏡頭校訂以及VR架構，未來將進一步實現(xiàn)8K 60幀的畫面。在VPU上支持120幀4K10比特視頻解碼，DPU支持4K 75~90幀顯示輸出（單眼2K），部分處理和運算可以在DPU側實現(xiàn)，未來全面提升120幀8K視頻的體驗。整個過程按照端到端低于10ms的延遲進行設計，最大限度必須低于20ms。
微信掃一掃
