ARM王田：芯片架構(gòu)助力IPTV VR端到端傳輸
圖為ARM區(qū)域市場(chǎng)經(jīng)理王田
在會(huì)議上，ARM區(qū)域市場(chǎng)經(jīng)理王田在現(xiàn)場(chǎng)以“從芯架構(gòu)，虛擬世界”為題發(fā)表演講，從一個(gè)芯片及IP Core的角度出發(fā)，談及ARM如何支撐VR成為現(xiàn)實(shí)。
從未來(lái)XR產(chǎn)業(yè)的發(fā)展來(lái)看，基于4K乃至8K的多屏編解碼能力將成為未來(lái)的重點(diǎn)，隨著VR直播及8K VR的進(jìn)一步推進(jìn)，1Gbps以上的碼率也將成為未來(lái)關(guān)注的重點(diǎn)，同時(shí)為滿足用戶在XR體驗(yàn)時(shí)的交互行為，Machine Learning也成為未來(lái)必須要解決的重心之一。
王田經(jīng)理表示，從GPU這塊，ARM引領(lǐng)VR的體驗(yàn)，未來(lái)的視頻一定是基于HDR而不是SDR的內(nèi)容，Mali將通過(guò)其HDR10的運(yùn)算能力，幫助視頻更好地實(shí)現(xiàn)HDR色域及幀率上的優(yōu)化。Mali能夠通過(guò)DDK拓展，降低延遲，解決帶寬延遲的問(wèn)題，通過(guò)AFBC降低更高分辨率所需要的系統(tǒng)帶寬。芯片和OEM廠商共同合作，在高端設(shè)備上，提供高端體驗(yàn)，Mali的GPU通過(guò)軟件的方式降低延遲，提供支持無(wú)損壓縮的模式，加深抗鋸齒能力，頭顯設(shè)備對(duì)于顆粒感的敏感度，如果存在鋸齒狀的內(nèi)容，由于360度全景近眼，整個(gè)視頻的鋸齒就會(huì)被放大，影響到體驗(yàn)。
同時(shí)，提供多路視頻的解碼與緩沖能力，提供Foveated Rendering的能力，將中央的圖像進(jìn)行深度4K乃至8K的解碼，同時(shí)在底層提供一個(gè)低分辨率的圖層，降低芯片解碼的要求。
由于頭顯設(shè)備需要感應(yīng)人的轉(zhuǎn)動(dòng)方向，通過(guò)視角去捕捉，減少芯片處理的能力，通過(guò)ARM大小核能力，通過(guò)解碼與編碼的引擎，需要用專業(yè)的解碼能力，GPU將圖像分成左右兩個(gè)Buffer，到屏幕顯示，通過(guò)單眼2K的頭顯，用戶能夠獲得75幀的視頻，獲得優(yōu)質(zhì)的體驗(yàn)。
其他例如人工智能的技術(shù)，一些新的應(yīng)用，上面賦有很多新的應(yīng)用，交互，例如人臉識(shí)別、手勢(shì)識(shí)別等，可以跑在ARM Mali的GPU上，也可以跑在其他專用的能力上，除了VR的體驗(yàn)以外，如何保障用戶更優(yōu)質(zhì)的體驗(yàn)也是考慮的方向。
ARM不管是GPU（4K 60幀以上的渲染和加速），現(xiàn)有的Display能夠提供VR的加速，系統(tǒng)級(jí)解決端到端的延遲，達(dá)到10ms左右。ARM的整合解決方案能夠?yàn)镮PTV的VR用戶提供最優(yōu)質(zhì)的體驗(yàn)，在GPU上，實(shí)現(xiàn)4K單線程緩沖，達(dá)到60fps的4K。另一線程實(shí)現(xiàn)Timewarp，鏡頭校訂以及VR架構(gòu)，未來(lái)將進(jìn)一步實(shí)現(xiàn)8K 60幀的畫(huà)面。在VPU上支持120幀4K10比特視頻解碼，DPU支持4K 75~90幀顯示輸出（單眼2K），部分處理和運(yùn)算可以在DPU側(cè)實(shí)現(xiàn)，未來(lái)全面提升120幀8K視頻的體驗(yàn)。整個(gè)過(guò)程按照端到端低于10ms的延遲進(jìn)行設(shè)計(jì)，最大限度必須低于20ms。
相關(guān)推薦
中國(guó)電信韋樂(lè)平：IPTV的發(fā)展與挑戰(zhàn)發(fā)展IPTV意義深遠(yuǎn)IPTV是一種利用寬帶網(wǎng)絡(luò)，以家用電視機(jī)或PC作為主要終端，集互聯(lián)網(wǎng)、多媒體、通信等多種技術(shù)于一體，向家庭用戶提供包括數(shù)字電視在內(nèi)的多種交互式服務(wù)的技術(shù)。IPTV利用機(jī)頂盒+電視機(jī)完成接收視頻點(diǎn)播節(jié)目、視頻廣播及網(wǎng)上沖浪等功能。它采用高效的視頻壓縮技術(shù)，使視頻流傳輸帶寬在800kbit/s時(shí)可以達(dá)到接近DVD的收視效果(通常DVD的視頻流傳輸帶寬需要3Mbit/s)，對(duì)今后開(kāi)展視頻類業(yè)務(wù)如互聯(lián)網(wǎng)上視頻直播、遠(yuǎn)距離視頻點(diǎn)播、節(jié)目源制作等來(lái)講，有很強(qiáng)的優(yōu)勢(shì)，是一個(gè)全新的技術(shù)概念。在網(wǎng)絡(luò)意義上，IPTV提供了一個(gè)信息共享的平臺(tái)，實(shí)現(xiàn)媒體提供者和媒體消費(fèi)者之間的互動(dòng)。它最大的優(yōu)勢(shì)就
IPTV在世界范圍內(nèi)的發(fā)展形勢(shì)越來(lái)越喜人，國(guó)外許多運(yùn)營(yíng)商紛紛加大對(duì)IPTV的投資力度，為用戶提供更多更好的信息服務(wù)。自1999年英國(guó)VideoNetworks公司推出IPTV業(yè)務(wù)以來(lái)，國(guó)外的許多電信運(yùn)營(yíng)商相繼進(jìn)入了IPTV市場(chǎng)。到2003年上半年，全球已有30多家電信運(yùn)營(yíng)商推出了IPTV業(yè)務(wù)。在隨后的一年多的時(shí)間里，各個(gè)地區(qū)的主要電信運(yùn)營(yíng)商開(kāi)始加速部署IPTV業(yè)務(wù)。2004年以前，多數(shù)運(yùn)營(yíng)商還在進(jìn)行IPTV的試驗(yàn)，預(yù)計(jì)今年，IPTV將從試驗(yàn)階段進(jìn)入商用。目前，部署IPTV業(yè)務(wù)的運(yùn)營(yíng)商集中在歐美地區(qū)和亞太部分國(guó)家和地區(qū)。電信運(yùn)營(yíng)商通常采用高速DSL或FTTP技術(shù)，為用戶提供IPTV業(yè)務(wù)。到200
最近，上海貝爾阿爾卡特與四川長(zhǎng)虹在成都宣布簽訂旨在信息家電領(lǐng)域展開(kāi)深層次大規(guī)模戰(zhàn)略合作協(xié)議。根據(jù)協(xié)議，上海貝爾阿爾卡特將與四川長(zhǎng)虹成立聯(lián)合工作組，近期工作重心將是聯(lián)合開(kāi)發(fā)為電信服務(wù)供應(yīng)商度身定制的機(jī)頂盒，用來(lái)提供高質(zhì)量的IPTV服務(wù)，同時(shí)還將在機(jī)頂盒標(biāo)準(zhǔn)化方面展開(kāi)合作。長(zhǎng)虹人士向《南方日?qǐng)?bào)》記者透露，此項(xiàng)合作是長(zhǎng)虹近來(lái)加速?gòu)膫鹘y(tǒng)家電向信息為首的3C產(chǎn)業(yè)供應(yīng)商轉(zhuǎn)型的重要組成部分。據(jù)悉，新帥趙勇上臺(tái)一年間，長(zhǎng)虹已經(jīng)初步構(gòu)架成功跨越廣電網(wǎng)、通信網(wǎng)及互聯(lián)網(wǎng)的3C產(chǎn)業(yè)體系，逐步發(fā)展成為中國(guó)領(lǐng)先的信息家電產(chǎn)品與服務(wù)綜合供應(yīng)商，而上海貝爾阿爾卡特也已經(jīng)成為中國(guó)電信領(lǐng)域領(lǐng)先的系統(tǒng)解決方案及服務(wù)提供商。業(yè)界普遍