中國電信具有深度海量的粘性用戶,IPTV機(jī)頂盒已經(jīng)是現(xiàn)成的終端資源,對于用戶而言,IPTV機(jī)頂盒不僅需要能與電視連接,同時(shí),也可以更多樣化的與VR頭顯對接,用戶不需要做過多的投入,即可以得到VR的體驗(yàn),IPTV無疑是一個(gè)優(yōu)質(zhì)的合作伙伴。從帶寬上來說,隨著寬帶中國戰(zhàn)略的進(jìn)一步落地,光纖入戶的帶寬進(jìn)一步提升,帶寬已經(jīng)讓用戶冗余,即便4K VBR平均碼率能夠達(dá)到15Mbps,但依然遠(yuǎn)遠(yuǎn)不能夠達(dá)到目前百兆入戶的上限,有一種業(yè)務(wù)需要對帶寬帶來挑戰(zhàn),需要突破百兆,能夠推動(dòng)流量業(yè)務(wù)的進(jìn)一步加深。于是,VR賦能IPTV,IPTV普及VR就成為一種可能。
VR巨幕影院將成為IPTV VR的切入點(diǎn),借助IPTV和機(jī)頂盒和寬視場高分辨率的HMD,可以渲染出IMAX巨幕影院的視聽體驗(yàn)效果,用戶在家即可不受檔期影響,享受媲美親臨影院的體驗(yàn)。
以VR全景視頻作為IPTV VR的創(chuàng)新點(diǎn),在觀看全景視頻時(shí),用戶可以通過轉(zhuǎn)動(dòng)頭部觀看360度視角范圍內(nèi)的不同內(nèi)容,獲得全方位沉浸式的體驗(yàn)。通過VR全景直播,播出重大新聞事件、體育賽事、演唱會(huì)和發(fā)布會(huì)等大型賽事活動(dòng),結(jié)合VR全景直播實(shí)現(xiàn)可感知事件現(xiàn)場。
同時(shí),VR社交將開啟社交網(wǎng)絡(luò)2.0時(shí)代,讓相隔千里的朋友,如同在場,并用無窮創(chuàng)造力變換相聚的地點(diǎn)。VR游戲,虛擬現(xiàn)實(shí)與視頻游戲的結(jié)合,為用戶帶來更為真實(shí)而強(qiáng)烈的感官刺激,游戲有望成為最先發(fā)展起來的VR大眾市場。
制定機(jī)頂盒VR芯片,獲取影院級體驗(yàn):
IPTV的VR如果要解決,就需要解決帶寬、解碼、渲染的痛點(diǎn),于是IPTV采用了全景魔方的解決方案,通過2K的全景底圖+8K局部解碼(分成小塊)的方式,讓整個(gè)VR視頻能夠傳得動(dòng),解得動(dòng)。同時(shí),為了最小化GPU計(jì)算和內(nèi)存帶寬的需求,讓200塊的機(jī)頂盒GPU能夠拖得動(dòng)整個(gè)VR解碼渲染的需求,進(jìn)一步解決nVIDIA卡的成本問題,通過現(xiàn)有的硬解芯片解決這一問題,建設(shè)了基于專用電路的解碼、渲染以及顯示,能夠把VR的體驗(yàn)通過IPTV機(jī)頂盒低成本實(shí)現(xiàn)。
那么VR巨幕影院和VR全景視頻業(yè)務(wù)是否能夠?qū)崿F(xiàn)?其中也遭遇了一部分的痛點(diǎn),例如,沒有FOV大于120度的頭顯,單眼2K分辨率指標(biāo)必須到2018年才能面市。芯片目前全4K芯片智能支撐到2.5K頭顯輸出,內(nèi)容在8K VR直播尚存技術(shù)難點(diǎn),8K VR離線成本高。
于是中國電信上海研究院從機(jī)頂盒芯片到網(wǎng)絡(luò)到平臺(tái)到最終效果,提出了整體解決方案,VR巨幕影院的解決方案主要是以下:在機(jī)頂盒芯片上,制定了機(jī)頂盒VR芯片巨幕影院視頻處理能力要求,制定機(jī)頂盒VR外接頭顯設(shè)備的接口與協(xié)議,HMD成為體驗(yàn)的核心,發(fā)布支持頭顯設(shè)備的白名單,在網(wǎng)絡(luò)側(cè),用現(xiàn)有支持4K/全4K能力的網(wǎng)絡(luò)能力,通過現(xiàn)有的IPTV平臺(tái)、內(nèi)容以及CDN系統(tǒng),目標(biāo)將支持HMD顯示獲取影院級的體驗(yàn)。
VR全景視頻:制定機(jī)頂盒VR芯片高分辨率全景視頻處理能力要求,推動(dòng)6家主流機(jī)頂盒芯片廠家實(shí)現(xiàn)VR巨幕影院和高分辨率VR全景視頻功能。8K VR視頻在電視端和HMD端實(shí)現(xiàn)輸出顯示。在網(wǎng)絡(luò)上全傳的模式碼率需求可以達(dá)到80M-160Mbps,超越百兆寬帶的介入能力,部分傳的模式可以實(shí)現(xiàn)帶寬和時(shí)延的折中。通過現(xiàn)有的IPTV平臺(tái)以及CDN系統(tǒng),新增全國視頻預(yù)處理平臺(tái),支持4K、8K、12K全景視頻內(nèi)容。目標(biāo)是實(shí)現(xiàn)8K高分辨率全景視頻點(diǎn)播、直播,獲取沉浸式的親身體驗(yàn)和現(xiàn)實(shí)生活。
羅傳飛博士同時(shí)提了對未來的要求與展望,首先是頭顯,VR近眼顯示體驗(yàn)突破是產(chǎn)業(yè)成功的基礎(chǔ),現(xiàn)階段基于光學(xué)和屏幕顯示的HMD體驗(yàn)的提升決定了VR產(chǎn)業(yè)成功的基礎(chǔ),F(xiàn)OV大小影響到巨幕的體驗(yàn),通過望遠(yuǎn)鏡看世界。其中頭顯所需要決定的核心指標(biāo):FOV 120+,Res 2K/eye,MTF 20ms,Refresh 75Hz以及價(jià)格。
其次是芯片VR處理能力的提升,需要產(chǎn)業(yè)鏈更多的魄力。體驗(yàn)良好的HMD需要性價(jià)比更高的主機(jī),芯片需要針對VR處理能力進(jìn)行提升,在VR工作上,傳統(tǒng)機(jī)頂盒芯片廠商動(dòng)力、儲(chǔ)備依然不足,核心要求,是專用電路DPU、4K/8K Frame Buffer、GPU能力提升并且定位跟蹤。
VR的發(fā)展首要滿足沉浸體驗(yàn)的要求,預(yù)計(jì)對網(wǎng)絡(luò)帶寬的需求達(dá)到100—500Mbps,VR發(fā)展在沉浸體驗(yàn)達(dá)到一定程度時(shí)必然會(huì)對交互體驗(yàn)提出更高的要求,預(yù)計(jì)對網(wǎng)絡(luò)時(shí)延的需求達(dá)到10ms-15ms。同時(shí)對沉浸體驗(yàn)向交互式體驗(yàn)以及融合體驗(yàn)提出了技術(shù)演進(jìn)路線圖。