BBC公測(cè)5G AR/VR云計(jì)算下 往返延遲超200ms

中國AR網(wǎng)
關(guān)鍵的技術(shù)要求是,智能手機(jī)的移動(dòng)和屏幕的視圖更新實(shí)現(xiàn)最低限度的延遲。對(duì)于巴斯羅馬浴場(chǎng)的歷史創(chuàng)建,布里斯托爾大學(xué)為BBC提供了60 GHz的5G網(wǎng)絡(luò),由布里斯托爾大學(xué)的物理服務(wù)器集群執(zhí)行VR圖形繪制,并通過LTE實(shí)現(xiàn)5G網(wǎng)絡(luò)和智能手機(jī)之間的最終對(duì)接。
  BC曾于2018年12月對(duì)智能旅游應(yīng)用展開了5G測(cè)試,而現(xiàn)在他們已經(jīng)完成了第二次公開測(cè)試,通過智能手機(jī)演示了低延遲高帶寬的視頻。
 
  第二次測(cè)試使用了與第一次相同的“時(shí)間窗”概念,亦即數(shù)字重建與現(xiàn)實(shí)世界中的相同位置對(duì)齊疊加,但BBC不是將預(yù)渲染的360度視頻流式傳輸至用戶的智能手機(jī),他們同時(shí)測(cè)試了“遠(yuǎn)程渲染”的VR版本:智能手機(jī)的物理位置發(fā)送到遠(yuǎn)程計(jì)算機(jī),后者相應(yīng)地繪制歷史場(chǎng)景的實(shí)時(shí)VR視圖,然后將其流式傳輸回智能手機(jī)。
 
 
 
  與預(yù)渲染的360度視頻相比,實(shí)時(shí)創(chuàng)建歷史視圖有幾個(gè)優(yōu)點(diǎn)。首先,360度視頻是根據(jù)單個(gè)物理位置繪制,所以用戶需要站在同一個(gè)位置,從而準(zhǔn)確地將歷史視圖與現(xiàn)實(shí)世界對(duì)齊,但VR版本可允許用戶完全自由移動(dòng)。其次,由于VR版本是實(shí)時(shí)繪制的,因此你可以像游戲一樣直接向其添加交互式或個(gè)性化元素。第三,用戶在VR版本中可以無損地“縮放”視點(diǎn),仔細(xì)查看場(chǎng)景中的細(xì)節(jié)。
 
  當(dāng)然,VR場(chǎng)景可以由智能手機(jī)直接繪制,但這存在多個(gè)缺點(diǎn)。例如,渲染質(zhì)量不及PC,需要安裝相當(dāng)臃腫的應(yīng)用程序,以及非常高的耗電量。
 
  關(guān)鍵的技術(shù)要求是,智能手機(jī)的移動(dòng)和屏幕的視圖更新實(shí)現(xiàn)最低限度的延遲。對(duì)于巴斯羅馬浴場(chǎng)的歷史創(chuàng)建,布里斯托爾大學(xué)為BBC提供了60 GHz的5G網(wǎng)絡(luò),由布里斯托爾大學(xué)的物理服務(wù)器集群執(zhí)行VR圖形繪制,并通過LTE實(shí)現(xiàn)5G網(wǎng)絡(luò)和智能手機(jī)之間的最終對(duì)接。
 
  布里斯托大學(xué)利用OpenStack配置了10臺(tái)虛擬圖形繪制PC,并對(duì)其進(jìn)行了優(yōu)化,以便其能夠快速訪問物理內(nèi)存和圖形硬件。每個(gè)虛擬機(jī)都安裝了BBC的圖形應(yīng)用程序和流媒體軟件。在測(cè)試期間,用戶的智能手機(jī)向布里斯托爾的服務(wù)器請(qǐng)求圖形繪制功能,然后分配相應(yīng)的IP端點(diǎn)以發(fā)送控制數(shù)據(jù)和接收繪制的視頻。
 
  利用谷歌的ARCore SDK,每個(gè)智能手機(jī)都可以在巴斯羅馬浴場(chǎng)中定位,然后將其位置,方向和其他控制數(shù)據(jù)作為原始UDP數(shù)據(jù)包發(fā)送至布里斯托大學(xué)的圖形繪制PC。然后將利用歷史3D模型,以及基于NVIDIA Capture SDK的服務(wù)器應(yīng)用程序,圖形繪制應(yīng)用程序可以從智能手機(jī)的角度繪制歷史場(chǎng)景,生成H264視頻,并利用SRT流媒體協(xié)議將其傳輸至智能手機(jī)。接下來,智能手機(jī)通過Android MediaCodec實(shí)例對(duì)視頻進(jìn)行解碼。這個(gè)過程的結(jié)果可以參見下面這個(gè)視頻。我們可以看到,當(dāng)用戶移動(dòng)智能手機(jī)視圖時(shí),大約15英里之外的圖形繪制PC正在創(chuàng)建相應(yīng)的視圖并實(shí)時(shí)發(fā)回。
 
  對(duì)于這一測(cè)試,往返等待時(shí)間大約為200毫秒。測(cè)試參與者的反饋表明,這樣的移動(dòng)VR應(yīng)用令人感到滿意。但對(duì)VR頭顯而言不可接受,因?yàn)槔硐氲难舆t應(yīng)該小于大約50毫秒(注:50毫秒是BBC的設(shè)定,行業(yè)的設(shè)定是動(dòng)顯延遲小于20毫秒)。BBC表示,如果要將這種技術(shù)用于頭顯體驗(yàn),團(tuán)隊(duì)需要進(jìn)一步的優(yōu)化,可能性包括:
 
  繪制比顯示器要求更寬的視場(chǎng),并在更寬的視場(chǎng)中移動(dòng)用戶視點(diǎn)。用戶位置延遲將保持不變,但方向延遲將大大降低。
 
  使用子幀視頻編碼器,以便流媒體服務(wù)器不必等待繪制完整個(gè)圖像幀才把數(shù)據(jù)發(fā)回至智能手機(jī)。
 
  提高圖形應(yīng)用程序的幀速率(以及相應(yīng)的傳輸帶寬)
 
  通過僅使用UDP將視頻發(fā)送回智能手機(jī),用網(wǎng)絡(luò)可靠性交換速度。
 
  BBC通過參與者訪談獲得了大量的用戶反饋,并正在進(jìn)行分析以確定未來的計(jì)劃。對(duì)于用戶反饋,測(cè)試者特別渴望的一個(gè)功能是,能夠根據(jù)用戶的知識(shí)水平和興趣來“個(gè)性化”場(chǎng)景的歷史解讀。另一個(gè)受歡迎的要求是,將5G內(nèi)容與導(dǎo)游解說相結(jié)合。
THEEND

最新評(píng)論(評(píng)論僅代表用戶觀點(diǎn))

更多
暫無評(píng)論