5G時代，人們對它的期待主要體現(xiàn)在視頻方面，具體而言，則是對速度、分辨率以及逼真性的追求。就目前的發(fā)展狀態(tài)而言，標清、高清、4K超高清……現(xiàn)在絕大多數(shù)人對視頻的要求仍然停留在前兩項。AR和VR并不是沒有應用到實際生活中，只是技術(shù)的推廣是一個緩慢的過程。就目前而言，VR體驗式游戲已經(jīng)遍布各大商場，頭戴式VR設備也是某寶上唾手可得的商品，AR卡片也變得不再新鮮，AR與VR似乎已經(jīng)走進了尋常百姓家，但并沒有融入人們的日常生活。
電視，在互聯(lián)網(wǎng)面前地位逐漸渺小，可電視所創(chuàng)造的共同空間中的交流互動機會是網(wǎng)絡無法實現(xiàn)的。在AR/VR時代，新技術(shù)如何拯救逐漸衰落的傳統(tǒng)電視媒體，改變電視生態(tài)系統(tǒng)？本文通過兩種方式進行深入挖掘，探討了未來廣播電視生態(tài)中AR/VR的發(fā)展可能性，介紹了部分研發(fā)產(chǎn)品，以望對電視生態(tài)的創(chuàng)新產(chǎn)生啟發(fā)。
在4K、8K之后，未來的媒體生態(tài)中，AR和VR可能將成為主流技術(shù)。為了探討未來廣播生態(tài)系統(tǒng)中AR、VR的發(fā)展可能性，我們采取了兩種方式進行深入的挖掘：演繹法和歸納法。
從演繹法的視角看，未來電視生態(tài)的變化依靠研發(fā)技術(shù)的發(fā)展，或者也可以說技術(shù)發(fā)展推動持續(xù)創(chuàng)新。由于這種方法是針對對如何實現(xiàn)AR/VR，我們將其稱為「用于AR/VR」。
從歸納法的視角來看，首先，我們期待從科技與社會的發(fā)展中把握目前與未來的潛在需求。然后，考慮我們能夠提供怎樣的服務。之后針對服務所需的技術(shù)擬定研發(fā)計劃，有目的性地進行研發(fā)工作。我們并不會利用我們已有的技術(shù)力量，但這種思考角度或許能迸發(fā)出新的靈感，創(chuàng)造顛覆性創(chuàng)新的東西。媒體公司的目的是為了通過廣播創(chuàng)造價值，或者用廣播內(nèi)容加強家庭內(nèi)部交流等。比起「用于AR/VR」，這里技術(shù)研發(fā)有著更深層次的社會意義。因此，鑒于我們只是把技術(shù)作為一種手段，我們將這種方法稱為「借助AR/VR」。
本文，我們將介紹過去和現(xiàn)在兩個時間維度的「用于AR/VR」和「借助AR/VR」案例，從中總結(jié)出未來電視生態(tài)領(lǐng)域的觀看方式，并對AR/VR時代的媒體作用進行討論。
一、回顧：過去的研發(fā)成果
為了進一步思考未來的AR/VR廣播技術(shù)與廣播策略，我們介紹了過去的四個研發(fā)試驗作為案例參考。
「用于AR/VR」案例1：使用8K顯示屏的VR觀看系統(tǒng)
適用于360VR的頭戴式顯示器（HMD）還需要從各種方面加以改進。尤其是，既有事實證明目前的像素，并不足以提供高度沉浸感與現(xiàn)實感的舒適觀看體驗，以下便是運用8K研究的成果之一。
當通過HMD在寬視野范圍內(nèi)觀看360°全景圖像的一部分時，需要HMD具有非常高的空間分辨率才能保證不會看到像素塊。這便對360°圖像提出了更高的空間分辨率要求。為了解決這個問題，我們在此基礎(chǔ)上推出了使用OLED屏幕的HMD模型，能夠達到8K（1058ppi）的空間分辨率，并利用該模型捕捉到了30K x 15K空間分辨率的360°全景圖像。該成果在ITU-R BT.2123-0建議的討論總中被當作案例。
「用于AR/VR」案例2：AR廣播同步系統(tǒng)
在大量的作品和標準中，網(wǎng)絡內(nèi)容能對廣播節(jié)目提供額外補充。廣播節(jié)目與網(wǎng)絡內(nèi)容之間的同步性是核心主題之一。以下便是川村和大月利用我們在MPEG媒體傳輸（MMT）方面的領(lǐng)先研究開發(fā)的AR應用案例。
在該案例中，觀看者將能夠享受到新的觀看體驗：電視上的廣播節(jié)目，作為第二屏幕的移動設備上的3DCG內(nèi)容（包括AR內(nèi)容）將按照世界標準時間進行同步。其中特點之一就是我們利用了MMT上視頻幀具有基于UTC的演示時間戳（PTS）這一規(guī)則。
「借助AR/VR」案例1：增強型電視
增強現(xiàn)實型電視使得，「電視人物從電視機里蹦出來」的想象不再是夢。增強現(xiàn)實型電視能提供AR技術(shù)支持下的服務，通過該服務，觀眾能在電視機前感受到電視世界與真實世界融為了一體。
它主要有兩大功能：第一，電視圖像和移動設備上的3DCG內(nèi)容（AR內(nèi)容）之間的幀顯示時間同步；第二，對電視與移動設備之間相對位置與方向進行估計。同步的特點是，初始移動標記（包括電視節(jié)目的回放時間）將作為電視節(jié)目的一部分顯示在電視上。通過使用移動設備掃描該標記，觀看者能夠享受到同步的AR內(nèi)容。
從電視與移動設備之間的同步性來看，這個例子與「用于AR/VR」案例2很相似。然而，方法是完全相反的?！赣糜贏R/VR」案例2中，電視上的廣播節(jié)目無需更改即可實現(xiàn)同步。另外，服務專用技術(shù)使其不僅可以用于電視直播，也可以用于時移觀看、打包媒體或者數(shù)字標牌等。
「借助AR/VR」案例2：360°視頻傳遞系統(tǒng)，看到框架外的世界
這是另一個電視節(jié)目的增強系統(tǒng)。NHK提供了這樣一款VR服務，觀看者可以通過移動設備看到電視框架之外的電視節(jié)目所展現(xiàn)的景象。在移動設備上安裝這樣一款可提供360°全景視頻的傳遞系統(tǒng)，觀看者就能夠看到整個電視節(jié)目所展現(xiàn)背景的全貌，而不只是被限制在屏幕上的平面內(nèi)容。
二、展望：由過去邁向未來
「用于AR/VR」案例3：使用8K攝像機進行高沉浸式VR制作
在VR視頻拍攝中，理想情況是使用單個攝像頭無需縫合即可準確拍攝到對象，以避免后期人工處理帶來錯位問題。然而并沒有能進行360°拍攝的設備。為了減少針跡，經(jīng)常需要使用高清相機來實現(xiàn)高分辨率的VR視頻。
相關(guān)生產(chǎn)者使用8K相機嘗試著拍攝過VR視頻，例如使用了不同的鏡頭和相機進行8K相機的組合拍下多個場景，并對這些視頻進行評估。盡管不能忽略結(jié)果取決于現(xiàn)場這一事實，但仍然期待制作高分辨率VR視頻的技術(shù)實現(xiàn)，并將為拍攝更流暢的視頻制定計劃。
·使用AR眼鏡的觀看方式
最近AR眼鏡受到了極大的關(guān)注，人們認為AR眼鏡是最可能取代智能手機的設備之一。文章探討了AR眼鏡時代的觀看方式將是什么樣的。下圖展示了預期中未來AR眼鏡的主要功能。它和智能手機最大的區(qū)別在于高度的空間自由。舉例來說，AR眼鏡能夠代替觀看2D視頻圖像的常規(guī)顯示器。正如川北所提到的那樣，文中將2D視頻圖像稱為源于AR眼鏡「虛擬電視」帶來的3D真實空間。
下面的表格分類簡單展示了從傳統(tǒng)電視時代到虛擬電視時代不同的觀看體驗。下圖則以圖示意了表格中闡述的理想坐標系統(tǒng)。從表格與圖片中可以看出，未來AR眼鏡觀看方式的特點就是能以觀看者為中心建立坐標軸。因此將這個系統(tǒng)稱為VCS（觀看者坐標系統(tǒng)）。
·共享空間共同觀看
一直以來人們都認同媒體價值之一在于提供普世話題。電視媒體能夠?qū)⑷藗兙奂诳蛷d中，為人們提供在同一空間內(nèi)相互交流的機會。對于媒體而言，不僅需要為觀眾提供內(nèi)容信息服務，還應該提供共享空間的服務，這在虛擬電視時代也同樣重要。下圖便展示了這種服務的模擬圖。
在這項服務中，觀看者戴上AR眼鏡就可以看到一場仿佛真實存在的表演。他們同樣可以體驗到和遠方的家人、朋友，過去的自己或家人，甚至同樣對該節(jié)目感興趣的陌生人一起看電視的經(jīng)歷。公司或許可以提供元數(shù)據(jù)支持，以允許觀眾更容易地邀請合適的人。
「借助AR/VR」案例3：利用具有Alpha通道的360°視頻
各式各樣的2D內(nèi)容可能將在虛擬電視時代融合在一起。例如，「借助AR/VR」案例2中所描繪的矩形2D圖像和360°視頻的融合，或者矩形2D圖像和無背景人體之間的融合.考慮到內(nèi)容或設備類型的多樣性，NHK提出了新的廣播服務概念，以與虛擬時代「多樣化視覺」相對應。
為了更好地處理各種類型的2D圖像，文章建議在VCS中使用具有Alpha通道的360°全景圖像。VCS中具有Alpha通道的360°圖像可以包含幾乎所有類型的2D視頻，無論是傳統(tǒng)的長方形圖像，全景圖像，或者任意形狀的圖像。由于可以使用一些現(xiàn)有的編解碼器來處理這種具有Alpha通道的360°圖像（例如VP8/WebM），因此并不需要創(chuàng)建新的文件格式。除此之外，如果大多數(shù)圖像是透明的，則圖像數(shù)據(jù)能夠以高壓縮率壓縮。
為了提高人體此類物體在具有Alpha通道的360°圖像中的存在感，文章僅引入了一個參數(shù)，提出一種新的距離感知方式。正如下圖所示，直徑d指的是觀看者的位置（起點）到球狀圖像（虛擬屏幕）之間的距離，同時也具有時間功能。內(nèi)容提供者進一步明確了d的含義，即觀看者將通過VCS的距離感知享受所提供的內(nèi)容服務。具體來說，觀看者有兩種感知距離感的方式：一是使用雙目HMD，觀看者會感覺到具有Alpha通道的全景圖像中的物體以及虛擬背景之間的視差；二是通過AR眼鏡，全景圖像中的物體和真實物體之間存在區(qū)隔。
「借助AR/VR」案例4：共享VR體驗
上面AR眼鏡的例子講到了在共享空間內(nèi)共享觀看體驗，除此之外，吉野設計的VR頭戴式顯示器（HMD）也能實現(xiàn)這種情況。像全景圖像一樣，VR中也有一個眾所周知的問題：觀看者無法與其他人在同一個地方一起觀看。在這種情況下，觀看者需要佩戴安裝了立體攝像機的HMD。通過立體攝像機展示的深度圖，系統(tǒng)會向觀看者展示附近的實物，這些物體將會AR的方式展示出來，而剩余地方則將以全景的方式呈現(xiàn)。
在下圖中，觀看者能夠看到他附近的觀看者，比如他的朋友，以及全景圖像。如果他的朋友指向某件物品，改觀看著能夠同一時間看向他朋友所指的方向。因此，觀看者能夠和附近的觀看者共享VR體驗過程。
三、結(jié)語
旅游是什么？有人的旅游裝在眼睛里，有人的旅游裝在相機里。相機里的記憶當然能夠存儲更長的時間甚至能永久保存，可相機也將所有的風景限制在了矩形的框架中。
我們生活在一個「屏幕時代」，屏幕里的世界成為了我們生活中的一部分?？v然屏幕里的世界千姿百態(tài)，拓寬了我們的視野，但也不得不承認屏幕的框架將一切的立體變成了平面，它限制了觀看的視角，限制了我們對世界的全面認知。360°全景圖像傳遞系統(tǒng)能打破人類的生理局限，也能打破屏幕框架的束縛，幫助我們?nèi)轿坏卣J知世界。
電視里和電視外是截然不同的兩個世界，是虛擬與現(xiàn)實的對照。兩個世界都有好有壞，而兩個不同世界的交互或許能讓我們身臨其境地體驗另一種生活，有時是心理的放松，有時也能幫助心智的成熟。
城市化進程的加快，背井離鄉(xiāng)追尋夢想的年輕人越來越多，獨身在外無依無靠，生活的壓力、工作的壓力沒有面對面的傾訴對象能夠訴說排解。孤獨時分人需要的不僅是言語的陪伴，更是身體的陪伴。AR與VR創(chuàng)造的共同空間共享不僅是電視生態(tài)領(lǐng)域的一大創(chuàng)舉，更是孤獨游子的治愈良藥。
技術(shù)總能讓人產(chǎn)生無比的期待，我們不敢貿(mào)然斷定這些技術(shù)能否都能真正實現(xiàn)，但我們敢確定的是，只有想不到，沒有做不到，生活需要多點期待。
