戴上MR眼鏡,身處異地的幾個人在“同一空間看到對方”,實時交流、協(xié)同工作,甚至一起對空間內(nèi)的3D素材進行編輯。
空間傳送聽上去似乎很不可思議,這樣的技術(shù)卻已然實現(xiàn),不僅支持多人異地,還支持不同MR、VR設備的使用者一同協(xié)作。
在下一代5G無線網(wǎng)絡上,通過AR進行協(xié)作這種更豐富的方式可能很快就會進入大眾市場。
今日,AR協(xié)作軟件開發(fā)商Spatial Systems、MR眼鏡制造商Nreal和芯片制造商高通宣布,將與運營商建立合作伙伴關(guān)系,以加速AR協(xié)作的應用落地。
推動5G+AR協(xié)作應用
軟硬件、芯片制造商與運營商強強聯(lián)合
今日,Spatial、Nreal和高通公司將與LG Uplus、KDDI以及Deutsche Telekom AG開展合作,與更多的參與者和更豐富的應用一起,以高度復雜的3D內(nèi)容和更多樣化的格式增強AR協(xié)作。
Spatial認為,其平臺與Nreal輕量級大視野頭顯的結(jié)合,將會是目前為運營商推出的首款專門針對5G無線標準開發(fā)的平臺組合。
Spatial是一家AR應用開發(fā)商,主要面向多人遠程協(xié)作的工作場景。使用Nreal Light,加上搭載了高通驍龍855和865計算平臺的智能手機,便可使用5G網(wǎng)絡,讓身處異地的人仿佛在同一空間中工作,實現(xiàn)流暢的多人實時互動。
Spatial的聯(lián)合創(chuàng)始人兼首席執(zhí)行官Anand Agarawala表示:“消費者將能夠在任何地方像坐在他人旁邊一樣一起工作或進行互動。Spatial已經(jīng)投入使用,有許多《財富》1000強企業(yè)已經(jīng)對此進行了積極探索。這其中很大一部分興趣是由硬件的易用性來推動的,并且隨著5G網(wǎng)絡和像Nreal Light這樣的消費級頭顯變得司空見慣,將會推動這個市場發(fā)展的更快。” 其還表示:“硬件、芯片組和運營商的這種結(jié)合對AR來說是一場完美的風暴,就像在2000年代初通過智能手機、高速移動數(shù)據(jù)和應用商店推動了手機市場革命一樣。”
Nreal在2019年推出Nreal Light MR眼鏡,以88g的輕薄機身、時尚外觀、499美元高性價比很快受到市場青睞,短短數(shù)月內(nèi)成功聚集了數(shù)千名內(nèi)容開發(fā)者。該設備不僅支持6Dof定位追蹤,還能夠通過USB-C線與搭載了高通855及以上5G芯片的智能手機連接,有效降低了使用門檻。目前開發(fā)者套裝已經(jīng)上市,售價1199美元。
此外,高通作為合作方之一,其產(chǎn)品管理高級總監(jiān)Brian Vogelsang也提到:“高通公司致力于連接并支持生態(tài)系統(tǒng),使XR成為下一個移動計算平臺,而我們與Spatial的合作就是一個典范。隨著全球運營商和XR支持者大規(guī)模部署5G,并與合作伙伴(如使用驍龍平臺的Nreal與5G智能手機)一起進入企業(yè)和消費者市場,我們將在2020年通過全息網(wǎng)真以及與Spatial平臺的虛擬協(xié)作來改變遠程辦公。”
“傳送門”如何實現(xiàn)?
人們一直都很羨慕多啦A夢中的傳送門道具,很多科研人員也在研究相關(guān)“傳送技術(shù)”,比如通過引力作用產(chǎn)生時空扭曲甚至制造蟲洞來實現(xiàn)空間移動,顯然這還很遙遠。
雖然在物理上無法做到,但通過虛擬化身實時同步卻已經(jīng)成為可能,并且使用門檻也在不斷降低。
2016年,微軟研究院曾經(jīng)展示黑科技Holoportation,視頻中不同地方的兩個人,戴上HoloLens能夠互相看到對方的逼真的虛擬化身,無論是在空間中移動,還是身體動作、面部表情的展現(xiàn),甚至是雙方之間的交流互動,都能實時呈現(xiàn)出來,當然雙方擊掌的時候雖然能看到手掌相合,卻并不會有任何觸感。
效果驚艷,不過成本也不低。這一系統(tǒng)需要給每一個需要傳送的人通過一系列3D攝像頭從各個角度捕捉人像,然后無縫地拼接為3D模型,再壓縮后進行實時傳送。不論是硬件、算法還是網(wǎng)絡都有極高的要求,所以仍在研究階段。
Spatial或者可以理解為“低配版”空間傳送,雖然效果不及Holoportation,但成本和使用門檻大幅降低,成為企業(yè)能夠真正落地應用的形態(tài)。
據(jù)官方介紹,應用中的人物建??梢灾苯邮褂?D圖片掃描生成,省去了用3D攝像機建模的高昂成本,同時便于參與人員之間更快辨認。而為了讓動作表情更自然,在應用中,人物的表情可以通過聲音來智能判斷并生成。(上半身)身體的動作,通過MR眼鏡的手勢識別或者手柄捕捉。
使用Spatial,佩戴不同MR硬件的人,可以在不同地方在同一個空間里協(xié)同工作,觀看產(chǎn)品演示、對3D模型空間標記、“面對面”實時溝通交流。
由于企業(yè)文件以2D居多,因此在Spatial中可以使用圖片墻功能查看,日常文檔也以平鋪形式展開,直觀而便捷。應用支持多種文件格式,包括圖片、視頻、動畫、3D文檔等。
由于應用涉及到多方協(xié)作,需要對3D虛擬化身進行實時渲染,保持語音、位置、手勢和面部表情的逼真度,同時還需要相對較低的延遲,否則體驗會變得不穩(wěn)定,缺乏連續(xù)性可能會使通信變得困難。這就是為什么能提供高帶寬和低延遲的5G對于AR/VR協(xié)作是必不可少的。
AR協(xié)作將改變?nèi)藗児ぷ鞣绞?/strong>
2020年,線上辦公成為了人們主要的工作方式,雖然線上辦公并不少見,也已經(jīng)存在多年,但當遇到這種非常時期,只能線上辦公的時候,平時未注意到的一些弊端也被無限放大,溝通難、低效率、信息傳遞不清晰……當大多數(shù)人聚焦于AR游戲娛樂時,其實AR已經(jīng)可以融入工作場景,成為有力的生產(chǎn)力工具,并改變?nèi)藗兊墓ぷ鞣绞健?/p>
保時捷的“TechLiveLook”為經(jīng)銷商帶來了MR,通過將保時捷的經(jīng)銷商技術(shù)人員與專業(yè)技術(shù)人員通過實時互動提供服務,大大縮短了服務時間高達40%。
梅賽德斯-奔馳在斯圖加特的培訓中心使用100個MR眼鏡,以便進行更快速,更具吸引力的培訓。
法國Airbus向日本航空公司提供MR應用,將MR設備導入飛行員程序后,在虛擬空間中進行試驗等設計工程的作業(yè)時間減少了80%。
AR協(xié)同工作已經(jīng)在諸多大型知名企業(yè)中應用。將人“傳送”到同一空間,不僅減少了傳統(tǒng)語音、視頻溝通中不必要麻煩,空間編輯、無限屏、多人協(xié)作、肢體表情的體現(xiàn),都讓遠程協(xié)同更自然,更高效。