想知道XR虛擬演播廳是怎么實現(xiàn)的嗎？來看看XR虛擬演播廳技術分解吧！

想知道XR虛擬演播廳是怎么實現(xiàn)的嗎？來看看XR虛擬演播廳技術分解吧！
近來，XR技術開始走進大眾視野，越來越多的演唱會、發(fā)布會現(xiàn)場、電影拍攝現(xiàn)場以及電視節(jié)目等開始運用高科技感以及逼真感十足的XR技術，開辟拍攝制作又一新玩法。眾所周知，XR技術是一種融合AR、VR、MR技術的擴展顯示技術，那XR技術是如何融合并在屏幕前實現(xiàn)炫酷畫面的呢?
XR場景技術框架包括LED顯示屏組成的拍攝場地、攝像機、物體位置追蹤與定位技術、實時圖形渲染引擎(AR技術)、高速低延遲的網(wǎng)絡等幾大元素，最后將內(nèi)容傳輸顯示屏幕前，就成為炫酷的逼真的XR場景。
XR場景的實現(xiàn)，首先將虛擬環(huán)境傳輸至現(xiàn)場的LED顯示屏，采用物體位置追蹤與定位技術對物體進行跟蹤拍攝，并將素材傳回至實時圖形渲染引擎。與此同時，視頻服務器則用本地化運行邏輯運算進行人物手勢分析及圖形渲染，輸出立體的逼真的AR內(nèi)容與拍攝素材交互呈現(xiàn)，而在屏幕前呈現(xiàn)的內(nèi)容就是XR場景。值得注意的是，在現(xiàn)場還需要強大的網(wǎng)絡支持，為實現(xiàn)XR低時延交互、全景視頻等內(nèi)容大帶寬下發(fā)等提供強有力的支持。簡單的說，XR場景就是基于現(xiàn)實場景，與后臺炫酷的AR內(nèi)容進行結合交互而來的，所以XR技術被譽為AR、VR、MR技術的融合。
我國短片《只為夢中與你相遇》，首次采用虛擬拍攝方式，把 XR工作流程與影視行業(yè)的工作流程相結合并實行最終內(nèi)容的輸出。短片現(xiàn)場無實景、無綠幕，實時渲染場景，而演員在LED屏幕所構建的空間中進行表演。在場景渲染上，XR擴展現(xiàn)實使用實時渲染引擎搭建拍攝場景，通過媒體服務器輸出合成，運用攝像機追蹤系統(tǒng)定位空間位置信息，實時映射人物與場景的空間關系，實時渲染技術將照片級別的動態(tài)數(shù)字場景，在LED屏幕上還原，并實時呈現(xiàn)并輸出一個無死角的虛擬場景，最終形成具有XR場景的短片。
此外，2022年的英雄聯(lián)盟全球總決賽舞臺也采用了XR技術進行實時直播。由于是現(xiàn)場直播，沒有任何重來的機會，所以一場比賽就有幾十臺攝像機參與其中?，F(xiàn)場使用的全部是紅外攝像機，而且在S10現(xiàn)場的墻壁上，有大量的這種小點，這些小點的目的是為了反射紅外線。所有的紅外攝像機都會安裝一個特殊的模塊，當攝像機移動時，它們會根據(jù)這些點的反射還有方向等，對攝像機本身進行跟蹤，再實時反饋給計算機中，這套技術方案使得虛擬和現(xiàn)實的誤差小于1毫米。另外，團隊通過自己開發(fā)的插件，把Unreal引擎中的燈光與現(xiàn)實中的skypanel進行了匹配，也就意味著引擎里的燈光發(fā)生變化，現(xiàn)實中燈光也會進行同步，虛擬內(nèi)容與賽場交互融合，呈現(xiàn)一個新的賽事直播方式。
11月10號，我國"奮斗者"號載人潛水器成功坐底馬里亞納海溝的重要時刻，中央廣播電視總臺央視新聞頻道、央視新聞新媒體通過xR虛擬演播進行了同步科普講解。用虛擬環(huán)境將 LED 屏幕之外的現(xiàn)實環(huán)境實時覆蓋，并完成虛擬環(huán)境拓展的處理。詳細地說就是，攝影機追蹤系統(tǒng) Mosys 的運用使得直播中的現(xiàn)場攝像機與虛擬攝像機始終保持一致與同步，并在 XR 虛擬演播室現(xiàn)場使用了1臺 disguise vx4 媒體服務器，作為虛擬渲染引擎增強渲染和控制，而工作流程將 AR 技術帶入環(huán)境之中，通過使用 Black Trax 動態(tài)追蹤系統(tǒng)實時了解參演者和虛擬影像的位置，從而與 CG 內(nèi)容更好的互動融合，給觀眾一種身臨其境的體驗，將視覺效果的傳遞提升到一個新的維度，與全國觀眾全景體驗大洋10909米處的至深之藍。
極具未來科技感的XR技術已經(jīng)在我國生根發(fā)芽，個別已經(jīng)開出美麗的花。雖然XR技術才剛剛興起，但目前應用范圍已經(jīng)逐漸被拓寬，技術也愈加成熟。隨著小間距顯示技術的進一步成熟，以及點間距的進一步下探，高清細膩且可以實現(xiàn)裸眼3D顯示，未來可以更好地當好背景板;5G網(wǎng)絡的進一步落地，XR技術知名度的持續(xù)提升，以及相關人員技術培訓體系的完善等，都將推動XR技術開始走向成熟。

審核編輯 黃昊宇