一文帶你總覽XR虛擬現(xiàn)實技術(shù)的前世今生及工作流程

近年來元宇宙、數(shù)字偶像、虛擬現(xiàn)實制作不斷升溫。2021年3月Roblox的上市讓Metaverse元宇宙概念引爆市場，近400億美元市值徹底打開了“元宇宙”行業(yè)的想象空間。Metaverse中，用戶不再刻意區(qū)分物理性的真實存在還是數(shù)字化的虛擬存在。
Metaverse的概念最初來源于1992年美國科幻小說家尼奧·斯蒂文森的《雪崩》，描述了一個平行現(xiàn)實世界的網(wǎng)絡(luò)世界Metaverse，所有現(xiàn)實世界的人在Metaverse中都有一個化身，在其中交往和生活。Metaverse包含5G、AI、區(qū)塊鏈、內(nèi)容制作等多種元素，其核心是通過虛擬體驗XR(Extended Reality，擴展現(xiàn)實)，XR技術(shù)及設(shè)備的持續(xù)迭代，不斷優(yōu)化用戶的數(shù)字化生活體驗;基于XR的數(shù)字化服務(wù)也在圍繞各類應(yīng)用場景不斷滲透，成為開啟元宇宙時代的重要載體。
電視媒體擴展現(xiàn)實虛擬制作系統(tǒng)(擴展現(xiàn)實虛擬制作系統(tǒng)本文主要指基于LED渲染背景+ 真實前景的虛擬節(jié)目制作系統(tǒng))是XR技術(shù)在媒體領(lǐng)域的重要應(yīng)用，也是媒體行業(yè)邁向“元宇宙”時代的第一步。
XR擴展現(xiàn)實虛擬制作為廣播電視節(jié)目制作帶來了一個全新的創(chuàng)作手段。近年來，國內(nèi)外眾多電視臺、媒體機構(gòu)對這一技術(shù)逐步展開探索、實踐。SMPTE在2021年下半年更是提出了RIS(Rapid Industry Solution)行業(yè)快速解決方案，其中把現(xiàn)場虛擬制作(On-Set Virtual Production)定義為廣播電視行業(yè)第一個快速解決方案。目前參與On-Set Virtual Production探索的公司主要有ARRI、CANON、Cooke、Disguise、Sony、Epic Games、Unity等業(yè)內(nèi)知名公司。
工作流程
虛擬制作，廣義上是一系列計算機輔助制片和可視化節(jié)目制作的方法。可以簡化定義為以實時交互的方式進行節(jié)目制作，創(chuàng)建媒體數(shù)字虛擬世界的過程。廣播電視傳統(tǒng)的虛擬化制作主要采用綠箱+色鍵摳像+虛擬包裝系統(tǒng)實現(xiàn)。
在電影《曼達洛人》的制作中，GolemCreations公司和工業(yè)光魔合作，共同研發(fā)了端到端的實時虛擬拍攝解決方案，以LED幕墻代替綠幕，綜合攝像機追蹤、實時渲染和協(xié)同工作等技術(shù)，將游戲?qū)崟r引擎圖像輸出與攝像機追蹤相結(jié)合，實時生成最終的節(jié)目信號，將虛擬制作技術(shù)帶到了一個新的高度，從而打開了XR擴展現(xiàn)實虛擬制作的大門。
繼《曼達洛人》之后，已有多部影視劇和藝術(shù)作品采用了LED大屏背景+ 前景混合現(xiàn)實技術(shù)的制作方式。
在英國，Sky Studios、Dimension、DNEG、ARRI聯(lián)合兩次奧斯卡最佳視覺效果獎獲得者Paul Franklin(2015年第87屆奧斯卡金像獎最佳視覺效果《星際穿越》、2011年第83屆奧斯卡金像獎最佳視覺效果《盜夢空間》)一同在西倫敦搭建了第一個基于LED大屏及實體前景的混合虛擬拍攝系統(tǒng)，這個項目被命名為Virtual Production Innovation Project，主要用于高端虛擬拍攝的探索。
目前，這個虛擬舞臺被大量用于電影、廣告和電視節(jié)目的拍攝。同時ARRI、NEP、Creative Technology于2021年在西倫敦也一同搭建了名為“state-of-the-art”的虛擬演播室系統(tǒng)，主要用于電影、電視拍攝及XR擴展現(xiàn)實虛擬制作系統(tǒng)產(chǎn)品的研發(fā)探索等。

審核編輯黃昊宇