9月6日，今年第11號(hào)臺(tái)風(fēng)“摩羯”登陸，成為史上登陸中國(guó)最強(qiáng)秋臺(tái)風(fēng)，也是繼2014年第9號(hào)臺(tái)風(fēng)“威馬遜”之后登陸中國(guó)的最強(qiáng)臺(tái)風(fēng)。

　　就在這樣的背景下，央視頻推出了一段前所未有的天氣預(yù)報(bào)視頻，瞬間刷爆了網(wǎng)絡(luò)。這段視頻，完全打破了傳統(tǒng)天氣預(yù)報(bào)的模式，運(yùn)用虛擬現(xiàn)實(shí)技術(shù)將臺(tái)風(fēng)“摩羯”的破壞力生動(dòng)直觀地展現(xiàn)在觀眾面前。

　　01

　　沉浸式XR演播室

　　視頻中，主持人不僅僅是站在屏幕前講述天氣情況，而是"走入”了一個(gè)虛擬的場(chǎng)景中，親身演示臺(tái)風(fēng)的影響。例如當(dāng)主持人手握雨傘走在虛擬街道上時(shí)，突如其來(lái)的狂風(fēng)將傘瞬間吹飛，狂風(fēng)暴雨中的真實(shí)感震撼了所有觀眾。此外，還有樹(shù)木倒塌的場(chǎng)景，甚至“砸”進(jìn)了演播室，主持人險(xiǎn)些受傷。這樣的畫(huà)面讓觀眾更切實(shí)地感受到了自然災(zāi)害帶來(lái)的巨大威脅。

　　那么，這樣一場(chǎng)視覺(jué)盛宴是如何誕生的呢?這背后，是虛幻引擎（Unreal Engine）這一強(qiáng)大游戲引擎的鼎力支持。 原本用于開(kāi)發(fā)高畫(huà)質(zhì)游戲的虛幻引擎，如今被巧妙地應(yīng)用到了天氣預(yù)報(bào)領(lǐng)域，利用其強(qiáng)大的渲染能力和物理模擬技術(shù)，構(gòu)建出了一個(gè)高度逼真的虛擬環(huán)境。

　　同時(shí)，擴(kuò)展現(xiàn)實(shí)（XR）技術(shù)的加入，更是讓這一虛擬世界與現(xiàn)實(shí)世界無(wú)縫銜接。 觀眾不僅能夠看到臺(tái)風(fēng)在虛擬世界中的肆虐，還能通過(guò)XR技術(shù)感受到風(fēng)的力量、雨的滂沱，仿佛自己也成為了這場(chǎng)自然奇觀的一部分。對(duì)比上一代傳統(tǒng)虛擬演播室系統(tǒng)，XR技術(shù)節(jié)省了綠箱（藍(lán)箱）摳像、后期合成等環(huán)節(jié)，真正做到“所見(jiàn)即所得” 。

　　而虛擬演播室技術(shù)，則是整個(gè)系統(tǒng)的“靈魂”。它打破了傳統(tǒng)演播室的物理限制，讓主持人和虛擬環(huán)境能夠自由互動(dòng) ，創(chuàng)造出更加靈活、多樣的播報(bào)形式。無(wú)論是風(fēng)雨交加的臺(tái)風(fēng)現(xiàn)場(chǎng)，還是晴空萬(wàn)里的未來(lái)展望，都能夠在虛擬演播室內(nèi)輕松實(shí)現(xiàn)。

　　XR演播系統(tǒng)利用LED大屏直接輸出預(yù)制背景 ，即把攝像機(jī)信號(hào)從后期摳像處理方式轉(zhuǎn)變?yōu)閿z像機(jī)實(shí)時(shí)預(yù)成像方式，直接生成帶有演員和嘉賓現(xiàn)場(chǎng)的虛實(shí)合成畫(huà)面。同時(shí)，在系統(tǒng)中后端部署虛擬前景合成服務(wù)器集群，通過(guò)顯示設(shè)備在大屏前植入CG圖文、虛擬AI主持人等，完成大屏范圍之外的畫(huà)面擴(kuò)展補(bǔ)償 。

　　通過(guò)打造沉浸式三維立體演播空間，使參與者的表演更加自然，互動(dòng)更加精準(zhǔn)，環(huán)境光照更加飽滿(mǎn)。 結(jié)合專(zhuān)業(yè)化舞美設(shè)計(jì)，系統(tǒng)可打通真實(shí)現(xiàn)場(chǎng)、真實(shí)人物、虛擬背景與虛擬植入之間的空間共存感，產(chǎn)生時(shí)空交錯(cuò)、異地融合的奇妙效果，最大化地利用演播室或舞臺(tái)空間，為數(shù)字媒體制作提供新的技術(shù)手段。

　　02

　　賦能媒體創(chuàng)意生產(chǎn)

　　虛擬演播室技術(shù)是以計(jì)算機(jī)技術(shù)為基礎(chǔ)發(fā)展的，該技術(shù)能夠?qū)ΜF(xiàn)場(chǎng)環(huán)境進(jìn)行有效虛擬，即利用計(jì)算機(jī)技術(shù)虛擬出三維立體場(chǎng)景，并與現(xiàn)場(chǎng)畫(huà)面進(jìn)行數(shù)字化合成，以此獲得良好的播出效果。

　　在2022年兩會(huì)期間，央視網(wǎng)針對(duì)兩會(huì)期間的熱點(diǎn)話(huà)題，策劃并制作了一檔訪談直播節(jié)目《兩會(huì)C+時(shí)刻》，在直播過(guò)程中首次將虛擬數(shù)字人融入虛擬演播室系統(tǒng)，并且與真實(shí)嘉賓一起置身于虛擬場(chǎng)景中進(jìn)行實(shí)時(shí)互動(dòng)。該節(jié)目采用實(shí)拍植入的方式，加入了時(shí)下流行的虛擬數(shù)字人（央視網(wǎng)虛擬主播小C），同時(shí)利用面部捕捉和動(dòng)作捕捉技術(shù)，使虛擬數(shù)字人能夠?qū)崟r(shí)地與現(xiàn)場(chǎng)嘉賓互動(dòng)。

　　隨著人工智能的出現(xiàn)，還發(fā)展出了新的產(chǎn)物——虛擬數(shù)字人，通過(guò)不斷學(xué)習(xí)，以龐大的數(shù)據(jù)庫(kù)作支撐，最終成為和真人高度相似的虛擬人物。央視網(wǎng)采用真人驅(qū)動(dòng)虛擬人的方式實(shí)現(xiàn)虛擬數(shù)字人與虛擬演播室完美融合，在訪談話(huà)題的實(shí)時(shí)虛擬制作技術(shù)上是一次創(chuàng)新 ，踐行了“技術(shù)+創(chuàng)意”的理念，為嚴(yán)肅的兩會(huì)話(huà)題添加了活潑生動(dòng)的元素，讓年輕觀眾更容易接受。

　　XR沉浸式演播室無(wú)論是在技術(shù)上還是在行業(yè)的領(lǐng)域中，都超越了傳統(tǒng)演播室。2022年6月中央廣播電視總臺(tái)CGTN的超長(zhǎng)新媒體直播《雨林大冒險(xiǎn)》將XR技術(shù)與異地連線(xiàn)應(yīng)用場(chǎng)景相結(jié)合，讓連線(xiàn)嘉賓和主持人置于同一場(chǎng)景，突破“屏對(duì)屏”，實(shí)現(xiàn)“面對(duì)面”溝通。最終實(shí)現(xiàn)同一場(chǎng)景下的異地訪談、異地報(bào)道等，豐富了鏡頭語(yǔ)言表達(dá)形式，打破了時(shí)間與空間限制。

　　相比傳統(tǒng)直播連線(xiàn)技術(shù)，XR異地融合技術(shù)使整體節(jié)目效果更逼真，并且增強(qiáng)了節(jié)目的時(shí)空感、立體感、真實(shí)感，現(xiàn)場(chǎng)主持人更有“身臨其境”的沉浸式體驗(yàn)。在2022年6月22日《雨林大冒險(xiǎn)》的直播過(guò)程中，主持人在雨林XR背景中，通過(guò)技術(shù)切換讓其“穿梭”于世界各地的熱帶雨林，并且能和身處現(xiàn)場(chǎng)的前方同事實(shí)現(xiàn)身臨其境的異地同屏互動(dòng)。

　　CGTN此次采用的XR異地融合技術(shù)，將原先的二維圖像節(jié)目呈現(xiàn)方式進(jìn)行了突破升級(jí)，能夠?qū)⒑笃谇爸茫焖俚貙?shí)現(xiàn)虛實(shí)結(jié)合效果。 隨著河南春晚、元宵晚會(huì)的屢次出圈，XR 技術(shù)逐漸被應(yīng)用到許多節(jié)目制作中，也日益被大眾所接受。

　　除此之外，2020年3月中國(guó)聯(lián)通與中國(guó)傳媒大學(xué)成果轉(zhuǎn)化中心/動(dòng)畫(huà)學(xué)院共同推出XR內(nèi)容開(kāi)發(fā)者計(jì)劃助力5G文創(chuàng)生態(tài)。2021年新華社智立方智能化演播室與天津中醫(yī)藥大學(xué)實(shí)驗(yàn)室展開(kāi)了一場(chǎng)“異地同屏”的訪談，現(xiàn)場(chǎng)以LED大屏作為交互媒介，實(shí)現(xiàn)人民大會(huì)堂和梅地亞會(huì)場(chǎng)之間“隔空對(duì)話(huà)”的效果。2022年11月，國(guó)家工業(yè)和信息化部批復(fù)組建國(guó)家虛擬現(xiàn)實(shí)創(chuàng)新中心、國(guó)家超高清視頻創(chuàng)新中心等3家國(guó)家制造業(yè)創(chuàng)新中心 。其中虛擬現(xiàn)實(shí)和超高清視頻的重要載體便是XR虛擬演播室。

　　XR虛擬演播室在真實(shí)空間中打造出無(wú)限可能的沉浸式虛擬環(huán)境，做到了“所見(jiàn)即所得”的拍攝效果，在場(chǎng)景還原方面明顯優(yōu)于傳統(tǒng)的直播演播室(實(shí)景裝修)和純虛擬演播室，在新媒體傳播、工業(yè)設(shè)計(jì)、娛樂(lè)互動(dòng)、主題場(chǎng)館等多種行業(yè)和領(lǐng)域廣泛應(yīng)用。

　　現(xiàn)在XR虛擬演播技術(shù)可廣泛應(yīng)用于廣告、電影、電視、綜藝節(jié)目、紀(jì)錄片、戲劇演出、發(fā)布會(huì)、演唱會(huì)、電競(jìng)賽事、電商直播等各類(lèi)視聽(tīng)內(nèi)容制作領(lǐng)域，服務(wù)對(duì)象由1變N。XR的未來(lái)正如其名字中的“X”一樣，技術(shù)+創(chuàng)意為媒體創(chuàng)作多樣化賦能，充滿(mǎn)了無(wú)限可能性，實(shí)現(xiàn)了現(xiàn)實(shí)世界與虛擬世界的交匯融合，提供無(wú)限創(chuàng)作空間，為觀眾營(yíng)造全新的視聽(tīng)體驗(yàn)。