作者:鳳梨醬
發(fā)布時(shí)間: 2025-06-11 19:22:14
瀏覽量:508次
虛擬現(xiàn)實(shí)制作技術(shù)作為當(dāng)下極具顛覆性的科技力量,正以強(qiáng)大的魔力重塑著廣播電視和網(wǎng)絡(luò)視聽(tīng)等行業(yè)的版圖,打破了傳統(tǒng)視聽(tīng)的邊界,讓觀眾得以踏入沉浸式、交互式的奇幻體驗(yàn)空間。
2024年11月18日,國(guó)家廣播電視總局發(fā)布《廣播電視和網(wǎng)絡(luò)視聽(tīng)虛擬現(xiàn)實(shí)制作技術(shù)應(yīng)用示范名單》,包含10個(gè)項(xiàng)目,這里針對(duì)10個(gè)示范項(xiàng)目的技術(shù)特色與亮點(diǎn)進(jìn)行詳細(xì)梳理,剖析它們?nèi)绾吻擅钸\(yùn)用虛擬現(xiàn)實(shí)制作技術(shù),在融媒創(chuàng)作、沉浸式體驗(yàn)、虛擬拍攝等諸多方面實(shí)現(xiàn)創(chuàng)新突破。
這里仔仔發(fā)現(xiàn),所有應(yīng)用示范項(xiàng)目所用到的技術(shù),如虛擬展廳、虛擬拍攝、全景直播、4K+AI、數(shù)字人、空間計(jì)算等等,火星均有對(duì)應(yīng)專業(yè)!可以完全匹配相應(yīng)崗位的技術(shù)需求。甚至我們部分已經(jīng)畢業(yè)的同學(xué),早就在示范應(yīng)用名單的企業(yè)中工作了。
來(lái)具體看看都有哪些虛擬現(xiàn)實(shí)制作技術(shù)應(yīng)用上榜了吧:
一、杭州趣看科技有限公司-融媒創(chuàng)作空間
杭州趣看科技有限公司的融媒創(chuàng)作空間采用創(chuàng)新的“1+n”一體化模式,即一個(gè)空間能夠同時(shí)滿足多個(gè)內(nèi)容創(chuàng)作室的功能需求。(一)5G+4K+VR全時(shí)直播系統(tǒng)
全時(shí)直播系統(tǒng)作為云端專業(yè)慢直播“利器”,提供一體化服務(wù),VR全景直播系統(tǒng)功能強(qiáng)大,制播一體機(jī)可以實(shí)現(xiàn)4K超高清VR直播與短視頻制作;4K超高清直播系統(tǒng)又借助5G和采編錄播一體機(jī)傳輸高清畫面至云端;而移動(dòng)直播+互動(dòng)連線系統(tǒng)低門檻、低延時(shí)、高安全。
在珠峰5000小時(shí)直播中,4K超高清VR慢直播讓媒體制作出珠峰絕美畫面,珠峰、北京、拉薩三地嘉賓通過(guò)移動(dòng)直播臺(tái)進(jìn)入互動(dòng)連線房間,延時(shí)在200ms以內(nèi),真正實(shí)現(xiàn)遠(yuǎn)程溝通無(wú)障礙。
(二)三維虛擬演播室
該虛擬演播室具備全身動(dòng)捕、數(shù)字人主播和超現(xiàn)實(shí)實(shí)時(shí)渲染等多種功能,其中全身動(dòng)捕技術(shù)通過(guò)在操作人員身上設(shè)置多個(gè)傳感器,實(shí)時(shí)捕捉人體的運(yùn)動(dòng)數(shù)據(jù),然后將這些數(shù)據(jù)映射到數(shù)字人主播身上,使數(shù)字人主播能突破時(shí)空限制模擬人類動(dòng)作進(jìn)行播報(bào)主持;超現(xiàn)實(shí)實(shí)時(shí)渲染引擎則可以根據(jù)主播的動(dòng)作和場(chǎng)景需求,實(shí)時(shí)改變相應(yīng)的背景光影效果、物體材質(zhì)等。數(shù)字人主播可應(yīng)用于既定的、機(jī)械繁瑣的新聞播報(bào)中,解放主持人、記者至更深度的新聞報(bào)道中去。
二、北京當(dāng)紅齊天國(guó)際文化科技發(fā)展集團(tuán)有限公司-5G+XR沉浸式交互體驗(yàn)新場(chǎng)景應(yīng)用示范
北京當(dāng)紅齊天國(guó)際文化科技發(fā)展集團(tuán)有限公司集“XR內(nèi)容制作+載具研發(fā)+數(shù)字運(yùn)營(yíng)整體解決方案及產(chǎn)品落地”于一體,以“soreal”為國(guó)際文化科技品牌,是2022年北京冬奧會(huì)和冬殘奧會(huì)XR體驗(yàn)提供方。
(一)5G網(wǎng)絡(luò)及SoReal CloudXR邊緣計(jì)算
SoReal Cloud XR采用“云邊端”架構(gòu),能夠在靠近用戶端部署邊緣計(jì)算,最大限度降低延遲,在保持VR用戶端設(shè)備輕便的前提下,利用5G網(wǎng)絡(luò)將優(yōu)秀的虛擬現(xiàn)實(shí)內(nèi)容帶給用戶。在2023年服貿(mào)會(huì)期間,兩位總臺(tái)記者分別在首鋼一高爐·SoReal科幻樂(lè)園和四川成都青白江元宇宙數(shù)字文旅產(chǎn)業(yè)園,借助SoReal Cloud XR邊緣計(jì)算,現(xiàn)場(chǎng)的高清視頻數(shù)據(jù)通過(guò)5G網(wǎng)絡(luò)快速傳輸?shù)竭吘売?jì)算節(jié)點(diǎn)進(jìn)行處理,然后將處理后的虛擬場(chǎng)景數(shù)據(jù)實(shí)時(shí)反饋到記者頭戴的VR設(shè)備中,實(shí)現(xiàn)了跨省異地同屏互動(dòng),這種體驗(yàn)被總臺(tái)稱贊為“天花板”級(jí)虛擬現(xiàn)實(shí)新體驗(yàn)。
(二)大容量、低時(shí)延能力的5G-A解決方案
當(dāng)紅齊天集團(tuán)攜手中國(guó)移動(dòng)、中興通訊、高通完成的室內(nèi)超密集沉浸式場(chǎng)景下的XR競(jìng)技游戲應(yīng)用試點(diǎn)中,在1千平米的空間內(nèi),用戶無(wú)需背負(fù)沉重的背包設(shè)備,僅佩戴輕便的VR頭顯即可參與游戲。基于5G-A網(wǎng)絡(luò)提供的數(shù)十個(gè)用戶的實(shí)時(shí)百兆體驗(yàn)速率和低于10ms的平均空口傳輸時(shí)延,用戶在移動(dòng)過(guò)程中,虛擬游戲場(chǎng)景能夠?qū)崟r(shí)跟隨用戶視角變化,畫面清晰度達(dá)到業(yè)界主流4K@90fps的高品質(zhì)畫質(zhì),且響應(yīng)迅速,無(wú)卡頓現(xiàn)象。
△室內(nèi)超密集沉浸式場(chǎng)景下的XR應(yīng)用試點(diǎn)現(xiàn)場(chǎng)
(三)多種前沿技術(shù)融合
在廣西柳州打造的大型5G XR樂(lè)園——祥云SoReal螺樂(lè)園,將5G XR技術(shù)與柳州的古建筑相結(jié)合,利用自動(dòng)化建模生產(chǎn)方式對(duì)古建筑進(jìn)行數(shù)字化建模,通過(guò)5G云渲染將精美逼真的古建筑虛擬場(chǎng)景呈現(xiàn)給游客。大空間定位技術(shù)和先進(jìn)傳感器技術(shù)實(shí)時(shí)追蹤游客在樂(lè)園中的位置和動(dòng)作,游客乘坐VR載具時(shí),VR交互系統(tǒng)根據(jù)游客的操作和動(dòng)作,與虛擬場(chǎng)景中的元素(如虛擬導(dǎo)游、歷史人物等)進(jìn)行互動(dòng)。AI+技術(shù)根據(jù)游客的行為習(xí)慣和偏好,為游客提供個(gè)性化的體驗(yàn)推薦。樂(lè)園還將“螺螄粉”文化、“螺螄”IP進(jìn)行跨界融合,試營(yíng)業(yè)期間獲得原外交部發(fā)言人華春瑩的點(diǎn)贊和轉(zhuǎn)發(fā)。
三、湖南廣播影視集團(tuán)有限公司-芒果沉浸式XR虛擬現(xiàn)實(shí)內(nèi)容服務(wù)平臺(tái)
芒果沉浸式XR虛擬現(xiàn)實(shí)內(nèi)容服務(wù)平臺(tái)由湖南廣播影視集團(tuán)打造,覆蓋綜藝、電影、電視劇、廣告、虛擬拍攝等多個(gè)領(lǐng)域。
(一)先進(jìn)完備的硬件配置
采用高精度XR屏幕,其主要拍攝區(qū)域呈半環(huán)形結(jié)構(gòu),由弧形立面屏和地屏架構(gòu)組成,立屏長(zhǎng)12米,高5米,地屏近60平米,縱深達(dá)6米。還配備諾瓦M(jìn)X40Pro處理器、英國(guó)disguise虛擬渲染系統(tǒng)、Mosys追蹤系統(tǒng)、Sony高清演播室攝像機(jī)等設(shè)備,實(shí)現(xiàn)從圖像采集、處理到渲染輸出的高效流程,這種設(shè)備組合既能滿足高質(zhì)量電視節(jié)目制作需求,又達(dá)到了電影攝制的專業(yè)標(biāo)準(zhǔn)。(二)虛擬場(chǎng)景構(gòu)建
利用虛擬場(chǎng)景構(gòu)建技術(shù),結(jié)合海量的數(shù)字資產(chǎn)庫(kù),能夠快速、準(zhǔn)確地根據(jù)節(jié)目或影視作品的需求創(chuàng)建各種虛擬場(chǎng)景。建模過(guò)程中,對(duì)場(chǎng)景中的物體、環(huán)境、紋理等元素進(jìn)行精細(xì)設(shè)計(jì)和優(yōu)化,同時(shí)運(yùn)用數(shù)字資產(chǎn)庫(kù)中的預(yù)設(shè)模型和素材,快速搭建復(fù)雜場(chǎng)景。在《恐龍博物館》演示場(chǎng)景中,技術(shù)團(tuán)隊(duì)根據(jù)恐龍化石的形態(tài)、紋理等特征,以及博物館的實(shí)際布局和氛圍,利用虛擬場(chǎng)景構(gòu)建技術(shù)進(jìn)行精細(xì)建模。對(duì)恐龍骨骼的紋理進(jìn)行高精度掃描和建模,使其表面細(xì)節(jié)清晰可見(jiàn);《跟著環(huán)塔看新疆》將沙漠場(chǎng)景搬進(jìn)虛擬棚,融合使用LED超高清、XR虛擬拍攝、AIGC等技術(shù),成為芒果XR虛擬棚首個(gè)成功“入駐”棚內(nèi)的項(xiàng)目;以及大型晚會(huì)《萬(wàn)疆》中呈現(xiàn)敦煌紋樣圓環(huán)、竹簡(jiǎn)、書卷等元素構(gòu)成的不同場(chǎng)景等。
(三)實(shí)時(shí)互動(dòng)與光學(xué)跟蹤系統(tǒng)
依托高精度的光學(xué)捕捉設(shè)備和實(shí)時(shí)數(shù)據(jù)傳輸技術(shù),演員能夠在虛擬場(chǎng)景中與虛擬數(shù)字人和資產(chǎn)進(jìn)行流暢的實(shí)時(shí)互動(dòng),演員的每一個(gè)動(dòng)作、表情都能即時(shí)反饋到虛擬場(chǎng)景中,使虛擬元素做出相應(yīng)的互動(dòng)反應(yīng)。光學(xué)跟蹤系統(tǒng)采用先進(jìn)的傳感器和定位算法,實(shí)時(shí)監(jiān)測(cè)拍攝設(shè)備(如攝像機(jī))的位置和姿態(tài)變化,同時(shí)精確識(shí)別演員身上的標(biāo)識(shí)點(diǎn),快速計(jì)算出演員在三維空間中的位置和姿態(tài)變化。拍攝動(dòng)作場(chǎng)景時(shí),演員的奔跑、跳躍、打斗等動(dòng)作都能被精準(zhǔn)追蹤,虛擬場(chǎng)景中的物體(如武器、道具等)會(huì)根據(jù)演員的動(dòng)作實(shí)時(shí)改變位置和狀態(tài),實(shí)現(xiàn)真實(shí)與虛擬的無(wú)縫對(duì)接。
四、深圳市奧拓電子股份有限公司-虛擬拍攝關(guān)鍵技術(shù)應(yīng)用示范
奧拓電子的業(yè)務(wù)范圍涵蓋金融科技、廣告營(yíng)銷、文旅夜游、體育賽事等多個(gè)領(lǐng)域,產(chǎn)品暢銷全球多個(gè)國(guó)家和地區(qū),是全球智能視訊解決方案領(lǐng)域的重要提供商。
(一)RGBW技術(shù)
在傳統(tǒng)RGB技術(shù)架構(gòu)基礎(chǔ)上,增加白色LED燈珠,優(yōu)化了光譜的連續(xù)性,使光線更加均勻和自然。通過(guò)精確控制RGBW四種顏色燈珠的發(fā)光強(qiáng)度和比例,實(shí)現(xiàn)更廣闊的色域覆蓋和更高的亮度提升,避免了傳統(tǒng)RGB模式下在某些光照條件下容易出現(xiàn)的偏色問(wèn)題。在實(shí)際拍攝對(duì)比中,傳統(tǒng)RGB模式下,打光效果cri≤50時(shí)容易出現(xiàn)偏色現(xiàn)象,而奧拓電子的RGBW模式cri≥90,更接近自然光。
△RGBW自然光源膚色質(zhì)感更真實(shí)
(二)超高刷新率與幀率
奧拓電子支持高達(dá)251Hz的高幀率視頻輸入,成功解決了因視頻源限制導(dǎo)致的圖像重影問(wèn)題。其信號(hào)源倍頻功能采用先進(jìn)的插值算法,能夠?qū)⒌蛶室曨l源提升至240Hz,在提升幀率的同時(shí),對(duì)相鄰幀之間的圖像進(jìn)行智能分析和補(bǔ)充,消除了低幀率屏幕顯示的閃爍問(wèn)題。在拍攝高速運(yùn)動(dòng)場(chǎng)景時(shí),如職業(yè)足球賽事直播或動(dòng)作片拍攝中的激烈打斗場(chǎng)景,運(yùn)動(dòng)員的快速奔跑、傳球動(dòng)作以及演員的打斗動(dòng)作都能清晰呈現(xiàn),畫面流暢無(wú)拖影和閃爍現(xiàn)象。其7680Hz的刷新率遠(yuǎn)超通用LED顯示屏的3840Hz,在拍攝汽車追逐場(chǎng)景時(shí),車輪轉(zhuǎn)動(dòng)、車輛行駛軌跡以及周圍環(huán)境的細(xì)節(jié)都能清晰可見(jiàn)。這一技術(shù)優(yōu)勢(shì)也體現(xiàn)在眾多商業(yè)項(xiàng)目中,為蘋果、微軟、奈飛、亞馬遜、Meta、日本東映等企業(yè)的影視拍攝提供了高質(zhì)量保障。
△奧托電子的超高刷新率與幀率示意圖
(三)PWM打散技術(shù)
為了實(shí)現(xiàn)超高刷新率,奧拓電子還采用了PWM打散技術(shù)。將影像導(dǎo)通時(shí)間分散成多個(gè)較短導(dǎo)通時(shí)間,同時(shí)確保每個(gè)打散的等份相加可維持原先未打散前的LED芯片導(dǎo)通比例。這種方式在不改變灰度等級(jí)的前提下,將刷新率提高到7680Hz,有效減少了畫面在顯示過(guò)程中的閃爍和噪點(diǎn)。在拍攝微觀場(chǎng)景或精細(xì)畫面時(shí),如高端珠寶展示或珍貴文物拍攝,PWM打散技術(shù)能夠細(xì)膩地呈現(xiàn)珠寶的每一個(gè)細(xì)節(jié)。鉆石的切割面反射出的光芒、寶石內(nèi)部的紋理和雜質(zhì)等都能清晰可見(jiàn),光影過(guò)渡自然平滑;在拍攝夜景中的古建筑時(shí),光影對(duì)比強(qiáng)烈,該技術(shù)可以使建筑的輪廓、屋檐的雕花、墻壁的質(zhì)感等細(xì)節(jié)在黑暗中依然清晰可辨,月光灑在古建筑上的光影效果、建筑周圍樹木的陰影以及遠(yuǎn)處燈光的微弱光暈等都能自然呈現(xiàn)。
△LED顯示屏灰度等級(jí)
五、利亞德光電股份有限公司牽頭的-基于實(shí)時(shí)渲染的虛擬拍攝引擎應(yīng)用示范
△《獅子王》電影使用OptiTrack技術(shù)跟蹤虛擬攝像機(jī)
圖片來(lái)源:《美國(guó)電影攝影師雜志》專欄
利亞德光電股份有限公司以基于實(shí)時(shí)渲染的虛擬拍攝引擎為核心,整合LED顯示屏與動(dòng)捕系統(tǒng),可提供符合“好萊塢電影VP、XR虛擬拍攝標(biāo)準(zhǔn)”的拍攝場(chǎng)地,以及從劇本、美術(shù)設(shè)計(jì)、數(shù)字資產(chǎn),到影視預(yù)演,虛擬拍攝以及影視評(píng)審(LED放映廳)的“虛擬制片數(shù)字化工業(yè)化生產(chǎn)全流程”解決方案。
(一)LED與動(dòng)捕系統(tǒng)深度融合
利亞德通過(guò)自主研發(fā)的高速數(shù)據(jù)傳輸鏈路和精準(zhǔn)同步算法,將LED顯示屏與動(dòng)捕系統(tǒng)緊密連接。其采用的OptiTrack高精度光學(xué)動(dòng)作捕捉技術(shù),利用多個(gè)高分辨率光學(xué)傳感器,以極高的頻率捕捉演員身上的標(biāo)識(shí)點(diǎn)的位置和運(yùn)動(dòng)軌跡,這些數(shù)據(jù)經(jīng)由高速數(shù)據(jù)傳輸線路實(shí)時(shí)傳輸至虛擬拍攝引擎。虛擬拍攝引擎憑借強(qiáng)大的計(jì)算能力,將這些數(shù)據(jù)轉(zhuǎn)化為虛擬場(chǎng)景中相應(yīng)元素的動(dòng)作指令,從而實(shí)現(xiàn)虛擬場(chǎng)景與真實(shí)拍攝對(duì)象在動(dòng)作、表情等方面的精準(zhǔn)同步互動(dòng)。在虛擬場(chǎng)景中,演員駕駛汽車前行,汽車車身會(huì)依據(jù)虛擬背景的光影變化實(shí)時(shí)映射出相應(yīng)效果,若虛擬背景是烏云密布的惡劣天氣,汽車車身則會(huì)被渲染上陰沉的色調(diào),實(shí)現(xiàn)了虛擬背景與汽車之間的高度逼真互動(dòng)。
(二)高精度虛擬場(chǎng)景構(gòu)建
在建模過(guò)程中,運(yùn)用高精度的幾何建模技術(shù)確保場(chǎng)景中物體的形狀、比例和結(jié)構(gòu)精準(zhǔn)無(wú)誤,采用了細(xì)分曲面建模,使模型表面更加光滑和細(xì)膩。同時(shí)結(jié)合實(shí)地采集、高清掃描和數(shù)字繪制等多種手段獲取真實(shí)材質(zhì)的細(xì)節(jié)信息,并運(yùn)用先進(jìn)的材質(zhì)編輯工具進(jìn)行精細(xì)調(diào)整,使虛擬場(chǎng)景中的材質(zhì)質(zhì)感與真實(shí)世界中的材質(zhì)幾乎無(wú)法區(qū)分。比如對(duì)于金屬材質(zhì),通過(guò)調(diào)整材質(zhì)的反射率、粗糙度等參數(shù),模擬出真實(shí)金屬的光澤和質(zhì)感。光影效果模擬技術(shù)可以根據(jù)不同的時(shí)間、天氣和地理環(huán)境條件,精確計(jì)算光線在場(chǎng)景中的傳播路徑、強(qiáng)度變化和色彩偏移,營(yíng)造出極為逼真的光影氛圍。采用大氣散射模型,可以模擬出不同天氣條件下的光線散射效果。
(三)空間計(jì)算技術(shù)
利亞德虛擬動(dòng)點(diǎn)構(gòu)建的“一體三核”發(fā)展戰(zhàn)略中,空間計(jì)算技術(shù)作為核心之一,涵蓋了光學(xué)計(jì)算、慣性計(jì)算、無(wú)標(biāo)記點(diǎn)識(shí)別計(jì)算等多項(xiàng)算法技術(shù)。光學(xué)計(jì)算通過(guò)對(duì)光信號(hào)的處理和分析,實(shí)現(xiàn)對(duì)物體位置和姿態(tài)的精確測(cè)量;慣性計(jì)算則利用慣性傳感器獲取物體的加速度和角速度信息,進(jìn)而推算其運(yùn)動(dòng)狀態(tài);無(wú)標(biāo)記點(diǎn)識(shí)別計(jì)算采用先進(jìn)的計(jì)算機(jī)視覺(jué)算法,對(duì)物體的特征點(diǎn)進(jìn)行識(shí)別和跟蹤,無(wú)需額外的標(biāo)記物即可實(shí)現(xiàn)精準(zhǔn)定位。這些技術(shù)相互協(xié)作,實(shí)現(xiàn)了包括肢體、手勢(shì)、表情以及體積面積、位置關(guān)系、形態(tài)大小等人體、物體空間計(jì)算場(chǎng)景應(yīng)用。在游戲領(lǐng)域,為全球知名的游戲《2K》《使命召喚》以及國(guó)產(chǎn)3A游戲《黑神話?悟空》提供動(dòng)作捕捉技術(shù)加持。在文旅領(lǐng)域,用全息數(shù)字人解決方案實(shí)現(xiàn)包括生成、驅(qū)動(dòng)、渲染、呈現(xiàn)、互動(dòng)五大能力,實(shí)現(xiàn)數(shù)字人多模式展示交互,為文旅演出提供助力。
△“全息數(shù)字人“多模式交互
六、成都影視硅谷集團(tuán)有限公司牽頭的沉浸式體驗(yàn)增強(qiáng)現(xiàn)實(shí)場(chǎng)景互動(dòng)應(yīng)用示范
成都影視硅谷集團(tuán)有限公司以影視產(chǎn)業(yè)為核心,依托四川傳媒學(xué)院,致力于打造集內(nèi)容創(chuàng)作、拍攝制作、宣傳發(fā)行等多功能于一體的綜合性影視產(chǎn)業(yè)平臺(tái)。
(一)三維重建
利用專業(yè)的三維掃描設(shè)備(如高精度激光掃描儀)對(duì)現(xiàn)實(shí)場(chǎng)景進(jìn)行全面掃描,獲取物體表面的點(diǎn)云數(shù)據(jù),然后通過(guò)復(fù)雜的算法將這些點(diǎn)云數(shù)據(jù)轉(zhuǎn)化為三維模型。在“和美鄉(xiāng)村·恩陽(yáng)古鎮(zhèn)影視城”項(xiàng)目中,精準(zhǔn)還原了古鎮(zhèn)建筑外觀、內(nèi)部結(jié)構(gòu)、街道石板路及店鋪招牌等細(xì)節(jié)。
(二)多模態(tài)虛實(shí)交互
集成多種交互方式,如語(yǔ)音、手勢(shì)等,在與四川傳媒學(xué)院合作的川傳VR虛擬交互大空間劇場(chǎng)項(xiàng)目中,玩家在體驗(yàn)虛擬表演或游戲時(shí),可以通過(guò)語(yǔ)音指令控制角色行動(dòng)、查詢劇情信息,也可以使用手勢(shì)與虛擬物體進(jìn)行交互,抓取虛擬道具、觸摸虛擬角色等。玩家還可以語(yǔ)音呼喊隊(duì)友、下達(dá)戰(zhàn)術(shù)指令,如“隊(duì)友,向左前方包抄”,同時(shí)用手勢(shì)操作武器和工具,與虛擬敵人進(jìn)行戰(zhàn)斗。(三)產(chǎn)業(yè)集群優(yōu)勢(shì)
憑借成都影視城已建成的影視硅谷超高清創(chuàng)新中心、虛擬現(xiàn)實(shí)視聽(tīng)技術(shù)創(chuàng)新應(yīng)用國(guó)家廣電總局實(shí)驗(yàn)室、“1+16”攝影棚群落等80余萬(wàn)平米產(chǎn)業(yè)載體,整合區(qū)域內(nèi)的優(yōu)質(zhì)企業(yè)資源。這些企業(yè)涵蓋了從拍攝設(shè)備提供、后期制作特效到創(chuàng)意策劃等影視產(chǎn)業(yè)鏈的各個(gè)環(huán)節(jié),通過(guò)資源共享、技術(shù)交流與合作,形成協(xié)同效應(yīng)。在參與出品的《我的父親焦裕祿》《公訴》《故鄉(xiāng)別來(lái)無(wú)恙》等多部影視作品中,能夠充分利用產(chǎn)業(yè)集群內(nèi)的專業(yè)設(shè)備、技術(shù)人才和創(chuàng)意資源。還吸引了姜文、黃曉明等知名導(dǎo)演、演員聚集發(fā)展,助力打造“全國(guó)一流、世界知名”的影視文創(chuàng)高地。
七、廣東廣播電視臺(tái)-4K虛擬制作創(chuàng)新應(yīng)用中心
廣東廣播電視臺(tái)的4K虛擬制作創(chuàng)新應(yīng)用中心涵蓋虛擬現(xiàn)實(shí)沉浸式體驗(yàn)、虛擬數(shù)字人、數(shù)字孿生技術(shù)等多個(gè)應(yīng)用示范領(lǐng)域。
(一)4K超高清虛擬演播室
該演播室配備了先進(jìn)的4K超高清攝像設(shè)備與圖像處理系統(tǒng),運(yùn)用實(shí)時(shí)圖像識(shí)別與跟蹤技術(shù),能夠精準(zhǔn)定位虛擬元素與真實(shí)場(chǎng)景的位置關(guān)系。在2024年廣東省省長(zhǎng)王偉中的新春賀詞錄制中,虛擬演播室依據(jù)賀詞內(nèi)容,快速切換展示廣東各地特色地標(biāo)建筑(廣州塔、汕頭小公園等)的虛擬背景,將發(fā)展成果數(shù)據(jù)以動(dòng)態(tài)圖表形式融入其中。觀眾在觀看時(shí),能清晰看到省長(zhǎng)身后建筑的細(xì)節(jié)紋理,圖表數(shù)據(jù)的變化一目了然。
(二)虛擬數(shù)字人
數(shù)字人形象設(shè)計(jì)貼合Z世代審美,結(jié)合VR、AI、實(shí)時(shí)動(dòng)捕等技術(shù)手段,粵語(yǔ)虛擬主播“悅小滿”能與真人主持人同臺(tái)搭檔,還可以通過(guò)多種方式與觀眾進(jìn)行“跨次元”互動(dòng),在綜藝、直播中表現(xiàn)出色,并拓展至公益宣傳等多場(chǎng)景。
△慣性動(dòng)捕設(shè)備&AH面捕頭盔
△粵語(yǔ)虛擬主播“悅小滿”能與真人主持人同臺(tái)搭檔
(三)4K節(jié)目制作
采用專業(yè)的4K拍攝設(shè)備,搭配先進(jìn)的圖像傳感器與鏡頭,確保拍攝畫面的高清晰度與色彩還原度。在后期制作中,運(yùn)用專業(yè)的圖像處理軟件(如達(dá)芬奇調(diào)色系統(tǒng)),對(duì)畫面進(jìn)行精細(xì)調(diào)色、降噪與銳化處理,同時(shí)嚴(yán)格把控音頻質(zhì)量,采用環(huán)繞聲錄制與混音技術(shù),提升節(jié)目整體視聽(tīng)效果。原創(chuàng)音樂(lè)節(jié)目《國(guó)樂(lè)大典》中,在拍攝古箏演奏時(shí),4K技術(shù)清晰呈現(xiàn)出琴弦的細(xì)微顫動(dòng)和琴身的紋理;紀(jì)錄片《通海夷道》里,海上絲綢之路的壯麗海景、沿線古跡的精美雕刻以及不同地域的人文風(fēng)情都以細(xì)膩畫面展現(xiàn)。
△《國(guó)樂(lè)大典》
(四)5G+4K+AI云上融媒平臺(tái)
基于5G+4K+AI技術(shù)的云上融媒制作曾獲2022年第十五屆中國(guó)電影電視技術(shù)學(xué)會(huì)科技進(jìn)步獎(jiǎng)一等獎(jiǎng)。該平臺(tái)整合了5G的高速傳輸、4K的超高清畫質(zhì)和AI的智能處理能力,實(shí)現(xiàn)了融媒制作與分發(fā)的高效協(xié)同。通過(guò)AI智能分析算法對(duì)素材進(jìn)行快速識(shí)別與分類,為編輯推薦合適剪輯片段;5G網(wǎng)絡(luò)確保素材在拍攝現(xiàn)場(chǎng)與制作中心之間的快速傳輸,實(shí)現(xiàn)團(tuán)隊(duì)實(shí)時(shí)協(xié)作;在分發(fā)環(huán)節(jié),基于用戶畫像與終端設(shè)備信息,智能推送適配4K內(nèi)容。
八、優(yōu)酷信息技術(shù)(北京)有限公司-優(yōu)酷虛擬拍攝核心算法突破與能力建設(shè)
優(yōu)酷提供DIT、現(xiàn)場(chǎng)剪輯、調(diào)色等全鏈路虛擬拍攝解決方案,從為《緊急公關(guān)》提供的LED數(shù)字背景拍攝服務(wù),發(fā)展到實(shí)現(xiàn)2D到3D全景實(shí)時(shí)拍攝,成功將虛擬拍攝合成畫面現(xiàn)場(chǎng)調(diào)試時(shí)間從2小時(shí)銳減至20分鐘。
(一)快速調(diào)試與場(chǎng)景切換
優(yōu)酷自主研發(fā)的算法系統(tǒng)具備高效場(chǎng)景解析與適配能力,通過(guò)深度分析虛擬場(chǎng)景元素及拍攝參數(shù),快速完成場(chǎng)景初始化調(diào)試。在場(chǎng)景切換時(shí),運(yùn)用預(yù)加載和智能緩存技術(shù)提前準(zhǔn)備新場(chǎng)景關(guān)鍵數(shù)據(jù),實(shí)時(shí)動(dòng)態(tài)調(diào)整拍攝設(shè)備參數(shù)(焦距、光圈、白平衡等),確保與新場(chǎng)景光照和視覺(jué)效果完美匹配,保障場(chǎng)景過(guò)渡流暢自然。以在周莊數(shù)字夢(mèng)工廠的幀享數(shù)字影棚拍攝《清明上河圖密碼》為例,影棚內(nèi)設(shè)有高10米、弧長(zhǎng)52米的巨型LED屏幕,拍攝過(guò)程中需要切換不同場(chǎng)景,從熱鬧的市井街道場(chǎng)景切換到幽靜的樹下雪景場(chǎng)景時(shí),優(yōu)酷的技術(shù)能夠快速解析新場(chǎng)景元素,預(yù)加載雪景相關(guān)數(shù)據(jù),調(diào)整拍攝設(shè)備參數(shù)以適應(yīng)雪景的光照特點(diǎn),降低亮度、調(diào)整白平衡營(yíng)造寒冷氛圍,僅半天時(shí)間就高效完成了包含樹下雪景、日落湖邊等八大特殊場(chǎng)景的拍攝。
(二)數(shù)字人應(yīng)用創(chuàng)新及效益
通過(guò)AI構(gòu)建數(shù)字人模型,數(shù)字人具備自然流暢的動(dòng)作、表情和語(yǔ)言能力。在與真人演員互動(dòng)場(chǎng)景中,根據(jù)劇情和真人演員表演,實(shí)時(shí)驅(qū)動(dòng)數(shù)字人做出相應(yīng)反應(yīng)?!懂惾酥隆分械腁I數(shù)字人厘里扮演二壯角色,為讓厘里更貼近角色,開(kāi)啟“真人膚質(zhì)”設(shè)定,在與真人演員對(duì)話、并肩行走時(shí),厘里的動(dòng)作、表情自然流暢,眼神交流真實(shí)。僅其出場(chǎng)篇幅,就節(jié)省80%制作成本,縮短40%制作周期,開(kāi)創(chuàng)數(shù)字人參演電視劇先例。
△AI數(shù)字人厘里亮相《異人之下》
九、深圳廣播電影電視集團(tuán)-深圳廣電集團(tuán)虛擬現(xiàn)實(shí)制作技術(shù)應(yīng)用示范
深圳廣電集團(tuán)的虛擬現(xiàn)實(shí)制作技術(shù)應(yīng)用示范包括虛擬現(xiàn)實(shí)全景直播、點(diǎn)播應(yīng)用示范、生成式人工智能技術(shù)(AIGC)應(yīng)用示范、虛擬拍攝關(guān)鍵技術(shù)應(yīng)用示范。
(一)XR虛擬演播室
利用LED屏幕搭建演播空間,三維渲染引擎實(shí)時(shí)生成虛擬場(chǎng)景,通過(guò)定位與跟蹤系統(tǒng),實(shí)現(xiàn)虛擬與現(xiàn)實(shí)元素精準(zhǔn)互動(dòng),而圖像合成算法讓二者無(wú)縫融合。在總臺(tái)春晚、國(guó)家寶藏、中國(guó)詩(shī)詞大會(huì)等近百檔節(jié)目中成功應(yīng)用。央視也利用XR虛擬演播室技術(shù)進(jìn)行臺(tái)風(fēng)天氣預(yù)報(bào):
△現(xiàn)場(chǎng)演示積水深度
△一棵樹被臺(tái)風(fēng)刮倒,差點(diǎn)砸到主持人
△展示臺(tái)風(fēng)極端天氣如何準(zhǔn)備自救用品
(二)8K超高清XR+VP攝影棚
粵港澳超高清數(shù)創(chuàng)園區(qū)打造華南首個(gè)XR+VP雙流程超8K虛擬攝影棚,配備12K*4.5K高分辨率、97%以上DCI-P3廣色域的小間距P1.95mm LED顯示屏,結(jié)合“AI+5G+8K”技術(shù),8K實(shí)時(shí)渲染系統(tǒng)實(shí)現(xiàn)VP與XR拍攝無(wú)縫對(duì)接,追蹤與動(dòng)捕系統(tǒng)保障精準(zhǔn)同步,其157平方米大面積和200°大弧度設(shè)計(jì)提供沉浸式靈活創(chuàng)作空間。以國(guó)內(nèi)首款3A大作《黑神話:悟空》為例,當(dāng)玩家在這個(gè)攝影棚中體驗(yàn)該游戲時(shí),得益于高分辨率和廣色域顯示屏,玩家能清晰看到孫悟空身上威風(fēng)凜凜的毛發(fā)根根分明,山石云霧的紋理粗糙又自然逼真,使玩家仿若身臨其境。
十、安徽廣電傳媒產(chǎn)業(yè)集團(tuán)有限責(zé)任公司牽頭-合肥包河虛擬現(xiàn)實(shí)制作應(yīng)用示范
合肥包河虛擬現(xiàn)實(shí)制作實(shí)驗(yàn)區(qū)依托“合肥國(guó)家廣播影視科技創(chuàng)新實(shí)驗(yàn)基地”設(shè)立,擬開(kāi)展增強(qiáng)現(xiàn)實(shí)場(chǎng)景互動(dòng)應(yīng)用示范、虛擬現(xiàn)實(shí)全景直播、點(diǎn)播應(yīng)用示范、生成式人工智能技術(shù)(AIGC)應(yīng)用示范,綜合應(yīng)用三維建模、全局動(dòng)態(tài)光照、虛擬現(xiàn)實(shí)場(chǎng)景等技術(shù)。(一)三維建模與動(dòng)態(tài)光照技術(shù)
該技術(shù)含兩大核心部分,一是高精度三維建模,運(yùn)用專業(yè)掃描設(shè)備采集物體點(diǎn)云數(shù)據(jù),再借算法“加工”成模型,其中AI輔助依預(yù)設(shè)風(fēng)格要求,自動(dòng)優(yōu)化、補(bǔ)充細(xì)節(jié),構(gòu)建歷史建筑模型,能貼合其年代與類型特征,“生成”適配裝飾紋理、結(jié)構(gòu)細(xì)節(jié),提效增質(zhì)。二是動(dòng)態(tài)光照模擬,依托物理渲染引擎,細(xì)算光線反射、折射、散射等,“還原”真實(shí)傳播路徑與效果,借實(shí)時(shí)全局光照算法,隨場(chǎng)景物體、材質(zhì)變動(dòng)靈活調(diào)光照,模擬晝夜、晴雨光影。在文化遺產(chǎn)保護(hù)傳承層面,諸多瀕危古建筑、文物可借這技術(shù)留存“數(shù)字分身”。
(二)虛擬現(xiàn)實(shí)全景直播
集全景拍攝、傳輸與實(shí)時(shí)交互于一體,其全景拍攝靠多攝像頭陣列與高精度傳感器配合,抓取全方位畫面,經(jīng)圖像拼接算法“無(wú)縫”合成全景圖;傳輸借助高效編碼技術(shù)與高速網(wǎng)絡(luò)協(xié)議,讓全景視頻流暢達(dá)電腦、手機(jī)、VR設(shè)備等終端。實(shí)時(shí)交互依托實(shí)時(shí)數(shù)據(jù)處理、云計(jì)算,觀眾用手機(jī)或VR設(shè)備操作,自如切換視角,還能借物聯(lián)網(wǎng)融入現(xiàn)場(chǎng)實(shí)時(shí)數(shù)據(jù)。在傳統(tǒng)戲曲演出直播中,觀眾能近賞演員神情、服飾細(xì)節(jié),又可覽舞臺(tái)全景,助傳統(tǒng)文化廣傳播;商業(yè)產(chǎn)品發(fā)布會(huì)直播里,觀眾可以360度細(xì)察新品外觀、內(nèi)部構(gòu)造,企業(yè)設(shè)虛擬抽獎(jiǎng)、試用環(huán)節(jié),創(chuàng)新?tīng)I(yíng)銷,提升轉(zhuǎn)化率。
(三)安徽數(shù)字文化科技產(chǎn)業(yè)園虛擬影棚
該影棚集成虛擬攝影棚、實(shí)景影棚、電影后期制作和視效創(chuàng)作等功能,虛擬攝影棚采用高分辨率LED顯示屏作為背景,通過(guò)實(shí)時(shí)渲染技術(shù)與攝像機(jī)跟蹤系統(tǒng)配合,實(shí)現(xiàn)虛擬場(chǎng)景與實(shí)拍畫面的實(shí)時(shí)合成。虛擬影棚作為一個(gè)綜合性的影視制作平臺(tái),吸引眾多影視制作企業(yè)和專業(yè)人才入駐,形成了產(chǎn)業(yè)集聚效應(yīng)。
結(jié)語(yǔ)
綜上,這10個(gè)示范項(xiàng)目充分展現(xiàn)了虛擬現(xiàn)實(shí)制作技術(shù)在廣電行業(yè)的多元應(yīng)用與創(chuàng)新實(shí)踐。它們?cè)诓煌矫娓饔兴L(zhǎng),共同推動(dòng)著行業(yè)的技術(shù)進(jìn)步。期望在未來(lái)虛擬現(xiàn)實(shí)制作技術(shù)能為廣電行業(yè)帶來(lái)更多積極改變,為廣大觀眾提供更優(yōu)質(zhì)、豐富的視聽(tīng)內(nèi)容,助力廣電行業(yè)在新時(shí)代穩(wěn)步發(fā)展,逐步構(gòu)建起更加完善的虛擬現(xiàn)實(shí)制作生態(tài)體系。
一 END 一
優(yōu)秀作品賞析
作 者:李思庭
所學(xué)課程:2101期學(xué)員李思庭作品
作 者:林雪茹
所學(xué)課程:2104期學(xué)員林雪茹作品
作 者:趙凌
所學(xué)課程:2107期學(xué)員趙凌作品
作 者:趙燃
所學(xué)課程:2107期學(xué)員趙燃作品
同學(xué)您好!