文|智東西 徐珊
編輯|云鵬
連沈騰都計(jì)劃在元宇宙里大干一場了？2022年央視春晚，沈騰這邊剛說完一句“我將成為元宇宙里的Dog King”，那邊同名虛擬幣DogeKing的價(jià)格就暴漲近50倍。
▲虛擬幣DogeKing價(jià)格上漲近50倍
央視春晚不但提到了元宇宙、無人駕駛、航天航空等科技領(lǐng)域，同時(shí)在舞臺效果上暗藏著不少創(chuàng)新科技的應(yīng)用。為紀(jì)念三星堆文物青銅大面具的出土，創(chuàng)意舞蹈《金面》通過CG設(shè)計(jì)制作和光學(xué)動作捕捉技術(shù)，讓青銅大面具“活起來”，整個(gè)舞蹈跨越了古今時(shí)空，以虛實(shí)結(jié)合的形式呈現(xiàn)了一場視覺盛宴。
據(jù)初步統(tǒng)計(jì)，截至1月31日24時(shí)，2022年春晚電視端直播平均收視率達(dá)21.93%。新媒體直點(diǎn)播用戶觸達(dá)49.32億次，相對去年增加明顯。其中，央視首次推出的豎屏看春晚累計(jì)觀看人次2億，總點(diǎn)贊數(shù)3.6億。相比于前幾年的央視春晚，今年春晚中的科技運(yùn)用可能不會給人一種很“哇塞”的感覺，但在一些不起眼的角落，科技依舊在為春晚默默發(fā)力。
01.裸眼3D+XR技術(shù)，真真假假分不清楚？
今年春晚包含9大科技創(chuàng)新亮點(diǎn)，有XR、AR、全息、AI動捕等多種硬核技術(shù)，其中，XR虛擬視覺技術(shù)和8K裸眼3D技術(shù)為不少節(jié)目增添了更豐富的情節(jié)內(nèi)涵，讓演員在表演舞臺能夠發(fā)揮出更大的空間。在開場舞時(shí)，大寫的2022隨著虛擬煙花一起呈現(xiàn)在舞臺上方，為舞臺增添了不少新年氛圍。
李榮浩和張韶涵合唱一首《愛在一起》中，游來游去的鯨魚們、五彩斑斕的水底生物，屏幕上游動的水流都通過裸眼3D技術(shù)，讓大家覺得自己仿佛置身于海底世界，共同享受相伴的美好。
創(chuàng)意音舞詩畫《憶江南》以古樸雅趣的水墨畫形式為大家還原了《富春山居圖》，通過XR技術(shù)、CG技術(shù)和動畫制造等技術(shù)詮釋了中國古代文化的獨(dú)特魅力。
春晚副總導(dǎo)演鄒為還介紹到，《只此青綠》同樣通過XR、全息掃描等前沿科技手段，做出了鏡面的效果，以配合舞蹈更好地呈現(xiàn)。
甚至，在少兒舞蹈《星星夢》中，“航天”也搬上了春晚舞臺。
不管是創(chuàng)意舞蹈《金面》，還是創(chuàng)意音舞詩畫《憶江南》的背后，離不開AI多模態(tài)動捕系統(tǒng)的支持。AI多模態(tài)動捕系統(tǒng)不僅能還原演員舉手投足的姿勢，還能讓舞臺上呈現(xiàn)出的虛擬形象更加栩栩如生。
AI多模態(tài)動捕系統(tǒng)主要是指，通過傳感器，攝像頭等設(shè)備收集動捕演員的語音、姿勢等相關(guān)數(shù)據(jù)，用多模態(tài)系統(tǒng)進(jìn)行還原，從而讓虛擬形象能夠近乎完美地“復(fù)刻”動捕演員的神態(tài)、動作等。據(jù)悉，此次《金面》中的青銅人像的制作，來自于凌云光重明視效工作室。該工作室打造了一套光學(xué)運(yùn)動捕捉系統(tǒng)，采用其自主研發(fā)的數(shù)十臺千萬級像素級別的相機(jī)，采集舞蹈演員的相關(guān)數(shù)據(jù)。最后該系統(tǒng)采用網(wǎng)絡(luò)實(shí)時(shí)廣播分發(fā)模式，將舞蹈演員的動作遷移給青銅人的模型，合成最終的畫面。形成虛擬形象后，如何保證虛擬形象能和現(xiàn)場的舞臺女演員實(shí)現(xiàn)交互？一位行業(yè)人士表示，“解決辦法是采用AI多模態(tài)動捕系統(tǒng)中的AIMotion，即多人無標(biāo)記點(diǎn)智能動作捕捉系統(tǒng)，來捕捉真實(shí)女演員的姿勢?！盇IMotion可以通過AI算法計(jì)算出演員形體影像的三維坐標(biāo)，從而實(shí)現(xiàn)讓數(shù)字模型與演員互相配合，以達(dá)成最佳的表演效果。
像春晚快結(jié)束時(shí)展現(xiàn)的冬奧吉祥物“冰墩墩”和“雪容融”則采用了相關(guān)XR技術(shù)，在舞臺上自由的奔跑，展現(xiàn)出虛擬形象的活力。
中央廣播電視總臺技術(shù)局高級工程師譚陽在接受央視記者采訪時(shí)講：“今年我們將結(jié)合最新的XR+AR技術(shù)，做一個(gè)融合的虛擬和現(xiàn)實(shí)的呈現(xiàn)，同時(shí)在AI方向融入更多的智能元素，包括我們今年首創(chuàng)的AI多模態(tài)跟蹤系統(tǒng)將融入多個(gè)節(jié)目中?！?/p>
02.720度環(huán)屏重構(gòu)演播大廳，央視春晚首次采用8K直播
不知道觀看春晚的你有沒有發(fā)現(xiàn)，今年的春晚舞臺有很大不同。相比往年的面對面式舞臺形式，今年的春晚舞臺更像把“鳥巢”搬到了春晚舞臺。今年春晚搭建了一個(gè)4306平方米的720度巨型LED顯示屏幕，并通過分區(qū)域、多點(diǎn)擴(kuò)聲的方式重新設(shè)計(jì)了擴(kuò)聲系統(tǒng)，在視覺上和聲音上都帶來更佳的感官盛宴。
在觀看春晚的過程中，我發(fā)現(xiàn)720度的屏幕會給現(xiàn)場的觀眾帶來沉浸式的視覺體驗(yàn)，無論是頭頂?shù)男强眨€是左右游動的燈光，都從一定程度彌補(bǔ)了原來舞臺與觀眾席之間的割裂感，讓觀眾成為整個(gè)舞臺的重要組成部分。除此以外，央視還通過“豎屏看春晚”的方式來迎合當(dāng)下人們以手機(jī)為主要的移動設(shè)備的觀看情況，通過多角度的專屬機(jī)位為用戶呈現(xiàn)更多的舞臺細(xì)節(jié)。并且，此次央視春晚還在CCTV-8K頻道直播。在過去一年，中國廣播電視總臺逐漸規(guī)范化和標(biāo)準(zhǔn)化8K視頻制作、播出、傳輸、呈現(xiàn)等流程，1月24日，央視正式開通CCTV-8K電視頻道，接入北京和廣東有線電視網(wǎng)，面向家庭用戶提供8K超高清電視服務(wù)。
一個(gè)星期之后，春晚演播大廳內(nèi)里架起了多臺8K攝像機(jī)。據(jù)新聞發(fā)布會介紹，此次直播采用全I(xiàn)P化的8K制作系統(tǒng)，擁有在線包裝、多通道錄制服務(wù)器等設(shè)備，為春晚8K直播做足準(zhǔn)備。此外，觀眾可以通過“百城千屏隨身聽”微信小程序，用手機(jī)收聽到與8K超高清大屏同步的電視伴音。這些都是官方媒體在8K直播的領(lǐng)域做出一次新的嘗試，春晚的成功可能會成為8K視頻新的轉(zhuǎn)折點(diǎn)，或許8K高清視頻的普及指日可待。
03.采用8K裸眼3D、全息掃描技術(shù)，春晚竟成前沿科技“打卡處”？
作為當(dāng)代中國春節(jié)文化的一個(gè)重要符號，春晚已經(jīng)陪伴著千家萬戶度過了40多個(gè)除夕。春晚，不僅奉獻(xiàn)了一場場凝結(jié)了民族情感與時(shí)代內(nèi)涵的文化盛宴，而且通過前沿科技與傳統(tǒng)文化的交融，將視聽審美體驗(yàn)推向新的高度。如今的春晚，在引領(lǐng)文化潮流之余，也正成為展現(xiàn)科技創(chuàng)新與應(yīng)用的平臺?；仡欉^去五年，科技與春晚相得益彰，從舞臺展示效果到線上線下聯(lián)動，春晚儼然逐漸演變?yōu)樾屡d技術(shù)的競技場。2021年的春晚，周杰倫、劉德華通過AR、云技術(shù)“出現(xiàn)”在舞臺現(xiàn)場。由于疫情防控不能到場的劉德華，可以通過AR和云渲染技術(shù)，和其他演員一起跳踢踏舞，其逼真程度讓人難辨真假，就連第二天的熱搜上都在討論“劉德華、周杰倫到底有沒有來春晚？”。
作為“科技感”的標(biāo)志場景之一，無人機(jī)陣列表演早在2020年就已經(jīng)出現(xiàn)在春晚的粵港澳大灣區(qū)分會場上，可以隨著舞臺的設(shè)計(jì)，在舞臺上方變幻出不同的形狀。而今年沒有采用無人機(jī)陣列表演的原因可能是與虎年春晚會場采用穹頂式設(shè)計(jì)有關(guān)，無人機(jī)表演場地受到一定限制。
虛擬數(shù)字人在2019年時(shí)正處于剛剛興起的階段，就連中央電視臺網(wǎng)絡(luò)春晚上，四位主持人都擁有自己虛擬分身，8個(gè)人同臺主持，這可能是歷年以來主持人團(tuán)隊(duì)最龐大的一次。
2018年，由無人機(jī)、無人車、無人艇組成的“三無艦隊(duì)”，至今仍被不少觀眾津津樂道。其中，機(jī)器狗“Jimu汪汪”全部由Jimu零部件搭建而成的，全身共有19個(gè)模擬關(guān)節(jié)運(yùn)動的舵機(jī)、900多個(gè)零件還有2個(gè)LED燈“眼睛”，可以通過編程實(shí)現(xiàn)跳舞、撒嬌、舔爪子、搖尾巴等一系列的動作。
▲優(yōu)必選狗年特別版機(jī)器人“Jimu汪汪”
在2017年，春晚舞臺首次應(yīng)用VR直播，觀眾輕輕拖拽手機(jī)屏幕，就可以實(shí)現(xiàn)720度全景看春晚，如果戴上相應(yīng)的VR眼鏡甚至能一秒“穿越”會場，還能在候播大廳和明星大腕“偶遇”，甚至走進(jìn)演員化妝間。回顧過往春晚上運(yùn)用的黑科技，我們可以發(fā)現(xiàn)春晚上常常會采用當(dāng)下較為熱門或者較為新穎的前沿科技，像是虛擬數(shù)字人、AR技術(shù)等，也因此，春晚一直在見證國內(nèi)前沿技術(shù)的發(fā)展。
04.結(jié)語：從虎年春晚，看VR/AR技術(shù)新應(yīng)用前景
從2022年央視春晚中的8K裸眼3D技術(shù)、全息掃描技術(shù)以及XR技術(shù)等應(yīng)用，我們發(fā)現(xiàn)虛擬數(shù)字人和現(xiàn)實(shí)人物結(jié)合，以及虛擬場景和現(xiàn)實(shí)舞臺結(jié)合的相關(guān)技術(shù)已經(jīng)逐漸成熟，廣泛應(yīng)用各種場景中。無論是元宇宙的熱度讓更多人關(guān)注到人與景之間的XR技術(shù)，還是人們對更新穎、更具有想象力的舞臺需求反推XR技術(shù)的發(fā)展，通過此次春晚，我們可以看到虛擬形象、XR技術(shù)、動捕技術(shù)，都已經(jīng)在文娛領(lǐng)域擁有了較為廣泛的應(yīng)用。這意味著各種類型的虛擬藝人、虛擬場景破圈或成為必然趨勢，未來越來越多的公司將會推出相應(yīng)技術(shù)平臺，為不同的需求搭建專用的虛擬商業(yè)場景。