2月4日晚舉行的北京2022年冬奧會(huì)開(kāi)幕式上，鋪滿全場(chǎng)的LED地面屏幕顯示交互技術(shù)震撼全場(chǎng)。

在《雪花》環(huán)節(jié)，小演員們雙手舉著“和平鴿”，隨著腳步的移動(dòng)，腳下“盛開(kāi)”一朵朵晶瑩潔白的雪花。

北京電影學(xué)院聲音學(xué)院院長(zhǎng)童雷介紹，在超過(guò)一萬(wàn)平方米的場(chǎng)地上，對(duì)將近700個(gè)演員，進(jìn)行實(shí)時(shí)捕捉和實(shí)時(shí)效果的跟蹤和呈現(xiàn)，在大規(guī)模文藝演出的開(kāi)閉幕式場(chǎng)合采用這樣的嘗試，還是世界首創(chuàng)。

實(shí)時(shí)交互創(chuàng)意來(lái)源于冰面倒影

新京報(bào)：地面屏幕如何實(shí)現(xiàn)“如影隨形”效果？

童雷：地面LED特效“如影隨形”的秘訣包含兩部分技術(shù)。

首先，基于人工智能的運(yùn)動(dòng)分析實(shí)時(shí)捕捉技術(shù)，通過(guò)視頻攝像機(jī)識(shí)別出演員，將信息傳遞給下一系統(tǒng)。第二個(gè)系統(tǒng)則由北京電影學(xué)院負(fù)責(zé)，通過(guò)實(shí)時(shí)交互引擎獲取信息，按照導(dǎo)演的美術(shù)創(chuàng)意需求，生成需要的效果，無(wú)延時(shí)地呈現(xiàn)在演員腳下。在觀眾看來(lái)就實(shí)現(xiàn)了腳下特效“如影隨形”的效果。

新京報(bào)：這一創(chuàng)意的來(lái)源是什么？

童雷：半年前，張藝謀導(dǎo)演有個(gè)初步的想法：能不能在地屏上實(shí)現(xiàn)冰面倒影的效果？我們接到需求后做了很多論證研究，從冰面倒影的物理性出發(fā)初步實(shí)現(xiàn)這一效果，但那時(shí)的算法比較初級(jí)，有一定延時(shí)，能承載的演員數(shù)量也有限。

在導(dǎo)演創(chuàng)意過(guò)程中，我們發(fā)現(xiàn)可能還有更多效果需求，于是做出了流光溢彩、極光、推散雪花、推散云霧等十幾種效果，把方案給導(dǎo)演，由他根據(jù)整體設(shè)計(jì)選擇相應(yīng)效果。這個(gè)過(guò)程中有非常多的磨合，不僅是科技的考量，而且是將科技作為手段展現(xiàn)藝術(shù)的形式。

這樣的效果不是靠先期制作或精準(zhǔn)排練就能實(shí)現(xiàn)的，完全依賴技術(shù)手段配合。演員可以任意自由發(fā)揮，發(fā)揮過(guò)程會(huì)影響顯示效果，顯示效果也會(huì)助推演員表演，這就是我們所說(shuō)的互動(dòng)。這種互動(dòng)恰恰體現(xiàn)了自然浪漫的情調(diào)，也非常符合導(dǎo)演的創(chuàng)意初衷。

無(wú)數(shù)次完善修正盡可能滿足創(chuàng)意需求

新京報(bào)：實(shí)時(shí)捕捉和交互顯示的技術(shù)難點(diǎn)在哪？

童雷：地面屏幕面積大、承載演員數(shù)量多、要求無(wú)延時(shí)的實(shí)時(shí)捕捉交互，這些技術(shù)背后本身就需要非常強(qiáng)大的算力和引擎支撐。

這些技術(shù)在各自領(lǐng)域可能已經(jīng)運(yùn)用非常成熟，例如捕捉技術(shù)用在運(yùn)動(dòng)員動(dòng)作捕捉分析、實(shí)時(shí)渲染在大型游戲里用得比較多，而我們這次的創(chuàng)意恰恰是把兩個(gè)技術(shù)完美結(jié)合在一起，形成從捕捉到識(shí)別到呈現(xiàn)渲染一條龍的鏈路，保證效果完美呈現(xiàn)。

我們也希望通過(guò)這個(gè)技術(shù)，實(shí)現(xiàn)不同于傳統(tǒng)的美術(shù)創(chuàng)意呈現(xiàn)，體現(xiàn)交互特性。目前的呈現(xiàn)經(jīng)歷了幾個(gè)月時(shí)間的完善修正。比如為了適合轉(zhuǎn)播的需求，地面屏幕雪花的顏色，都經(jīng)歷了好幾個(gè)版本的調(diào)整，而這種調(diào)整在過(guò)程中發(fā)生了無(wú)數(shù)次。

新京報(bào)：張藝謀導(dǎo)演對(duì)創(chuàng)意實(shí)現(xiàn)的要求非常高，其間你們經(jīng)歷了怎樣的磨合？

童雷：藝術(shù)創(chuàng)作領(lǐng)域的主觀性非常強(qiáng)，永遠(yuǎn)沒(méi)有完美一說(shuō)。我們只能盡可能發(fā)揮想象，把好的創(chuàng)意盡可能多地交給導(dǎo)演。這個(gè)過(guò)程中反饋修改意見(jiàn)是必然的，恰恰是不斷交流修改才能達(dá)到臻于完美的效果。

每次彩排結(jié)束后，導(dǎo)演會(huì)針對(duì)每個(gè)節(jié)目提建議。我們最開(kāi)心的時(shí)刻就是在會(huì)上沒(méi)有針對(duì)我們負(fù)責(zé)的環(huán)節(jié)提出建議和問(wèn)題。我們所追求的是盡可能地實(shí)現(xiàn)導(dǎo)演的創(chuàng)意，盡可能地打動(dòng)觀眾。

參與兩屆奧運(yùn)會(huì)，曾負(fù)責(zé)2008年焰火燃放

新京報(bào)：你也參與了2008年北京夏季奧運(yùn)會(huì)開(kāi)幕式，那時(shí)負(fù)責(zé)什么工作？?jī)蓪脢W運(yùn)會(huì)感受有何不同？

童雷：2008年我負(fù)責(zé)的是奧運(yùn)會(huì)開(kāi)幕式的煙火控制，跟蔡國(guó)強(qiáng)配合。

2008年“鳥(niǎo)巢”內(nèi)外焰火燃放由五六家單位聯(lián)合完成，每家單位控制方式和控制指令各不相同，這就需要一個(gè)總控中心協(xié)調(diào)各家，跟場(chǎng)內(nèi)演出、音樂(lè)和時(shí)間點(diǎn)準(zhǔn)確配合，將誤差控制在一兩幀之內(nèi)。按照這一需求，那年我做了一套煙火控制系統(tǒng)，協(xié)調(diào)各家焰火系統(tǒng)精準(zhǔn)燃放。

2008年，我還是個(gè)年輕小伙，一晃14年過(guò)去了，技術(shù)和表達(dá)方式都在進(jìn)步。這次冬奧會(huì)跟2008年夏季奧運(yùn)會(huì)在形式和風(fēng)格上有很大不同，對(duì)現(xiàn)場(chǎng)技術(shù)的需求，也是要求越來(lái)越高，在現(xiàn)有基礎(chǔ)上，我們也要做得比2008年更好。

新京報(bào)：北京電影學(xué)院很多師生參與到冬奧會(huì)中，他們主要在哪些崗位？

童雷：近200位學(xué)生擔(dān)任引導(dǎo)員、開(kāi)閉幕式演員；我所在的實(shí)時(shí)特效團(tuán)隊(duì)有8位師生；場(chǎng)內(nèi)還有一支負(fù)責(zé)開(kāi)閉幕式紀(jì)錄片拍攝團(tuán)隊(duì)，大概有八九個(gè)人也來(lái)自電影學(xué)院；媒體中心有做技術(shù)支持保障的師生。

我們所追求的是盡可能地實(shí)現(xiàn)導(dǎo)演的創(chuàng)意，盡可能地打動(dòng)觀眾。

——北京電影學(xué)院聲音學(xué)院院長(zhǎng)童雷

關(guān)鍵詞：