对话开幕式实时特效团队负责人:创意源自冰面倒影,实现世界首创

日期:02-05
演员如影随形

原标题:对话开幕式实时特效团队负责人:创意源自冰面倒影,实现世界首创

新京报快讯(记者马瑾倩刘鑫)刚刚结束的北京冬奥会开幕式上,铺满全场的LED地面屏幕显示交互技术震撼全场。

随着演出推进,场上演员脚下“盛开”出一朵朵晶莹洁白的雪花,出现“如影随形”的效果。北京电影学院声音学院院长、教授童雷介绍,这是通过将实时捕捉、交互呈现等多项技术融合实现的,近700名演员在超过一万平米的LED上实现无延时呈现,也实现了世界首创。

新京报对话北京电影学院声音学院院长、教授童雷。新京报记者刘鑫摄

新京报对话北京电影学院声音学院院长、教授童雷。新京报记者刘鑫摄

实时交互创意来源于冰面倒影

新京报:地面屏幕如何实现“如影随形”效果?

童雷:地面LED特效“如影随形”的秘诀包含两部分技术。

首先,基于人工智能的运动分析实时捕捉技术,通过视频摄像机识别出演员,将信息传递给下一系统。第二个系统则由电影学院来负责,通过实时交互引擎获取信息,按照导演的美术创意需求,生成需要的效果,无延时地呈现在演员脚下。在观众看来就实现了脚下特效“如影随形”的效果。

在这种文艺演出场合,近700名演员在超过一万平米的LED上实现无延时呈现,恐怕还是世界首创。

新京报:这一创意的灵感来源是什么?

童雷:大概半年前,张艺谋导演有一个初步的想法:能不能在地屏上实现冰面倒影的效果?我们接到需求后做了很多论证研究,尝试从冰面倒影的物理性出发初步实现这一效果,但那时候算法比较初级,存在一定的延时,能承载的演员数量也有限。

在导演创意过程中,我们发现可能还有更多的效果需求,于是做出了流光溢彩、极光、推散雪花、推散云雾等十几种效果,方案交给导演,由他根据整体设计采用。这个过程中有非常多的磨合,不仅有科技可行性方面的考量,还将把科技作为手段去展现艺术这一需求考虑在内。

这样的效果不是靠先期制作或精准排练就能实现的,完全依赖技术手段配合。演员可以任意自由发挥,发挥过程会影响显示效果,显示效果也会助推演员表演,这就是我们所谓的互动。这种互动恰恰体现了自然浪漫的情调,也非常符合导演的创意初衷。

无数次细节参数调整,尽可能满足导演创意需求

新京报:实时捕捉和交互显示的技术难点在哪?

童雷:地面屏幕面积大、承载演员数量多、要求无延时的实时捕捉交互,这些技术背后本身就需要非常强大的算力和引擎支撑。

这些技术在各自领域可能已经运用非常成熟,例如捕捉技术常用在运动员动作捕捉分析上,实时渲染常用在大型游戏场景中,而我们这次的创意恰恰是把两个技术完美结合在一起,形成从捕捉到识别到呈现渲染的“一条龙”链路,以保证效果完美呈现。

我们也希望通过这个技术,实现不同于传统的美术创意呈现,体现交互特性。目前呈现的效果经历了几个月时间的完善修正,举个例子,为了适合转播的需求,地面屏幕雪花的颜色,都经历了好几个版本的调整,而这种调整在整个排演过程中发生了无数次。

新京报:我们都知道张艺谋导演对自己创意实现的要求非常高,这个过程中你们经历了怎样的磨合?

童雷:我本身是搞电影的,在艺术创作领域的主观性非常强,永远没有完美一说,因此也从来不希望自己的想法会被别人完全没有异议地认同。我们只能尽可能发挥想象,把好的创意尽可能多地交给导演。在这个过程中反馈修改意见是必然的,恰恰是不断交流修正才能达到臻于完美的效果。

每次彩排结束后,导演会针对每个节目提出建议。我们最开心的时刻就是在整个讨论会上没有针对我们这个环节提出任何问题和建议,因为这说明我们的效果达到了他的预期。我们所追求的是尽可能地实现导演的创意,尽可能地打动观众。

参与两届奥运会,曾负责08年焰火燃放工作

新京报:2008年北京夏季奥运会开幕式你也参与其中,那时负责什么工作?两届奥运会感受有何不同?

童雷:2008年我负责的是整个奥运会开幕式的烟火控制,跟蔡国强老师配合。

2008年鸟巢内外焰火燃放由五六家单位联合完成,每家单位控制方式和控制指令各不相同,这就需要一个总控中心协调各家,跟场内演出、音乐和时间点准确配合,误差控制在一两帧之内。按照这一需求,那年我做了一套烟火控制系统,协调各家焰火系统精准燃放。

如果要说不一样,2008年的时候我还是个年轻的小伙子,一晃14年过去了,我们的技术和表达方式都在进步,对自己也有更高要求。这次冬奥会跟2008年夏季奥运会在形式和风格上有很大不同,对于我们现场技术的要求来说,肯定也是越来越高,另外就主观意愿上讲,我们也要争取做得比2008年更好。

新京报:我们注意到电影学院很多师生参与到冬奥会中,他们都在哪些岗位?

童雷:北京电影学院在全国、乃至世界都是知名的专业电影院校,不仅给国家电影行业培养了大量优秀的电影人才,在新中国成立70周年、建党百年等历次重大活动中,都有大量师生参与其中。

此次冬奥会开闭幕式我们依然派出了大量的师生参与。首先在场上,各代表团进场的引导员、开闭幕式节目演员就有将近200位学生参与其中;我所在的实时特效团队,由8位我校师生负责完成;场内还有一支负责开闭幕式纪录片拍摄的团队,有八九个人,也来自电影学院。其他场馆,例如在媒体中心做技术支持保障的师生也为数不少。学院整体上投入了大量人力物力,配合完善各项保障措施,尽心尽力为冬奥会的圆满举办保驾护航。

新京报记者马瑾倩刘鑫

开幕式精彩集锦

立春SPRING!鸟巢上空现中英文立春焰火

24节气倒计时太高级了!高清图收藏

二十四节气倒计时惊艳开场!这个创意张艺谋想了两年才想到

终于等到这一刻!开幕式现场升国旗奏国歌

感动!普通的中国人手手相传国旗

更多精彩内容,点击展开

有多少人这一幕看得想哭?景海鹏祁发宝传递国旗

张艺谋解读开幕式国旗入场:这个瞬间最直抵人心

开幕式上吹小号的小男孩是他!怎么被选上的?

五环破冰而出的瞬间!看到热血沸腾

细节满满!冰雪五环高清特写

冬奥开幕黄河之水天上来

北京冬奥会开幕式代表团入场仪式开始

浪漫!代表团的牌子是雪花中国结

特别的问候!入场式标兵口罩上有中英文欢迎字样

当锦绣山河遇上世界名曲

又被冬奥带货了!开幕式引导员的虎头帽萌炸了

北京冬奥开幕式引导员把国画穿身上

引导员戴的虎头帽一共有7种图案,您发现了吗?

小可爱现身!开幕式的冰墩墩会发光

荣幸+激动!朱定文任旗手率中国香港冬奥代表团亮相“鸟巢”

东道主中国队入场鸟巢再次响起歌唱祖国

开幕式唯一一段舞蹈表演 96名引导员“构建一朵雪花”

泪目!五星红旗和冰雪五环同框了

太美了!鸟巢上演燕山雪花大如席

放大看细节!大雪花是各国引导牌拼起来的

国际奥委会主席巴赫致辞用中文说虎年大吉

开幕!鸟巢上空现黄山迎客松

科技感十足!滑冰运动员滑出奥林匹克口号

虎头虎脑合唱团现场演唱《奥林匹克颂》

童声合唱开幕式主题歌《雪花》放飞和平鸽

最后惊喜!北京冬奥会点火瞬间

张艺谋:主火炬的点燃方式是“一叶知秋”

冬奥之火这样点燃!让张艺谋自豪的方案,险些被否……

新疆少女衣拉木江、赵嘉文点燃主火炬,他们是新一代冰雪健儿

除了东道主,开幕式上俄罗斯代表团入场时场内欢呼声也“超猛” 中俄发布联合声明
相关阅读: