湖南卫视马年春晚小年夜圆满上演,李谷一在台上与30年前的自己合唱代表作《乡恋》的形式,与虚拟李谷一影像制作效果旋即引起巨大反响。守在现场和电视机前的数虎Digital Tiger制作团队成员们终于松了一口气。
对于很多人将这个跨时空演出与周杰伦演唱会上和虚拟邓丽君合唱作比较,数虎联合创始人刘峰表示,虽然制作上都是应用3D数字技术对真人进行立体复原,但二者还是有区别的,例如在呈现手法上,演唱会用的是虚拟投影,而春晚中用的是增强现实;再者春晚中是李谷一本人跟从前的自己同台表演,使得形象真实性与相似度的对比更加强烈,这种表演形式在全国乃至世界上都罕见,可以说创下了一个纪录。
高难3D复原重现1983年李谷一
李谷一是湖南的代表性人物之一,其经典作品《乡恋》是中国内地流行歌曲“开山之作”,她在春晚上演唱《乡恋》,成为该晚会文化、地域、年代情怀的体现。怎么让这个表演更好看、以更丰富的内涵引起观众共鸣?
动画制作过程
导演组决定采用真人与虚拟人物跨时空对唱的形式,并征得李谷一本人同意后通过3D复原技术还原呈现1983年春晚李谷一演唱《乡恋》时的形象,用增强现实技术让2014春晚与1983年央视春晚上的两个李谷一共同演唱。
4分钟与21600多分钟
当导演组找到数虎,已将近2013年12月。也就是说,留给团队制作与现场调试的时间,满打满算也只有一个多月,工作却异常繁重:包括前期资料收集、建模、材质、数据修复等。
真人3D复原对技术与制作要求很高,需要相关的模拟系统和足够多的数据、技术储备。而且其质量永远没有最好,只有更好。因此,为了让这4分钟的演出获得当前条件下的最佳效果,数虎团队再次与时间展开赛跑,连续一个多月没有假期,平均每天工作12小时以上,用21600 多分钟换来4分钟的最后呈现。“当别人在以各种丰富多彩的节目进行跨年倒计时,我们团队正在电脑前对着满布线格的三维模型跨年。”刘峰道。
肢体制作过程
与真人同台 制作质量要求陡增
这个演出制作难度在于虚拟影像要与李谷一本人同台,对比异常明显,而在3D复原中,造型、面部表情、衣服呈现质感等决定真实程度的细节,正是制作难点所在。如果把人的表情功能看作有一个“数据库”支持,那么虚拟人物的表情“数据库”肯定没有真人丰富,只能通过尽可能多且细致的数据整合来实现细微的动作与表情,使之与真人更接近。“没有捷径,只有一遍遍细化,时间越充足,出来的效果肯定越好。我们所能做到的便是充分利用每一秒,做到目前时间条件下的最好。”项目领队说。
压力山大:时间紧迫 不容出错
有限的制作时间要求团队成员必须每个环节做到精准:“只有一个月,期间任何一个失误都可能是致命的,没有重来的时间。” 前期资料的质量将决定后面每一个环节成败与最终的呈现效果。数虎团队进行了资料全方位收集,主要包括人物轮廓、表情特征、动作姿态等。
30年前演出的影像资料与照片的数量、质量和今天都不可同日而语。团队成员们任何资料都不放过,例如各个角度的全身照、特写、不同演出照、各种手势与表情照片等,征得李谷一同意后,还特地为她照了一系列多角度照片作为轮廓制作参考。
放手一搏:启用新技术实现布料模拟
参考照片与影像进行建模、材质、做造型、制作毛发层次,一切都有条不紊地进行。但通往成功的道路总会隐藏着各种困难,衣服材质以及形态便是制作中的一个坎,稍不注意,衣服便假得让人“跳戏”。
于是,他们向李谷一借来她珍藏已久的1983年春晚演出服,作为布料模拟的参考。进行测试时,大家发现好几种模拟效果都不如意。眼看时间步步紧逼,到底是坚持以前的做法,通过用大量时间进行制作修复,还是勇敢地启用新的方式?团队做出了快速决定——用新技术来进行这部分的制作。“虽然看似冒险,但这是我们综合时间等所有因素考虑后的决定,我们相信自己的专业水平,在那个时间点,我们还有条件进行这一搏。”刘峰回忆道。
动作捕捉:数据修复量巨大
成功的过程就是克服掉一个又一个困难。在进行骨骼绑定、建立表情控制系统后,如何让其动作、表情流畅自然,是制作团队亟需解决的又一问题。
时间紧迫,团队兵分几路进行工作,有人继续负责模型的精细制作与改进,有人进行与舞台角度的对比,还有一组进棚内进行动作捕捉。真人演员戴上动作捕捉装备进行模拟表演,从而收集动作数据,而后,团队专人对数据进行修复。数据修复质量将影响最终动作效果,而且修复量巨大,单数据修复这一块就用了将近两周的时间。
影像角度:一旦偏移便要重新渲染
将表情、衣服等制作难点解决,接下来就要不断完善,通过实际调试来发现问题并进行修改。舞台角度与灯光渲染是整个虚拟影像跟舞台配合最多的地方。“由于演出最终通过增强现实技术呈现,因此,我们的角度要与摄像机和实时追踪软件配合。摄像机在特定的角度范围内运动追踪台上演员,与此同时将影像和真人合在一起。一旦角度有偏差,就可能出现虚拟影像真人互相干扰等现象。所以,我们制作时还要将在晚会上用到的三个摄像机机位角度融入虚拟影像,通过严谨的计算使角度无误。”项目领队解释。
数虎图像联合创始人刘峰在湖南卫视春晚现场(左一)
虽然经过严谨的计算与制作,但谁都不敢保证效果一次过达到完美。因此,在演出前反复对虚拟影像与真人演员在台上的位置关系、比例等进行了配合调试。
虽然渲染输出过程中也遇到了大大小小的一些问题,但数虎团队依靠以往的经验与技术能力将之一一击破,最终不负重托。对于是否满意这次的制作效果,刘峰说:“相信如果时间更充足,最终的效果一定会更好。相信这个演出也让更多人感受到了数字技术与视觉技术的魅力。尤其是随着技术的不断进步,再结合好创意,以后我们的视觉世界一定会更加丰富有趣,这也是数虎的愿景。”