您需要 登录 才可以下载或查看,没有账号?注册
x
来源 CG世界 “ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”中国很有影响力影视特效CG动画领域自媒体
大家平时看国外引进电影时,看原音的是不是感觉很别扭?一边看字幕一边看演员表演,有时候会错过很多细节。但现在出来个技术可以解决这个问题了。
我们要从一部波兰电影说起。电影名字叫《冠军》,是一部非常小众电影。是的,大家都没看过(推荐大家看下,网评挺好)。不过没关系,我们这里不用关心他的剧情,而是他的技术。
这部电影是由Maciej Barczewski执导,讲述了战前拳击冠军Tadeusz Pietrzykowski的真实故事。
电影拍摄于2020年1月。最初预定于2020年10月发行,但由于波兰新冠病毒原因一直推迟到了2021年3月。发布后反响还不错,后来一个叫Adapt Entertainment公司买下了在英国市场发行电影的版权。
Adapt的老板就不想让观众一边看字幕一边看电影,在过去几年里一直追求“扩大内容的全球覆盖范围,让观众能够体验到增强的讲故事替代方案,从而保持原项目的完整性,而无需配音或字幕。”而且他也算是个技术迷,就琢磨着想用视觉效果或神经渲染来转换电影里演员的说话表情。
正好就着这个电影在英国发行的机会,Adapt组建了一个团队,这个团队成员实力那是相当厉害,其中有Pinscreen Technology,世界神经渲染专家Hao Li博士,还有大名鼎鼎的数字人专家Mike Seymour博士。这一帮顶尖人才共同开发了一个专有的称为Plato的流程,这个过程是一种包含机器学习和神经渲染的数字技术,用于对话和面部恢复。
为了重新录制这位演员的面部表演,把剧中的演员邀请到了欧洲进行重新的录音。在他们配音时,有五台摄像机从不同角度拍摄演员的面部表情。
在集成到制作流程中的Plato流程帮助下,Adapt成功地将新的对话放到了场景中。尽管电影中有各种面部和相机角度,但这项技术仍然可以实现无缝的替换原对话。叨咕半天还没看效果,来看看前后对比。
Plato过程是用于对话和面部恢复的专业神经渲染管线。
它的独特之处在于三个方面: 首先,Plato管线的设计围绕着保持演员的表演,用忠实原表演的高保真新版本取代他们原来的语言表演。
其次,它是一个制作流水线,所以与一些庞杂的测试和演示不同,它只需要有限的培训数据。它只使用成品胶片,且在拍摄原版电影时,不需要做任何特殊的工作。不需要特殊的灯光、面部标记或复杂的侵占性技术,它可以与所有不同类型的戏剧灯光、头部和摄像机角度衔接,尤其是侧面头部角度,即使演员化了妆也是如此。
第三,它在体积上起作用。有些过程需要几十个小时才能完成。这对于一个广告或TikTok作品来说是可行的,但对于一部有成百上千个镜头的故事片来说有难度。
此外这个技术相对灵活可控,因为导演们经常会提出一些调整,所以它是一个可控制的流程。
目前测试得到的结果是可以应用到白天和晚上的镜头,正面和侧面的镜头,包括女性、男性或儿童,甚至动作序列。这将使人工渲染从定制的手工处理转移到工业级应用,从而为制片人提供了一系列全新的选择,用于优质电影和电视节目的发行。
这种以真实的方式重新塑造演员面孔的方式,可以极大地拓展外国电影的市场。在像《冠军》这样感情色彩强烈的电影中,观众不得不将目光从演员的表演转移到字幕上,这会让观众感到很难受,就像我开篇讲的,看字幕有时候会忽略很多电影中的剧情细节。此外,传统的过度渲染会破坏表演的真实性和保真度,经常会使原有的基调和节奏与新的叙事语言发生冲突。
Adapt已经在Netflix的其他电影中为小场景重演拍摄了精选镜头,但《冠军》是第一部使用神经渲染技术进行完全“改编”的故事片。
所以,以后看电影不再需要字幕了,当然了还得看引进公司愿不愿意花钱来做这个事,还有个事儿就是,老外不会说中文啊,有这个技术也是白扯。好吧,以上就当我白讲了!
全文完
|