重返二十岁 :从美颜到合成,AI换头术让好莱坞巨星演回小鲜肉
「因为这部电影,我对威尔·史密斯的脸可能比他妈妈还要熟悉,他的妈妈可能都没看过这么久的他。」谈及《双子杀手》中利用CGI(计算机生成图像)创造「鲜肉」版威尔史密斯时,李安曾调侃道。
感谢计算能力增长和数码摄影普及,数字方式可以制造出逼真的特技效果,不仅为电影制作带来革命性影响,也对整个娱乐产业产生深远影响。
乔布斯创办的先锋动画公司 Pixar 的 Patrick M.Hanrahan和Edwin E.Catmull 曾获2019年图灵奖,部分功绩正来自对计算机生成图像(CGI)所做的巨大贡献。
Edwin E. Catmull 与 Patrick M. Hanrahan 均为皮克斯动画工作室创始成员。
CGI最著名的应用是在科幻或其他奇幻场景中,其效果已让观众真假难辨,技术打造的奇异生物的原始人类表情也让人着迷。除此之外,人们也越来越多地使用CGI来节省时间、替代临时演员、甚至省去布景费用。
不过,打造逼真人类,视觉效果仍是最困难的地方。工作人员必须处理好面部表情的微妙灵敏度问题,稍许偏差会让角色表现僵硬,造成「恐怖谷」效应,分散观众注意力甚至对角色产生排斥。
在《本杰明·巴顿奇事》(The Curious Case of Benjamin Button)这部电影中(2008年奥斯卡最佳视觉效果奖),44岁的布拉德·皮特出演一位年龄「负增长」的怪人本杰明·巴顿,刚出生时就一头华发、满脸皱纹,然而随着岁月的流逝,他却日益青春焕发。这部投资近1.5亿美元的新片采用了大量面部特效技术,将其「从坟墓到摇篮」的一生装点得惟妙惟肖。
李安的2019年《双子杀手》创造了嫩版威尔史密斯(左)。年轻版的威尔史密斯因为看起来太逼真,网友评价这是一个「经得起凝视」的数字人。
如果说,在过去的十年里,许多电影都只会出现角色年轻版本的短暂闪现,那么,由于新技术的采用,主角的「鲜肉版」可以进行更丰富、更长时间也更逼真的表演。人工智能也将逐渐加强劳动密集型的特效生成过程,让电影制作人能够讲述更多新的故事类型。
一
从美颜到合成,打造逼真小「鲜肉」
人们一直希望在大荧幕上实现「返老还童」。一些特效公司,比如在漫威电影里经常出现的主流工作室Lola VFX 擅长通过2D工具,将年轻斑块(patches)追踪至年老面孔,实现美颜效果。《本杰明巴顿奇事》女主角正是通过这个办法完成荧幕整形。
不过在《双子杀手》中,威尔·史密斯在扮演杀手的过程中遇到了自己的年轻克隆人,特效技术处理更进一步:
不再简单修改图像让其看起来更年轻,而是干脆抹去图像,重新合成鲜肉版本,并将其放入镜头。
威尔·史密斯被全身扫描3次才造出了年轻版的「自己」
23岁的「年轻版威尔·史密斯」
这个过程更像是在创造一个现实世界,为此,必须弄清楚人脸如何工作、运作,以及它是如何随时间推移而变化。
为了建立模型,团队首先让威尔·史密斯表演各种面部表情。例如抬起上唇。这些动作可视为一个个基本单元,虽然单独可能不能构成任何表情和情感,但是组合起来或者重合部分,可以进行一些面部表情的识别。简言之,这些基本动作单元,都是面部动作编码系统(FACS)的某个要素。
他们花了大约一年的时间来调教这个「模型玩偶」,模拟出与真实史密斯年龄相当的「模型」,并以此为基础,克隆出鲜肉版的威尔·史密斯。
他们在先前经验上,以《霍比特人》中的咕噜动画处理为基础,也为威尔·史密斯配备了面部标记和头戴式摄像装置以记录表情,为动画师提供了极高质量的面部数据。
二
「软硬兼施」,如何正常地演一场戏
然而,对于著名导演马丁·斯科塞斯(Martin Scorsese)来说,头戴设备和面部标记(演员脸上的点)会破坏他在2019年史诗《爱尔兰人》中寻求的人类互动。
这部电影的主角罗伯特·德尼罗(Robert De Niro),阿尔·帕西诺(Al Pacino)和乔·佩西(Joe Pesci)都已经70多岁了,他们的角色跨越了几十年的许多年龄,因此,衰老的策略至关重要。
《爱尔兰人》中,特效打造的诸多更加年轻版本的罗伯特·德尼罗
从几年前开始,由乔治·卢卡斯(George Lucas)创立的特殊效果工作室工业光与魔术(ILM)的帕勃罗·海尔曼(Pablo Helman)和他的团队与斯科塞斯(Scorsese)合作,开发出更少干扰的创建所需图像方法。
为了捕捉表演,他们打造了一个庞大设备。其中,普通摄像机的侧面是两个红外摄像机以及相关红外灯,提供同步高质量立体信息(既不需要可见的面部标记,也不需要电影制片人所需的照明改变)。
不过,设备的尺寸大小和重量也带来了一些挑战。例如,无法采用流行的手持Steadicam镜头。此外,尽管红外光不会干扰主摄像头,但红外摄像头对香烟烟雾很敏感,无法透过老式汽车挡风玻璃看到。
三台摄像机组成的「三头怪兽」
开发硬件的同时,工业光魔团队开发了一个新的软件FLUX,在数据采集完后,进行手动减龄。除了从当前演员那里捕获FACS之外,该团队还从他们过去数十年来的表演中获取了大量图像,从而使他们可以选择电影中每一年的面部模型。
不过,他们并没有重现《出租车司机》(1976)或《Goodfellas》(1990)中德尼罗外表,而是力图创造出他在《爱尔兰人》角色中的人物版本。而且,FLUX软件没有根据德尼罗的面部动作来制作人偶,而是对捕获的表演和照明数据进行变形以创建新图像。
结果是令人信服的衰老角色,演员互动非常逼真。
事实上,要支持这个时代的顶尖演员,就需要支持他们的表演过程,而不是创造一种技术让他们的表演打折扣。这种侵入性较小的技术,让更多的角色人物充分表现,成为可能。
三
辉煌背后的AI
与那些凭借特效而获得成功的超级英雄电影不同,像《爱尔兰人》这样的作品,其成功恰恰在于让观众忘记技术特效,这不仅对硬件和软件创新提出了极高要求,实现成本也价格不菲(据报道预算为1.6亿美元)。
有些人富有创造力,他们考虑设计、照明以及如何讲述故事,但是,需要有将所有这些付诸实现的人。无论是《双子杀手》还是《爱尔兰人》,都离不开技术人员和艺术家之间的合作,决定项目是否成功的要素是如何协作。
例如,基于共同努力,有的团队改进了「面部求解器」,它可以根据基本动作单位来表征捕获的面部标记和其他特征位置。尽管可能有不同的方法来分解各种训练动作,但是,他们使用深度学习来确保其描述与动画师对这些动作的思考方式相互匹配。通过这类训练,求解器可以针对镜头的每一帧确定哪些肌肉正被激活。
将AI应用于视觉效果分析,是相对较新的努力,具有巨大的潜力。利用计算机的力量来教它模拟现实,无论是创造表演、合成人物还是某个环境,对创造越来越可信的幻觉而言,都大有裨益。
四
死而复生
不过,在演员从未扮演过的角色中创造逼形象,也引发了具有挑战性的道德问题。
比如,随着深度学习的发展,使用DeepFake就可以很容易的实现基于类似Warp的Face Swap,这种技术以及被用于让某些政客「凭空」说出一些从未讲过的话,或者让演员出现在某些情色场面。
幸运的是,这样的「深度赝品」不太可能有好莱坞那样的资源和演员进行合作,制作出真正令人信服的赝品,尽管它们已经足够好,足以制造麻烦。
另一个担心是,让那些已经死去、或者不愿意出山的演员再现天日。例如,2016年,「星球大战故事」侠盗一号(Rogue One)包括1994年去世的彼得·库兴(Peter Cushing)短暂但有争议的出场。迄今为止,最雄心勃勃的动画改编是詹姆斯·迪恩(James Dean)于1955年去世,却「计划」在今年下半年上映的电影《Finding Jack》中担任角色。
尽管电影制片人获得了在这些电影中使用演员肖像的法律许可,一些评论员仍然担心,回收过往演员会让当前演员更难找到饭碗。
具有讽刺意味的是,尼德罗最具突破性的角色之一正是「教父(二)」中的年轻的Vito Corleone,借助当今的科技,他可能会被降级为年事已高的马龙·白兰度(扮演「教父」一角)的替身。
精彩推送
- 励普教育:2021年注册安全工程师纸质证书已印制 含金量将提升!
- 《幻塔》公测首月新增用户破千万 完美世界游戏转型初见成效
- 业界:拥抱数字变革 推动经济高质量发展
- 超200个线下消费场景上线消费补贴 数字人民币助力春节线下消费复苏
- 云南高速公路里程突破1万公里
- 台州路桥发行浙江首单知识产权证券化产品
- 财政部、交通部:给予国家公交都市建设示范城市500万元/城/年奖励
- 中国“宝藏”产业带里的好年货
- 百度大数据:虎年十大云上过年方式 “网购年货”位居首位
- 统计局:2021年我国R&D经费为2.79万亿 与GDP之比达2.44%
- 六部门:提高人民币结算对贸易投资发展的支持作用
- 2021年我国R&D经费为2.79万亿 与GDP之比达2.44%
- 国家知识产权局:逐步减少对专利授权的各类财政性资助
- 青岛43个项目入选山东省重大项目名单
- 惠企利民!2021年全年新增减税降费约1.1万亿元
- 商务部等6部门联合印发《关于高质量实施RCEP的指导意见》正式公布
- 商务部:建议企业尽快熟悉RCEP各国关税优惠承诺
- 北京专报丨国税总局: 2021年支持小微企业发展税收优惠政策新增减税2951亿元
- 北京专报丨国税总局:2021全年新增减税降费约1.1万亿元
- 北京专报丨国税总局公布2021年减税降费十组亮点数据
- 企业未来竞争靠什么?三位企业家提到了同一个关键词
- 山东今年地炼产能要再退740万吨 委员为地炼企业转型支招
- 扮靓“菜篮子”服务“大民生”
- 商务部等六部门印发关于高质量实施RCEP指导意见
- 广汽集团冯兴亚:建议延续新能源汽车综合型补贴政策至2025年
- 税务总局:2021年100项便民办税缴费措施已全部落实落地
- 央行8次操作投放1.7万亿元 机构预计市场情绪将迎来修复
- 商务部:有信心实现外贸开门稳 保持全年运行在合理区间
- 纺织服装行业周报
- 食品饮料行业周报:疫情虽暂干扰 调整已企稳 价值布局时
- 医疗服务行业点评:医疗服务政策支持加码 社会化办医边际放松
- 游戏行业数据周报:关注上周多款上线新游表现
- 申能集团、上海电气成立申电绿电科技公司 注册资本1亿元
- 申能集团、上海电气成立申电绿电科技公司
- 国家税务总局:有关地区税务部门今日还将曝光5起涉税违法案件
- 银保监会:防范模型和算法风险 模型管理核心环节要自主掌控
- 工信部:引导产业和企业正确认识RCEP高标准开放下带来的竞争
- 商务部:建议企业尽快熟悉RCEP各国关税优惠承诺 扩大优势产品出口和优质商品进口
- 商务部:建议企业吃透用好原产地累积规则 深度参与区域产业链供应链
- 海关总署:下一步将开放RCEP项下输韩国、马来西亚原产地证书自助打印
- 商务部答上证报记者问:各地方要以高质量实施RCEP为契机 系统谋划扩大对外开放
- 毕马威最新报告:大多数TMT企业未充分利用数据带来的机遇
- 华微电子任命孙铖为新一任董事会秘书
- 风口上的预制菜:资本市场追逐的新星
- 中国冰雪产业观察丨冰雪装备“中国制造”吹响“突围”号角
- 质量问题频发、以价换量 路虎押宝电气化欲走出泥淖
- 快递企业如何布局无人机?仍处于摸索阶段
- 科达自控5G矿用无线通信系统安全标志证书实现三大运营商全覆盖
- “证大文化非法吸收公众存款案”最新进展:已追缴现金18.5亿余元
- 医药行业月报:2021年回顾及2022年展望
- “宁新”聚力 一路相“赔”——新华保险宁夏分公司发布2021年度理赔服务年报
- 增资获批复 中诚信托资本金增至48.5亿元
- 数字人民币再拓新场景!美团线下全场景数币支付可领消费补贴
- 深铁建材与5家央企签订大湾区城际铁路工程项目物资联合集采协议
- 国家税务总局:继续扩大推送减税降费红利账单试点范围
- 迟福林:合力建设全球最大自由贸易区
- 银保监会明确2022年工作重点
- 金融风险报告2021:宽松政策对冲经济下行的效果有待观察
- 社论:加大税收对收入分配的调节作用
- 国家中医药管理局与柬埔寨卫生部签署合作协议
- 香港破产程序首次获得内地法院认可
- 多地重大项目集中开工 年内投资总额逾4.2万亿元
- “地方两会”绘制稳增长“施工图” 资本市场需进一步促进投融资协同发展
- “氢”情助力“绿色冬奥” 氢能产业化发展有望提速
- 境内美元流动性充裕“撞上”刚性结汇 人民币汇率节前强势连连
- 降准、结构性降息接连落地之后 货币政策工具箱空间还有多大
- 财政部将实施更大力度组合式减税降费
- 商务部拟实施四项行动提高外贸竞争力
- 多地试水检验试剂集采:为何大范围进行带量采购难?
- 2021年广东省全社会用电量同比暴涨13.58%
- 官宣!首破3万亿 深圳GDP超首尔 挑战世界前十
- 私募大佬遇“李鬼” 这次骗到美国去了!但斌辟谣 拿到0元年终奖
- 天津:做好服务 稳就业促发展
- 六部门联袂畅通优质涉农企业直接融资渠道 北交所农林牧渔“后备军”亟需扩容
- 湖北:第二批新组建省属国企今日揭牌
- 支付备付金突破2万亿 第三方支付行业前景可期
- 北京证监局:2022年将聚焦退市新规 杜绝会计调节规避退市
- 江苏江阴科技镇长团:赋能产业转型升级
- 先进制造引领“世界工厂”东莞突围升级
- 商务部:贡献率达65.4% 消费重新成为经济增长第一拉动力
- 保障性租赁住房土地规划细则公布 明确户型朝向、日照时间、容积率等标准
- 养老金体系将向零售为中心转变 险企如何打通“老有所养”最后一公里?
- 3天可赚12天利息!春节理财最佳操作攻略来了
- 珠江啤酒王志斌:以产业升级推动“双主业”高质量发展
- 中国银行取消个人借记卡年费和小额账户管理费
- 3,000,000,000,000+!深圳GDP站上新台阶 图说成绩背后的上市公司力量
- 钱大妈、美菜网、叮咚买菜 社区生鲜接连败北 2022年投资人的第一个难题来了?
- 六方面入手!财政部明确2022年积极财政政策“路线图”
- 山东玻纤:数字化智能化赋能 实现高质量发展
- 487项 内蒙古机场集团“五小”创新结硕果
- 财政部答一财:对专项债券项目实行穿透式监测
- 首个数字人民币疫后复工专项补贴在西安落地
- HPE全球副总裁、中国区董事总经理朱海翔:将高质量可持续发展作为系统性工程来考量
- 南昌交出2021年“经济答卷”:GDP迈上六千亿新台阶
- 补链成群 巴南一季度集中签约项目24个总投资238亿元
- 人行南宁中心支行:2021年末广西本外币存款余额3.69万亿元 同比增长6.39%
- 2022年春节档新片预售票房破2亿元
- 工信部调整享受车船税优惠的节能、新能源汽车产品技术要求
- 湖北南漳:提交亮丽答卷 开启新年新篇
- 有“亿”点犀利!绿色石化成为湛江首个超千亿产业集群