su一文读懂虚拟人:她会梦见电子羊吗?( 五 )


韩国艺术家金贤日(Hyeong-il Kim)创立的SUA项目正是以打造真实人类形象的虚拟偶像为目标。SUA由CG技术制作,在Unity引擎中实时渲染。虽然外形精度不及扫描真人模型后制作的效果,但也足够拟真。
如果使用最新款支持面部捕捉的iPhone,小姐姐会模仿你做出扭头、撅嘴、转动眼睛的动作,十分流畅。SUA拥有自己的Twitter,不定期更新自己的日常活动。金贤日正在“培养”SUA的各种才艺技能,让她“出道”后可以应对各种各样的场景任务,如模特、演员、歌手等。虚拟人SUA用iPhone 12 mini实时跟踪的效果
在数字影片中担任演员使用游戏引擎制作写实风格的影像短片已并非难事,但“虚拟演员”,也就是高质量的人形美术资产,在数量和质量上都不易达到影视制作的需求。在虚拟人制作逐步成熟后,这一问题得到了初步解决。
在2021年Epic官方及合作伙伴发起的短片竞赛中,科幻题材实时渲染短片《K.I.T》就使用了多个虚拟人作为主要演员,以精良制作斩获多个传统电影奖项。短片中“出演”的角色包括Renderpeople、3DPeople中的数字人物角色,及从Eisko官网下载的免费高保真虚拟人Demo——露易丝(Louise)。
作者布兰登·希尔(BrandonHill)是一位并就读于查普曼大学道奇电影与媒体艺术学院的学生。
su一文读懂虚拟人:她会梦见电子羊吗?

su一文读懂虚拟人:她会梦见电子羊吗?

上图:短片《K.I.T》中的露易丝下图:露易丝照片(左)及渲染后的虚拟形象(右)
重现已故的人还原已故的名人、亲人形象,虽存在一定伦理挑战,但也是很多人的真实需求。
韩国MBC电视台纪录片频道在2020年2月曾利用VR与虚拟人技术,让一位母亲与三年前因白血病去世的女儿实现“重逢”。母亲戴上VR眼镜后,可以通过触觉手套感知孩子的头发、握住女儿的手,在虚拟空间中与女儿共度生日。
她在“重新见到”女儿Nayeon时泣不成声,接受采访时表示,“可能这就是真实的天堂”。技术人员通过Nayeon生前的影像和对同龄孩子进行动作捕捉,合成了Nayeon的声音、动作和面部表情。台湾电视剧《想见你》中也设计了类似剧情。
su一文读懂虚拟人:她会梦见电子羊吗?

三寸天堂
电影《速度与激情7》拍摄中,主要演员之一保罗沃克意外去世。虚拟人特效技术复原了他本人形象,以特效完成了剩余镜头拍摄,并特意在片尾设计一段他驶上分岔路、与主角团及观众挥手道别的场景,让影迷们积郁的悲伤得以释放。
su一文读懂虚拟人:她会梦见电子羊吗?

再见,保罗
八、发展趋势:更自然、更跨界、更安全使虚拟人表现更自然,驱动方式更多样。
特别是面部表情、眼神、肌肉运动的细腻流畅,既需要更多的真实数据、更优质的算法,也需要生物学、图形学、影视业的跨界支持。躯体动作的加强也是未来方向,个性化的动作组合能彰显虚拟人迥异的性格,增加亲和力和可信度,这对虚拟主持、主播、客服等需要和直面用户的领域十分重要。
此外,从用遥感和按键来“操作”角色,到用实时动补、语音和文字带动角色,未来还需要更直观、适合每个人的驱动方式。
推动产学研多方合作,推进行业联盟建设。
如数字人类联盟Digital Human League(DHL for short)就是由多个高校、产业、行业专家共同成立,并建立了Wikihuman网络项目,提供来自 DHL 成员的博客文章、图文视频资料及联盟成员可以公开的虚拟人项目文件。
例如南加州大学ICT视觉与图形实验室就在项目中分享了2015年成果——虚拟人Emily的原始数据、shader步骤、参考图像和模型,使研究者能够跟进与实践。