资料来源:科学技术日报
一家公司推出了数字美容博客,通过短视频收获了100万粉丝。新华社推出了数字记者,“ta”也是世界上第一位数字宇航员,引起了广泛关注。今天,虚拟数字人的概念很热,但必须创造真正现实、现实的数字人,需要解决的技术问题很多。
最近,“数字梅兰芳”大师再现项目启动仪式在北京梅兰芳大剧院举行。北京理工大学参与开发的全国第一部高精度京剧数码“梅兰芳双胞胎数码人”在仪式现场亮相。
这个项目以京剧大师梅兰芳老师26岁时的样子为原型再现。该项目由中央戏剧学院、北京理工大学共同发起,腾讯提供技术支持,得到“北京高校优秀青年科学家”计划的支持,并得到各部门和梅兰芳老师的家人及弟子的大力支持。
北京理工大学光电学院研究员翁东东对《科学技术日报》记者说,今后将继续进行模型实时升级,并在多个场景中应用落地,努力打造国内第一个真正意义上的实时互动的“京剧数码人”。(莎士比亚)(莎士比亚)。
扫描、分解、构建
注意做数码人的表情
虚拟数字人是存在于数字世界中的“人”,利用信息技术和人工智能技术对人的全身和肢体动作进行全方位数字化和可视化,最终使现实中的人在数字世界中准确模拟。(莎士比亚) (数字世界)。
成为虚拟数字人本身就是啃硬骨头。人类自然对人的脸敏感,所以虚拟数字人稍微做错一点就会觉得奇怪。
因此,虚拟数字人的一大考验是表情。
研究课题组年轻的时候找了一个长相和梅兰芳老师相似的演员,让他模仿梅老师的表情,然后利用广场采集技术收集实际演员毫米级精度的三维数据,计算光学,构建物理属性皮肤纹理,实现了对实际演员的高还原度重建。
“事实上,一个人的表情很难再现。我们要扫描演员肌肉的方向、脸上的皱纹等。”翁冬冬说。他们要把演员们做出的表情编码成数百个基本表情符号。比如,完全闭上左眼,左眼睁一半,完全闭上右眼,嘴角微微抬高……但是人们做表情的时候,脸上的很多部位都连接在一起。因此,首先要将扫描的表情分为单个表情符号,然后根据实际需要重新组合,形成新的表情。
得到这样的表情后,课题组要把演员的面部表情转移到数码梅兰芳老师的脸上。“京剧数码人,对眼神和表情的要求很高。”翁冬冬说。
由于无法再收集梅兰芳老师的实物三维数据源,在收集了大量梅老师的照片作为构建数字资产的参考后,研究小组邀请中央美术学院的老师和学生根据历史照片完成梅兰芳老师的实体肖像。技术组和雕刻组的反复磨合后,完成了以3D数字化为目标的实物雕塑数码人的制作。
接下来,要改善数字人的语音能力,改善数字人的实时语音交互功能,使数字人真正“活着”。(大卫亚设)。
消失的布料,实战的手艺
数字化也是一种结构性保护
困难的问题不仅仅在于技术。
这次,他们这个技术出身的研究人员真实地感受到了科学技术和传统艺术的冲突。"学京剧的人对传统非常敬畏,相当在意。"翁冬冬说。
梅兰芳老师服装的数字化颇为曲折。
"现在的布料和民国时期的布料不同."翁东东表示,为了打造近身的衣服质感,项目的另一位合作者、中央戏剧学院传统电视剧数字固定高科技中心主任宋振组通过各种关系找到民间收藏的民国保留本,进行了写实的服装材料模拟。
梅老师服装上使用的线叫金线,是用棉绳缠着金箔制成的。蒂姆被告知这个线现在不能做。因为工艺没有了,手艺失传了,当时的面和现在的面完全不同。
有这个问题的人还有冠军。球队为了再现京剧《穆桂英出征》中的第一名,找到了专门投球的师傅。但是师傅说,做这个东西没有图纸,手艺是口口相传的,可以自己领悟。(莎士比亚)。
这种“无法用语言表达的东西”也给数字扫描带来了困难。
即使在困难中,翁东东也更深刻地认识到这个项目的意义——。事实上,正在消失的东西正在数字化和保存。
“成为梅兰芳老师的双胞胎数码人不仅是技术实现的过程,也是科学技术和传统文化融合的过程。”翁东东说,只有亲自实践,才能遇到纸上谈兵时没有想到的问题。融合不是那么简单。需要双方的和谐,彼此的倾听和耐心。
目前最知名的数码人是虚拟偶像。主要采用AI变脸技术的部分数码人也在市场活动。翁东东说,从长远来看,三维化的数字资产的价值会更高。特别是圆宇宙,因为大自然必须以三维为基础,数字人是构成圆宇宙的重要基础要素。
“未来的数字人可以成为人机交互的界面,成为人工智能的入口。毕竟人还是更容易接受和“人”沟通的。”翁东东是这么说的。“但是,即使笑了一次真实的数字人,也一动不动,还有很长的路要走。”还是要冷静地看待数码人的热情。”他说。(莎士比亚。温斯顿。)