数字虚拟人并不是只在直播领域有应用，数字人技术和各行各业进行结合，会不断创新出各式各样的虚拟数字人，传统京剧文化领域也不例外。

给观众拜年，不是“梅兰芳孪生数字人”第一次登台。2021年，北京梅兰芳大剧院剧场，随着一束光照向舞台，京剧大师梅兰芳熟悉的声音响起，穿着大褂的他缓缓走向观众，令世人仿佛时光穿越。

复现京剧大师梅兰芳，是中央戏剧学院、北京理工大学共同发起的“数字梅兰芳”项目成果。在北京高校“卓青计划”支持下，该项目通过高逼真实时数字人技术，对京剧大师梅兰芳先生进行复现，形成在外貌、形体、语音、表演等各方面都接近真人的“梅兰芳孪生数字人”。项目团队希望借此为传承传统文化插上现代科技这双“隐形的翅膀”。

项目负责人、中央戏剧学院教授、数字戏剧系副主任宋震从小是个戏迷，4岁开始跟着大人到剧场里听京剧。2016年，他开展了一项针对28个戏曲院团的调研，发现有很多濒危失传的剧目急需抢救。“我希望能做点什么，让我喜欢的京剧重获生命力。”

“梅兰芳孪生数字人”（左）与梅兰芳照片对比图

宋震找到了北京理工大学研究员翁冬冬，商讨制作一款真正意义上的“数字京剧人”，复现梅兰芳的“唱念做打”以及神韵风采，这样不管时代如何变迁，梅派表演艺术都能原汁原味地保存下来，还能进一步实现交互表演，传播京剧艺术。

尽管国内外已有不少数字人技术经验，但由于缺乏高清摄影，生活影像又少，表演视频更是少得可怜，想要逼真还原已故历史人物，难上加难。

团队翻检了梅兰芳老照片，又结合他的人生经历，最终敲定将26岁的梅兰芳作为原型。“那时的梅兰芳处于艺术黄金期，那一年，他第一次走出国门，将京剧带到世界舞台，引发轰动。”宋震说。

“我们首先需要通过照片采集梅先生的三维数据，然后邀请中央美术学院教授张伟以照片为依据，制作1︰1无表情头部雕塑；再用高精度激光扫描仪扫描雕塑，由此获得梅兰芳基本面部结构，生成三维数字模型。”翁冬冬说。

这样的数字模型还没有表情，自然也无法模拟京剧大师在舞台上的眼波流转。正如东晋著名画家顾恺之所说，“传神写照，正在阿堵中”，眼睛的重要性不言而喻。梅兰芳在日本演出期间，东京《朝日新闻》评价“他的眼睛价值千金，他的媚态都是从这里产生的”，这让团队遇到了空前的困难。

“艺术家眼神的文化表达是复现的重点，我们想了很多办法，最终采用Vicon光学运动捕捉系统对梅派表演艺术家表演时的面部表情、动作等数据进行采集，然后以梅派传承人作为‘中之人’（指操纵虚拟主播进行直播的人）驱动人物模型表情、身形体态的数字化重建。”实验室中央搭建起庞大的球形设备，安装着36台相机和162组可控LED灯组成，通过毫米级的精度捕捉，将梅派传承人的一颦一笑记录下来。

“梅兰芳孪生数字人’是多种技术综合运用的成果，其中就包括人工智能技术。”宋震举了一个例子，《穆桂英挂帅》是梅兰芳60多岁时演出的戏，如何让26岁的数字“梅先生”进行表演呢？为了让“梅兰芳孪生数字人”表演更多剧目，团队通过人工智能技术对梅兰芳二三十岁的唱腔数据进行分析处理，再把相关数据的基本特征与梅派传人的声音进行整合，还原梅兰芳不同时期的语音和润腔，为日后的交互表演奠定了声音基础。

目前，团队先后攻克了高逼真表情光场采集系统、皮肤纹理写实渲染等关键技术，完成了人物皮肤、表情、动作、便装服饰、戏服盔头等高精度数字资产的生产，在传统戏曲数字化方面探索了新路径。