她？很“灵”！变身“挑战杯·元宇宙”第一位女主持人！

建立虚拟数字人面部模型

为了让“灵”的表情更灵动，微笑更甜美自然，团队使用基于分片面部基模型的重投射误差优化算法，优化捕捉人脸的三维空间点坐标，并使用Blendshape+骨骼的驱动形式，有效提高了“灵”面部模型数据的精度。

真人演绎播报动作

为了让“灵”拥有和专业主持人一样的手势动作，团队聘请了主持人在动作捕捉室中穿戴动捕设备进行播报动作的真人演绎，并通过光学标记点反射得到相应骨架的位移，使用OptiTrack动作捕捉系统采集专业主持人的动作，搭建主持动作库，最大限度的还原专业主持人的播报动作。

为了让“灵”的语音与表情同步，具备普通人说话的流畅程度，团队使用了AUDIO2FACE服务，保证了在音频源输入后，能生成不同的面部动画和对话口型。同时，团队不断调整优化“灵”面部肌肉的灵活程度、总体情感等，再结合Text to Speech技术，自由调节语速及语调并生成不同风格的语音，让“灵”可以胜任更多的应用场景。

为了让“灵”成功成为全国决赛项目路演答辩直播的主持人，团队使用了虚幻引擎，将预制好的主持播报身体动作库、生成的面部动作库以及语音库结合，最终合成了挑战杯虚拟播报视频。

“灵”作为语义、语音、视觉

三大AI技术融合的结晶

代表着未来人机交互的新范式

也是未来元宇宙世界

沟通真实与虚拟的关键

从数字参赛者

到元宇宙世界

北理工在办赛过程中

惊喜不断

多“元宇宙”，“出圈”传播

来自全国高校的

参赛师生和社会观众

纷纷进入元宇宙世界

体验虚拟世界的乐趣

登录人次已突破10万

“挑战杯·元宇宙”后台登录数据

内容“破屏”，获得广泛认可

交流“破壁”，赢得大众点赞

传播“破圈”，取得良好效果

从数字人的制作

到元宇宙的打造

一项项亮眼成果的背后

是北京理工大学

突出的创新创业能力

和浓郁的创新创业氛围

北理工师生发挥技术优势

积极运用先进数字化技术

彰显数字化办赛、创新化办赛特色

线上办赛精彩不断

期待线下相聚在北理工校园

共襄一场“精彩、务实、永不落幕”

的创新创业盛会！

出品：党委宣传部

素材：校团委、光电学院、往期推送、各媒体

编辑：崔雨涵、史桠彬、陈俊雅

审核：蔺伟、刘晓俏