浙江卫视春季盛典直播中:艺人竟当场“变脸”?

     2018年浙江卫视春季盛典暨OPPO R15发布会热力进行中,舞台惊现人脸追踪投影。 这是该技术国内舞台首度亮相。
中间隐藏多少秘密?小编带你走进《体面》百变的脸。

     《体面》节目里,海豚海洋畅游、河流灌溉沙漠,影像与演员面部、动作、嘴形契合。 “在这场春季盛典中,我们为《霍元甲》、《不醉不会》、《王妃》、张靓颖热歌串烧等节目提供视觉设计, 每一个都凝聚了设计师们的心血。《体面》面部追踪投影更是一次全新尝试。”作为节目视觉总监,胡玥鹏 在后台仍心情激动。
     — 、 20天突击:几乎不可能完成的任务
     面部投影,顾名思义就是在人脸进行投影,通过计算机深度学习,人工智能识别出人的五官和轮廓,实时脸部追踪, 通过3D动画技术生成面部艺术效果,重新投射到人的脸上,形成与人脸完全贴合的“影像面具”。
这段表演中必须攻克的难题是:实现边唱歌边投影情况下精准捕捉演员面部点位,让影像在动起来时和嘴型、 不同角度的面部契合。
     首次通过算法识别和红外追踪人脸
     由于演唱要有表情动作,技术团队在国内首次通过算法识别,实现在运动、带表情动作的人脸上追踪投影, 并保证识别的精准度。