数字孪生

芒果跨年创新:实时驱动,来场虚拟人的“真”跨年!

湖南卫视数字主持人小漾 5G高新视频多场景应用广电总局重点实验室与芒果幻视为此次跨年晚会虚拟人表演提供全流程实时驱动技术:包括实时动捕、实时面捕、实时灯控系统、AR 实时渲染等。

2022-2023 湖南卫视“时间向前·我们向上”跨年晚会震撼开播,这是湖南广电年度“阅兵”!所有部门严阵以待,力求交出最精彩的答卷!本次晚会舞台集合了青春感、科技感、潮流感与艺术感,在虚拟现实领域做了全新的视觉与技术尝试:湖南卫视数字主持人小漾与《制造浪漫》等数字人节目纷纷精彩亮相,本次跨年晚会不走老路, 大胆采用虚拟人实时驱动方式,实现新科技与新应用的创新蜕变。

湖南卫视数字主持人小漾 5G高新视频多场景应用广电总局重点实验室与芒果幻视为此次跨年晚会虚拟人表演提供全流程实时驱动技术:包括实时动捕、实时面捕、实时灯控系统、AR 实时渲染等。从接到任务到交付只要短短一个月时间5G 实验室与芒果幻视精英尽出,从模型绑定到灯光渲染到音视频,调集 20 余个工种通力配合。团队搭建了 270 ㎡的高精度动捕棚,多人实时动捕技术实现了多名虚拟人的实时交互,这也是《制造浪漫》两位表演者同台演绎互动的基础;幻视动捕工程师为采集更精准数据,减少演员体力消耗,特地改良制作了轻型头盔,增强了设备穿戴舒适度,保障了面部表情的更生动呈现。

动捕空间整体解决方案不仅仅是单一动捕技术的展示,同时还包含领先的视音频等高精尖技术。为了真正做到让数字人站在舞台上与各大演员同台竞技,此次为每个机位都单独配备了自研系统来渲染和播控虚拟人,能最大程度的保证每个机位的虚拟人渲染任务都是由一台服务器单独完成,在保证稳定性的情况下,将渲染精度提到了最高,更完美的体现了模型精度及光影特效。团队在直播数字人的高标准跟踪定位下,一比一还原了动捕区相对舞台区域,首次采用飞猫来做虚拟机位,攻克了机位的跟踪调试难度问题,实现了更为苛刻的跟踪精度要求。

数字人虚拟秀《制造浪漫》 时间紧任务重,这次跨年还要面临团队成员陆续感染的重大考验。有的人身体稍有好转立马带病上岗,有的组员高烧下坚守岗位,项目组成员再一次展现了广电人“吃得苦,霸得蛮“的犟蛮精气神! 跨年晚会虚拟人虚实交互的完美演绎,证明湖南广电在“文化和科技融合”的成果落地再一次走在全国前列,为推动技术与媒体的融合创新提供了鲜活的实践样本!“时间向前·我们向上”,广电人排难攻坚,超越自我的精气神点燃寒冬薪火,照亮 2023 年开篇!

关键词

24快报
JSON抓取失败