上海

这所高校上线了虚拟主播,上海交大的新闻直播间来了位“虚拟数字人”

文汇   储舒婷   2023-12-11 10:25:06

undefined

虚拟数字人新闻主播

12月8日,上海交通大学官方视频号里,一位站姿端正、表情丰富、形态自然的新闻主播正在清晰、流畅地现场直播。如果不加提示,观众不一定能看出,这次直播与以往不同,这位主播不是一个“真人”,而是一位“虚拟人”。

undefined

真人与数字人交互

从新闻画面来看,这位主播穿着得体、肢体动作和面部表情都显得非常自然,播报新闻时声音清新流畅,显示出专业主播的风采,无论口唇动作、面部表情还是肢体姿态,都像极了真人。比真人更胜一筹的是,这位虚拟人主播不会读错(只要不输入错误信息)、无需休息、可以满足24小时不间断的新闻播报需求,甚至,还能够根据观众的反馈进行调整迭代。

这位由学校自主策划、自主研发和训练、集多种人工智能生成技术打造而成的“虚拟主播”,在上海交通大学官方视频号、抖音、b站等融媒体平台首次试水后,将持续应用于学校的新闻发布、要闻播报、精品课程、活动宣传等版块,以人工智能技术赋能融媒体建设,打造教育传播新范式。

这是交大融媒体中心首次尝试以虚拟数字人播报新闻、融合宣传,是上海交通大学推动高校科研成果落地转化、打造教育传播新范式的生动案例。

本项目由上海交通大学融媒体中心策划和统筹,依托上海交通大学电子信息与电气工程学院电子工程系图像通信与网络工程研究所Medialab实验室宋利教授团队进行开发,从数字人主播数据采集到数字人的模型渲染和视频合成均由自主设计实现。团队深耕媒体智能信号处理、媒体通信与计算系统领域多年,在视频编码通信、视频AI增强和AIGC视频生成等领域取得多项技术突破与成就。值得一提的是,本次推出的虚拟数字人主播形象也是来自宋利团队的硕士研究生。

今年,AIGC的强势崛起和类ChatGPT语言大模型的问世,让数字人再次成为了热门话题。虚拟数字人是指以数字形式存在于数字空间中,通过深度学习、语音合成、计算机图形学、动作捕捉、图形渲染等聚合科技创新,具有多重人类特征的虚拟人物。虚拟数字主播结合深度学习、数字人渲染等技术,可以呈现出灵动逼真的交互表现,语言、动作均与真人无异。

undefined

宋利 团队 自主设计 数字人主播

宋利扎根多媒体技术领域二十余年,见证了多媒体技术从H.264时代发展至如今的深度学习时代。关于此次推出“交大数字新闻主播”,他表示,未来将继续依托团队长期积累的人工智能技术,让科技创新成果赋能学校融媒体建设与教育传播工作。谈到多媒体技术的未来,宋利认为,元宇宙、AI技术的诞生,使创造虚拟形象成为现实,用户还可以和虚拟形象进行互动,即虚实融合、虚实相生,极大地拓宽多媒体的维度。

undefined

虚拟数字人在教育领域的应用场景也非常广阔。除了虚拟主播播报高校新闻动态,讲好校园故事以外,数字人可以为学生提供个性化、互动式的学习体验。例如,打造虚拟数字讲师,创设AI课程场景。让虚拟数字形象得以和数字教学内容、场景等深度融合,突破讲师个体资源的传统局限性,提升生产及教学效率,扩大优质教育资源的覆盖范围。

不过,数字虚拟人的技术应用仍处于起步阶段,体系标准和安全伦理方面的缺口仍需填补,相关法律法规、伦理规范也尚待完善。如何确保数字人的使用和发展符合人类的利益和价值观,是一个值得关注的议题。

目前,“交大数字主播”2.0版本迭代的相关工作正在紧锣密鼓地开展中,未来有望进一步完善数字主播形象、提升播报内容的丰富性与播报方式的交互性,不断打磨交大数字主播的IP形象,持续向社会各界传递学校的信息。


图片来源:上海交通大学供图

责任编辑: 陆芸

2023年上海市民终身学习人文行走网上学习平台