“手语播报数字人”上岗本文转自：北京日报“数字人

本文转自：北京日报

文章图片

文章图片

“数字人（左下角）”在《北京您早》节目投入应用。
本报讯（采访人员孙奇茹）为听障人士打造的“冬奥手语播报数字人”近日已在北京卫视上岗。采访人员昨天获悉，该数字人采用我国首个超大规模智能信息模型和虚拟数字人技术，由市科委、中关村管委会支持，智谱AI、凌云光和北京广播电视台联合打造。技术团队透露，后期将推动该数字人在全国10大电视台和机场、银行等场景的应用试点推广，为残疾人平等参与社会生活创造无障碍环境，让科技更有温度。
电视屏幕中，新闻主播正在进行自由式滑雪的赛事新闻播报，而在屏幕一角，一名逼真的虚拟女性形象数字人用手语流畅地将相应内容实时播报给屏幕前的听障观众。冬奥手语播报数字人已在北京卫视的新闻节目《北京您早》中正式投用，参与冬奥赛事新闻播报。
打造手语数字人，首先要让计算机能够模仿听障人士的大脑。与新闻口语播报相比，手语播报需要在口语播报内容的基础上，进行语序调整与精简。另外，手语比口语慢得多的播报速度，也对手语数字人提出了挑战。
冬奥手语播报数字人项目技术负责人杜冀中说：“冬奥手语播报数字人”系统以超大规模预训练模型为核心技术，将新闻播报语音实时转换相对精简的手语文字，并翻译为符合手语习惯的语序。为实现高精度、高自然度的人物形象和手语动作姿态，研发团队自主搭建了能够采集手语老师肢体动作、表情、手指的多模态同步采集系统，将相关数据汇集到后台，供数字人进行学习。
【“手语播报数字人”上岗】由于当前国内缺少较完善的手语语料数据，研发人员在北京市残疾人联合会和市残联聋人协会的支持下，邀请40余位聋人老师及手语专家进行手语文本转写和技术指导，并进行大范围听障群体评测，最终构建了符合国家通用手语规范的国内最大规模多模态手语语料库，词汇及语句总规模超10万。