《北京您早》节目中冬奥手语播报数字人全新“上岗”

中新网北京2月9日电 (徐静)北京2022年冬奥会和冬残奥会不仅是世界各国运动员的体育盛会,更是科技赋能的“智慧”赛事。为了让更多人感受到北京冬奥会的魅力,近日,在北京卫视《北京早晨》节目中,冬奥手语为数字人播报了新的“工作”,带来了亲切自然的冬奥手语。听障人士的语言。广播服务。

手语广播数字人的技术优势是什么?如何平衡数字人类手语广播的速度和准确性?冬奥会之后,这项技术可以应用于哪些场景?9日,记者走进了冬奥会手语转播数字人研发公司之一的智普AI。

领先一步:手语广播更快

第二次全国残疾人抽样调查数据显示,中国有超过2700万残疾听力障碍者。北京冬奥会是中国历史上举办的第一届冬奥会,听障人士也期待深入了解赛事信息,全面体验冬奥会。

2月5日,冬奥数字人手语助听手语转播在北京卫视正式亮相,采用超大规模智能信息模型和虚拟数字人技术,带来专业的手语翻译和转播。冬奥会的消息给观众。

图为冬奥会手语转播数字人。中新社记者 贾天勇 摄

智普AI合伙人、高级副总裁左家平介绍,冬奥手语转播数字人系统以超大规模预训练模型为核心技术,自主构建多模态肢体动作、表情,和手指同步采集系统,使用跨模态。拟人生成算法、超高精度拟真数字人等行业领先技术,实现冬奥期间专业手语翻译和赛事新闻播报。

与传统的人工手语播报相比,数字人工播报有哪些优势?智普AI首席技术官张鹏表示,数字人手语播报的最大优势在于它是一个自动化系统,不需要太多人工干预,可以节省大量人力。同时,系统的运行速度接近实时,在呈现手语播音效果时比传统的人工播音更快。

“学”深:语料更丰富

2018年,《国家通用手语通用词汇》和《国家通用盲文程序》作为语言规范正式发布。

为推广普及全国通用手语,冬奥手语转播数字人系统已完成《全国通用手语词典》收录的8214种常用手语的采集录制,语法依据对听障人群的习惯作风,保证手语。播出结果的准确性和专业性可以更好地为听障人士服务。

由于国内缺乏较为完整的手语语料库数据,系统开发者在北京市残联和市残联聋人协会的支持下,邀请了40多位聋人教师和手语专家进行手语文本转录和技术指导,对听障人群进行大规模评估,最终构建了国内最大的符合国家通用手语标准的多模态手语语料库,总词汇量和句子量表为超过100,000。

精准翻译:更智能的广播

张鹏表示,与传统语音AI转播相比,数字人冬奥手语转播最大的区别在于意思的准确和表达的可理解性:语音转播的技术特点主要集中在理解上言语;对于听障人士来说语音数字编码技术思维导图,手语播报也需要用有节奏的手势、丰富甚至夸张的表情来提高播报的可懂度。

“听懂”语音后,数字人如何更准确地用手语表达文字?据介绍,为了构建能够理解和翻译语音和手语的智能数字大脑,冬奥手语转播数字人系统以超大规模预训练模型为核心技术,利用语义提炼和手语翻译快速编辑模型,将新闻广播语音提炼成语义高度相似的手语文本,翻译成符合手语习惯的词序。最后,手语数字大脑可以通过计算机模拟听力障碍者的大脑,进行手语广播驾驶。

此外,为了实现高精度、高自然的人物形象和手语手势,研发团队自主构建了多模态的肢体动作、面部表情、手指同步采集系统。面部采集以肌肉绑定技术为驱动,结合行业领先的语音识别和高清视频合成技术,为听障人士呈现友好、自然的冬奥手语转播服务。

图为北京卫视《北京早安》节目数字人冬奥手语转播应用场景。智浦AI供图

便捷生活:更广泛的应用场景

目前,冬奥手语转播数字人正在北京卫视《北京晨报》节目播出“冬奥花絮”和“一起看冬奥”。手语信息播报服务降低了冬奥节目的运营成本,也方便听障人士收看赛事报道。

未来,手语广播数字人有望登陆机场、车站、银行等公共场所,方便听障人士的生活。此外,手语广播数字人的应用也有利于推广国家通用手语,促进国家通用手语标准的普及,为残疾人平等参与社会生活创造无障碍环境。语音数字编码技术思维导图,让科技更温暖。

据悉,冬奥手语广播数字人是由北京市科委、中关村管委会支持,智普艾、凌云光、北京广播电视台联合打造的。清华大学嘉嘉教授团队和中科院计算所陈义强研究员团队参与了相关关键技术的研发,该项目也得到了来自北京市残联和市残联聋人协会。(超过)

© 版权声明
THE END
喜欢就支持一下吧
点赞0
分享
评论 抢沙发

请登录后发表评论