腾讯3D手语数智人“聆语”亮相央视频,为冰雪赛事提供AI手语翻译服务

“中国队,率先冲过终点!”

2月5日晚短道速滑混合团体接力决赛后,腾讯3D手语数智人“聆语”,用手语表达了见证中国队获得冠军的激动心情。

腾讯3D手语数智人“聆语”作为央视频AI手语翻译官,为这场比赛提供了手语翻译解说服务,见证了中国队在本届赛事中首枚金牌的诞生,让处于无声世界中的特殊人群也能感受到中国举办冰雪赛事的盛况,进一步提升了听障人士的观赛体验。

腾讯3D手语数智人“聆语”由腾讯云小微联合PCG AI等技术团队共同打造,整合多模态交互技术、3D数字人建模、机器翻译、语音识别和自然语言理解等技术,让“聆语”的手语表达能力接近真人。腾讯自主研发了一套可视化动作编辑平台,为更专业的手语老师提供了友好的工具平台,可以让手语老师高效率的对全量手语动作进行精修。截至目前,腾讯3D手语数智人“聆语”词汇和语句覆盖量超过160万,并针对体育赛事做了大量定向优化,手语可懂度90%以上,技术水准行业领先。

在赛事手语解说中,基于《国家通用手语词典》规范,“聆语”首先通过健听人语言与听障者手语的机器翻译能力,将比赛解说内容低延迟生成高准确率的手语语言表征,再通过腾讯多模态端到端生成模型,进行联合建模及预测生成高准确率的动作、表情、唇动等序列,实现自然专业、易懂度高的手语效果。“聆语”的外观,依托腾讯领先的3D光照扫描还原、面部肌肉驱动、表情肢体手势捕捉等技术,形象高度还原真人发肤,动作也更加自然生动;在信息准确率方面,“聆语”可以快速学习时下的新词热词,还可以快速完成各种行业、业务场景和相关知识的学习,提升翻译准确性。

《“十四五”残疾人保障和发展规划》中提出要加快发展信息无障碍,智能化服务要适应残疾人需求,智能工具应当便于残疾人日常生活使用。据全国第二次残疾人抽样调查数据,中国有2780万听障人士,手语是这些听障人士之间相互交流思想、获取外界信息的第一语言。但由于手语表达语序和汉语不同、需要结合表情和嘴部动作辅助理解,如果省略词汇不当、新词热词无法表达等原因,会对手语播报可懂度产生很大影响。AI手语数智人主播,希望通过建立健听人语言体系、逼真的画面语言、连贯自然的动作和新词热词快速适配,提升AI手语表达的可懂度。

腾讯云小微在AI交互智能领域,不断推动技术发展和产业应用落地,让数智人成为很多行业的数字助手,辅助人类提供更加高效、精准的服务。在新闻传媒领域,在2021年10月,广电总局在《广播电视和网络视听“十四五”科技发展规划》中也首次明确指出,要推动虚拟主播、动画手语广泛应用于新闻播报、天气预报、综艺科教等节目生产,创新节目形态,提高制播效率和智能化水平。未来,腾讯3D手语数智人“聆语”,也将在更多场景提供服务,助力实现更好的无障碍信息传播环境。

(免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。 )

Baidu
map