腾讯3D手语数智人“聆语”亮相央视频 为冰雪赛事提供AI手语翻译服务
来源:中央广电总台国际在线  |  2022-02-06 12:39:454.7万

  国际在线消息:“中国队,率先冲过终点。”2月5日晚短道速滑混合团体接力决赛后,腾讯3D手语数智人“聆语”用手语表达了见证中国队获得冠军的激动心情。

腾讯3D手语数智人“聆语”亮相央视频 为冰雪赛事提供AI手语翻译服务_fororder_1

  腾讯3D手语数智人“聆语”用手语表达了见证中国队获得冠军的激动心情

  腾讯3D手语数智人“聆语”作为央视频AI手语翻译官,为这场比赛提供了手语翻译解说服务,见证了中国队在本届赛事中首枚金牌地诞生,让处于无声世界中的特殊人群也能感受到中国举办冰雪赛事的盛况,进一步提升听障人士的观赛体验。

腾讯3D手语数智人“聆语”亮相央视频 为冰雪赛事提供AI手语翻译服务_fororder_2

  腾讯3D手语数智人“聆语”

  据介绍,腾讯3D手语数智人“聆语”由腾讯云小微联合PCG AI等技术团队共同打造,整合多模态交互技术、3D数字人建模、机器翻译、语音识别和自然语言理解等技术,让“聆语”的手语表达能力接近真人。腾讯自主研发了一套可视化动作编辑平台,为更专业的手语老师提供工具平台,可以让手语老师对全量手语动作进行精修。截至目前,腾讯3D手语数智人“聆语”词汇和语句覆盖量超过160万,并针对体育赛事做了大量定向优化,手语可懂度90%以上,技术水准行业领先。

  在赛事手语解说中,基于《国家通用手语词典》规范,“聆语”首先通过健听人语言与听障者手语的机器翻译能力,将比赛解说内容低延迟生成高准确率的手语语言表征,再通过腾讯多模态端到端生成模型,进行联合建模及预测生成高准确率的动作、表情、唇动等序列,实现自然专业、易懂度高的手语效果。“聆语”的外观,依托腾讯3D光照扫描还原、面部肌肉驱动、表情肢体手势捕捉等技术,形象高度还原真人发肤,动作也更加自然生动;在信息准确率方面,“聆语”可以快速学习新词热词,并快速完成各种行业、业务场景和相关知识的学习,提升翻译准确性。

腾讯3D手语数智人“聆语”亮相央视频 为冰雪赛事提供AI手语翻译服务_fororder_3

  腾讯3D手语数智人“聆语”正在做手语翻译工作

  手语是听障人士之间相互交流思想、获取外界信息的第一语言。但由于手语表达语序和汉语不同、需要结合表情和嘴部动作辅助理解,如果省略词汇不当、新词热词无法表达,会对手语播报可懂度产生很大影响。AI手语数智人主播,希望通过建立健听人语言体系、逼真的画面语言、连贯自然的动作和新词热词快速适配,提升AI手语表达的可懂度。

  腾讯云小微在AI交互智能领域,不断推动技术发展和产业应用落地,让数智人成为很多行业的数字助手,辅助人类提供更加高效、精准服务。在新闻传媒领域,推动虚拟主播、动画手语广泛应用于新闻播报、天气预报、综艺科教等节目生产,创新节目形态,提高制播效率和智能化水平。未来,腾讯3D手语数智人“聆语”将在更多场景提供服务,助力实现无障碍信息传播环境更好发展。(图/央视频 文/陈东)

责编:冯实
最新推荐
新闻
文娱
体育
环创
城市
站长统计