在今年的北京冬奥会上,央视频专门准备了AI手语数智人主播“聆语”,为听障人士提供手语解说服务。据了解,央视频AI手语数智人主播“聆语”由腾讯云小微联合PCG AI等技术团队共同打造,它能够让处于无声世界中的特殊人群也能“听”到中国举办冰雪赛事的盛况。
据悉,AI手语数智人主播的手语表达能力接近真人,通过AI技术,他们也能自行学习,快速补充海量新词、热词。
它整合了3D数字人建模、语音识别、语义理解、机器翻译和图像渲染等技术,基于腾讯多模态端到端生成模型,进行联合建模及预测生成高准确率的动作、表情、唇动等序列,实现自然专业、易懂度高的手语效果,AI手语可懂度达90%以上。
2021年10月,广电总局在《广播电视和网络视听“十四五”科技发展规划》中首次明确指出,推动虚拟主播、动画手语广泛应用于新闻播报、天气预报、综艺科教等节目生产,创新节目形态,提高制播效率和智能化水平。