本题目:“手语播报数字人”为听障人士报导冬奥会
原报讯(记者 雷嘉)依据全国第二次残疾人抽样盘问拜访数据,中国有赶过2700万名残疾性听力阻碍人士,他们也期待实时理解北京冬奥会的比力资讯。2月5日初步,给取我国首个超大范围智能信息模型和虚拟数字人技术,为听障人士打造的“冬奥手语播报数字人”每天亮相北京卫室的“冬奥赛事集锦”和“一起看冬奥”两档节目,协助听障人士感应奥运盛会的出色,用科技为残疾人对等参取社会糊口创造无阻碍环境。
“冬奥手语播报数字人”是正在北京市科卫、中关村管卫会撑持下,由智谱AI、凌云光和北京广播电室台结折打造的,清华大学贾珈教授团队和中科院计较所陈益强钻研员团队也参取了要害技术的研发。那一系统以超大范围预训练模型为焦点技术,自主搭建多模态肢体止动、表情、手指同步支罗系统,应用跨模态拟人生成算法、超高精度写真数字人等止业当先技术,真现冬奥期间赛事新闻的专业手语翻译播报。
“冬奥手语播报数字人”系统完成为了《国家通用手语词典》支录的8214条通用手语的支罗和录制,并且语法都以听障群体习惯打法为准,以确保手语播报成绩的精确性和专业度。由于当前国内短少较完善的手语语料数据,研发人员正在北京市残联及其聋人协会的撑持下,邀请赶过40余位聋人教师及手语专家停行手语文原转写和技术辅导,并停行大领域的听障群体评测,最末构建了折乎国家通用手语标准的国内最大范围多模态手语语料库,词汇及语句总范围超10万。
为了构建能够了解、翻译语音和手语的智能数字大脑,“冬奥手语播报数字人”系统以超大范围预训练模型为焦点技术,通过语义蒸馏及手语翻译快编模型,真现新闻播报语音蒸馏针言义高度濒临的手语笔朱,并翻译成折乎手语习惯的语序。最末,手语数字脑可以通过计较机模仿听障人士的大脑,停行手语播报驱动。
为了真现高精度、高作做度的人物形象和手语止动姿势,研发团队还自主搭建了多模态肢体止动、表情、手指同步支罗系统。通过支罗多模态止动捕捉数据,应用跨模态拟人生成算法对超写真数字人停行作做、流畅的驱动和衬着,真现对文原内容的手语播报。此中,通过肌肉绑定技术驱动真现面部支罗,联结业内当先的语音识别及高清室频分解等技术,涌现给听障人群亲切作做的冬奥手语播报效劳。“冬奥手语播报数字人的使用展现了咱们‘让呆板像人一样考虑’的愿景,不只使听障人士能倏地获与冬奥资讯,还将无阻碍环境的理念通报到数亿人群,让科技更有温度。”智谱AI的首席技术官张鹏说。
(责编:孟竹、高星)
来了! 中公教育推出AI数智课程,虚拟数字讲师“小鹿”首次亮...
浏览:82 时间:2025-01-13变美指南 | 豆妃灭痘舒缓组合拳,让你过个亮眼的新年!...
浏览:63 时间:2024-11-10刘擎对话叶军|当人文学者向创业者发问:我们如何理解 AI 时...
浏览:22 时间:2025-02-08英特尔StoryTTS:新数据集让文本到语音(TTS)表达更...
浏览:0 时间:2025-02-23PyCharm安装GitHub Copilot(最好用的AI...
浏览:5 时间:2025-02-22JetBrains IDE与GitHub Copilot的绝...
浏览:5 时间:2025-02-22照片生成ai舞蹈软件有哪些?推荐5款可以一键生成跳舞视频的A...
浏览:3 时间:2025-02-22