数字人播报官网数字科技背景图片数字孪生智慧水文
“冬奥手语播报数字人”体系完成了《国度通用手语辞书》收录的8214条通用手语的收罗和录制,而且语法都以听障群体风俗打法为准,以确保手语播报功效的精确性和专业度
“冬奥手语播报数字人”体系完成了《国度通用手语辞书》收录的8214条通用手语的收罗和录制,而且语法都以听障群体风俗打法为准,以确保手语播报功效的精确性和专业度。因为当前海内短少较完美的手语语料数据,研发职员在北京市残联及其聋人协会的撑持下数字孪生聪慧水文,约请超越40余位聋人教师及手语专家停止手语文本转写和手艺指点,并停止大范畴的听障群体评测,终极构建了契合国度通用手语标准的海内最大范围多模态手语语料库,辞汇及语句总范围超10万。
本报讯(记者 雷嘉)按照天下第二次残疾人抽样查询拜访数据,中国有超越2700万名残疾性听力停滞人士,他们也等待实时理解北京冬奥会的角逐资讯数字孪生聪慧水文。2月5日开端,接纳我国首个超大范围智能信息模子和假造数字人手艺,为听障人士打造的“冬奥手语播报数字人”天天表态北京卫视的“冬奥赛事集锦”和“一同看冬奥”两档节目,协助听障人士感触感染奥运嘉会的出色,用科技为残疾人对等到场社会糊口缔造无停滞情况。
“冬奥手语播报数字人”是在北京市科委、中关村管委会撑持下,由智谱AI、凌云光和北京播送电视台结合打造的数字科技布景图片,清华大学贾珈传授团队和中科院计较所陈益强研讨员团队也到场了枢纽手艺的研发。这一体系以超大范围预锻炼模子为中心手艺,自立搭建多模态肢体行动、心情、手指同步采个人系数字科技布景图片,使用跨模态拟人天生算法、超高精度写实数字人等行业抢先手艺,完成冬奥时期赛事消息的专业手语翻译播报。
为了完成高精度数字科技布景图片、高天然度的人物形象和手语行动姿势,研发团队还自立搭建了多模态肢体行动、心情数字科技布景图片、手指同步采个人系。经由过程收罗多模态行动捕获数据数字孪生聪慧水文,使用跨模态拟人天生算法对超写实数字人停止天然、流利的驱动和衬着,完成对文本内容的手语播报。此中数字科技布景图片,经由过程肌肉绑定手艺驱动完成脸部收罗数字科技布景图片,分离业内抢先的语音辨认及高清视频分解等手艺,显现给听障人群密切天然的冬奥手语播报效劳。“冬奥手语播报数字人的使用展示了我们‘让机械像人一样考虑’的愿景,不只使听障人士能快速获得冬奥资讯,还将无停滞情况的理念通报到数亿人群,让科技更有温度。”智谱AI的首席手艺官张鹏说。
为了构建可以了解、翻译语音和手语的智能数字大脑,“冬奥手语播报数字人”体系以超大范围预锻炼模子为中心手艺,经由过程语义蒸馏及手语翻译快编模子,完成消息播报语音蒸馏成语义高度靠近的手语笔墨,并翻译成契合手语风俗的语序。终极,手语数字脑能够经由过程计较机模拟听障人士的大脑数字孪生聪慧水文,停止手语播报驱动。