BIRTV2022在线展示区 12月8日

北京智谱华章科技有限公司
Beijing Zhipu Huazhang Technology Co., LTD

北京智谱华章科技有限公司

智慧手语,在我国手语语言特点的基础上,自主构建大规模多模态手语语料库,通过AI手语数字脑完成语义蒸馏、手语翻译,经由高逼真数字人模型生成高准确率的动作、表情、口型,实现自然专业、易懂度高的手语效果。AI手语播报,是视频/音频的手语合成,要求实时性,对于语言精炼度要求高。基于语言预训练大模型研发的语义蒸馏算法,在缩减为原句45%的情况下,仍有80%保留完整语义。可用于新闻、电影、电视剧等录播场景的视频手语合成,也可支持新闻播报、赛事直播、电商直播等实时直播场景。

展品视频
  • 分享 :
展品介绍

根据统计,中国有超过2700万名残疾性听力障碍人士。智谱AI手语数字人华同学源于北京市科委科技冬奥专项支持的“冬奥手语播报数字人系统”课题技术成果,经北京冬奥会、冬残奥会期间实践应用改进提升而来,她的出现为听障人士获取消息扩展了渠道。

全链路AI技术支持


AI手语数字人华同学的数据基础以《国家通用手语》为标准,采集大量动态数据,与此同时,还邀请40多位听障人士及手语专家进行手语文本转写和技术指导,并进行大范围听障群体评测,最终构建了符合国家通用手语规范的大规模多模态手语语料库,词汇及语句总规模超10万。手语是一种使用手势和面部表情来传达信息的语言,与口语相比,词汇不同,语序表达也不一致。研发团队基于超大规模预训练模型构建手语数字脑,通过语义蒸馏算法与手语翻译模型,生成和原文语义高度接近、语义精简且符合手语表达习惯的手语词序列。最后,通过跨模态拟人生产算法,驱动AI手语数字人华同学进行手语播报。

北京冬奥会赛事新闻播报


华同学首次亮相在北京卫视,对冬奥赛事进行手语播报。此外华同学也为北京电视台科教频道的残奥科普类节目提供手语播报支持,总服务时长近500分钟。冬奥赛事结束之后,华同学依然保留在《北京您早》节目中,除此以外还逐渐拓展全矩阵产品,持续为听障人群提供服务。

手语全矩阵产品1.AI手语播报服务


AI手语播报服务为保证手语与语音能够同步,采用基于语言预训练大模型研发的语义蒸馏算法,将文本在不影响理解的前提下完成精简。可用于新闻、电影、电视剧等录播场景的视频手语合成;也可支持新闻播报、赛事直播、电商直播等实时直播场景。

2.AI手语翻译一体机


AI手语翻译一体机采用端云结合的模式,只需插电、联网即可使用语音到手语的即时翻译功能。它将接收的语音识别为文本,转译为手语词序列,驱动华同学完成手语表达。千字文本转手语合成仅需要几秒钟,可应用于各类线下公共服务的无障碍窗口。

3.AI手语词典


AI手语词典以《国家通用手语常用词表》为标准,包含手语词目、华同学演示视频、手势说明、相关词等内容,还提供搜索、字母索引、词语收藏等功能,可帮助手语学习人员方便快捷地查询词语的手语表达

华同学的出现为残障人士平等参与社会生活创造了无障碍环境,让科技更有温度。可以想象在未来的某一天,听障人士可以通过科技的力量和正常人群进行无差别的沟通交流,真正实现“科技服务人类”的理念。

联系我们

  • 地址 : 北京市海淀区中关村东路1号院8号楼五层B501
  • Address :
  • 18510885109
  • jia.liu@aminer.cn
  • zphz.aminer.cn
  • 传真:
  • 联系人:刘佳
  • 职务:VP

北京智谱华章科技有限公司

智谱AI由清华大学计算机系的技术成果转化而来。公司主导研发了多语言千亿级超大规模预训练模型,构建了高精度通用知识图谱,并把两者有机融合打造了数据与知识双轮驱动的认知引擎。 公司核心技术获得国家科学进步二等奖、北京市发明专利一等奖。智谱提出全新Model as a Service(MaaS)的市场理念,打造了认知大模型平台以及数字人和科技情报产品,应用单位包括:中国科协、北京市科委、华为、腾讯等1000余家企事业单位。智谱AI也秉承着肩负企业社会责任,研发了面向疫情的知识疫图、面向无障碍沟通的手语数字人技术等,促进社会平等和进步。