华为|Insights直播回顾手语服务,助力沟通无障碍

HMS Core Insights第九期直播–手语服务 , 助力沟通无障碍 , 已于12月29日圆满结束 , 本期直播与小伙伴们一同了解了HMS Core手语服务的亮点特性、底层技术以及演进规划 , 下面我们一起来回顾本次直播的精彩内容吧!
华为|Insights直播回顾手语服务,助力沟通无障碍
文章图片

【内容回顾】

  1. 亮点特性——中文手语生成与虚拟形象展示 。
  2. 刨根问底——支撑手语服务功能实现的技术细节 。
  3. 循序渐进——手语服务在语种、词库以及手语识别上的演进规划 。
【专家观点】
华为|Insights直播回顾手语服务,助力沟通无障碍
文章图片

华为在很早之前就开始了无障碍沟通方面的探索 , 经过不断地积累与探索 , 我们将HMS Core手语服务这套能力开放出来 , 让更多开发者能够一起为无障碍沟通环境的建设添砖加瓦 , 也能在持续的应用与反馈中 , 不断完善手语服务的各项功能 。
华为|Insights直播回顾手语服务,助力沟通无障碍
文章图片

HMS Core手语服务中 , 手语动作清晰、准确的表达是核心 。 我们基于业界领先的深度神经网络技术 , 实时将输入文本翻译为时序稳定、连贯且符合听障人群中手语使用者表达习惯的手语动作数据 , 同时 , 手语生成不仅包括手部动作和身体姿态 , 还支持10种面部表情的生成 , 力求准确表达 。
华为|Insights直播回顾手语服务,助力沟通无障碍
文章图片

无障碍沟通环境的建设目前已经成为了社会趋势 , HMS Core手语服务通过先进技术的运用 , 为无障碍沟通环境的建设提供了技术基础 , 也让更多的开发者有能力 , 用科技帮助听障人群中手语使用者更好更便捷地生活 。
【精彩答疑】
Q1:手语服务目前都有哪些亮点特性?
A:HMS Core手语服务是华为面向开发者提供的手语生成能力 , 其能够将文本实时翻译为流畅、自然且符合听障人群表达习惯的手语动作数据 。 此外 , 手语服务还能够通过数字人形象 , 清晰准确地表达包括手部动作、身体姿态以及面部表情在内的手语动作 。
Q2:手语服务的功能是基于哪些技术实现的?
A: 手语服务的功能实现主要由基于机器翻译的手语转写模块和基于多模态融合的手语动作表情生成模块两大模块组成 。 通过自研中文预训练语言模型、整体替代机制以及加速技术整体提升了手语转写的精度及速度;通过多模态动作表情融合生成技术 , 手语服务能够实现自然连贯的手语动作生成 , 在高质量动捕数据较少的情况下 , 提高生成动作的准确性、平滑性以及模型的鲁棒性 。

推荐阅读