“声情密码”——聋哑人手语实时翻译交互智能手套

简介

中央陆续发布了《国家人权行动计划》《“十四五”残疾人保障和发展规划》《无障碍环境建设“十四五”实施方案》，支持残疾人智能辅助器具的研发和生产。我国听力、言语残疾人数约为2780万，占残疾人总数的三分之一。世界卫生组织发布的世界听力报告中指出：预计到2050年，全球听力障碍者将达到25亿，约占世界总人口的四分之一。 大多数听力语言残疾者在日常生活中不被重视，他们的书写不准确、手语学习成本高、其他设备不仅翻译不准确而且价格高，阻碍了听力语言残疾者的情感表达，为了全面打通聋哑人与普通人沟通的渠道，让未经过学习训练的普通人同样能够读懂“手语”，为此我们团队研发了一款手语实时翻译交互智能手套。 聋哑人手语实时翻译交互智能手套能够捕捉使用者的手势信息，将手套读取到的手势信息输入到判别网络，通过各类学习算法从而输出该手势所代表的含义并转换成文字和语音信号以及动画展示；与此同时，手套内嵌的语音识别装置可将普通人说话的内容转换成相关内容供听障朋友读取。 该产品具有两大功能： 1.实现聋哑人与普通人之间的信息双向实时传递。听障朋友想要表达的信息由智能手套捕捉到特征动作，通过智能算法分析“翻译”出该动作所表达的意义，转换成文本信息，并通过语音助手将文本信息“读”出来。 2.能将普通人群的语音信号转化成相关内容展示出来，让聋哑朋友能够“看懂”普通人所讲的话，从而实现由正常人向聋哑人的信息实时传递。 该产品经过三次整体更新： 目前3.0版本的数据翻译更准确，手套材质采用抑菌抑螨的面料，亲肤透气，易于清洗，同时续航更久，可覆盖日常使用。 该产品具有五大优势是： 1.易携带；2.翻译快；3.翻的准；4.造价低；5.适用多种语言。 本产品旨在通过这种交互以形成一种实现聋哑人与普通人之间沟通的方式，做到聋哑人与普通人之间的实时信息传递。本团队的宗旨是“为聋哑人发声”，这也是产品设计与开发的基本理念，该项目带来了巨大的社会价值，对聋哑学校进行帮扶，为教育机构提供教学辅助翻译工具。 目前已与5家公司签订技术服务合同，同时直接带动就业15人，间接带动就业200人，使得本团队的作品能够全面的服务于社会。