苏州学者团队在《自然》子刊再发科研成果 实用手语可整句识别

苏报讯（记者 袁艺）近日，新加坡国立大学苏州研究院智慧医疗技术卓越研究中心高级研究员李正国团队在国际顶尖学术期刊《自然·通讯》上发表科研成果。李正国团队成功研发了一种基于摩擦电手套的手语识别和交流系统，该系统在人工智能的辅助下，不仅实现了普遍的多个手语单词识别，还能对句子特别是未经人工智能训练的新句子进行解析与翻译，满足语言、听觉障碍者高频率使用句子的日常交流需求，提高了手语识别系统的实用性。

李正国团队研发的系统包括摩擦电传感手套、深度学习模块和用户界面。作为演示，该系统实现了对50个单词和20个句子的独立识别，在非分割框架内，其准确率分别高达91.3%和95%。此外，为了克服无法识别未经训练的新句子的局限，分割法将数据集内的句子信号划分为单词片段，深度学习模型则负责记忆所有出现过的单词单元。同时在虚拟现实界面上，语言、听力障碍者可以直接使用手语与非手语使用者进行互动，非手语使用者则能直接打字参与交流。“除了提升语言、听力障碍者的社会参与程度，此项技术也可应用于残疾人辅助设备、医疗健康等领域，助力以人为本的物联网建设。”李正国说。