研究人员推手语转文字 AI 翻译器 帮助听障人士正常交流

近日，巴塞罗那超级计算中心（BSC）与加泰罗尼亚理工大学（UPC）的研究人员联手开发出一款新型工具，能够将手语精准地翻译成文本，为听障人士带来前所未有的便利与包容性。这一创新成果得益于人工智能技术的深度应用。

这款工具的研发基础是How2Sign数据集，这是一项公开的大型、多模态、多视角数据集，包含了长达80小时的美洲手语教学视频以及相应的英文字幕记录。这一数据集由BSC和UPC联合发布，旨在为将手语转化为文本提供模型训练资源。面对这些数据，研究人员借助膨胀式三维网络（I3D）技术预处理视频信息，从视频中提取时空特征。他们运用了一种类似于ChatGPT等人工智能工具的转化器式机器学习模型。

该研究的主要负责人Laia Tarrés表示：“我们的新工具是对先前发布的How2Sign项目的延伸。利用已经可用的数据，我们开发出了一款开源软件，它能学习视频和文本之间的映射关系。”经实验证实，该模型能够产出具有意义的翻译结果，但仍存在优化的空间。目前，这一工具仍处在实验阶段，研究人员正不断努力，以期创建一个与听障者日常使用的技术相媲美的工具。

这一自动手语翻译工具的开放，是对无障碍环境关注者的一大贡献。Laia Tarrés强调：“它的发布标志着我们在创造更具包容性和无障碍技术方面迈出了重要的一步。”这款工具为听障人士打开了新的交流大门，使他们能够更加便捷地与他人沟通，融入社会。