研究人员推手语转文字AI翻译器 帮助听障人士正常交流

有志者，事竟成！如果你在学习科技周边，那么本文《研究人员推手语转文字AI翻译器 帮助听障人士正常交流》，就很适合你！文章讲解的知识点主要包括，若是你对本文感兴趣，或者是想搞懂其中某个知识点，就请你继续往下看吧~

IT之家今日（5月25日）消息，巴塞罗那超级计算中心（BSC）和加泰罗尼亚理工大学（UPC）的研究人员开发了一种将手语翻译成文本的新工具，以给予听觉障碍者更多包容性和可及性。该工具利用人工智能技术，包括自我注意机制和更快的吞吐量，以更准确地理解手语者的姿势并产生准确的文字转写。

该工具基于 How2Sign 数据集，这是一个公开可用的大规模、多模态和多视图数据集，包括 80 小时的美国手语教学视频和相应的英语文字记录。BSC和UPC联合发布了这个数据集，旨在训练模型，从而将手语转化为文本。研究人员使用膨胀式三维网络（I3D）对数据进行预处理，这是一种视频提取方法，可以对视频进行三维过滤，直接从视频中获取时空信息。使用了一种转换器型的机器学习模型，其背后的模型与 ChatGPT 等其他人工智能工具相似。

该研究的主要作者 Laia Tarrés 表示：“我们开发的新工具是以前发布的名为 How2Sign 的出版物的延伸，在那里，训练模型所需的数据被公布。我们已经利用可用的数据开发了一个新的开源软件，其能够学习视频和文本之间的映射关系。”

虽然研究人员发现他们的模型能够产生有意义的翻译，但还有改进的余地。研究人员正在继续努力，以创建一种能够与无听力损失者使用的技术相媲美的工具，目前该工具仍处于实验阶段。

Laia Tarrés 同时表示：“这个自动手语翻译的开放工具是对关注无障碍环境的科学界的宝贵贡献，它的发表代表了向为所有人创造更具包容性和无障碍的技术迈出的重要一步。”

今天带大家了解了的相关知识，希望对你有所帮助；关于科技周边的技术知识我们会一点点深入介绍，欢迎大家关注golang学习网公众号，一起学习编程~