研究人员推手语转文字AI翻译器,帮助听障人士正常交流 全球时讯
千易网5月25日消息,巴塞罗那超级计算中心(BSC)和加泰罗尼亚理工大学(UPC)的研究人员开发了一种将手语翻译
(资料图片仅供参考)
千易网 5 月 25 日消息,巴塞罗那超级计算中心(BSC)和加泰罗尼亚理工大学(UPC)的研究人员开发了一种将手语翻译成文本的新工具,以给予听觉障碍者更多包容性和可及性。该工具利用人工智能技术,包括自我注意机制和更快的吞吐量,以更准确地理解手语者的姿势并产生准确的文字转写。
该工具基于 How2Sign 数据集,这是一个公开可用的大规模、多模态和多视图数据集,包括 80 小时的美国手语教学视频和相应的英语文字记录。该数据集由 BSC 和 UPC 发布,用于训练模型,以便将手语转换为文本。研究人员使用膨胀式三维网络(I3D)对数据进行预处理,这是一种视频提取方法,可以对视频进行三维过滤,直接从视频中获取时空信息。并使用了一个转化器式的机器学习模型,与 ChatGPT 等其他人工智能工具背后的模型类似。
该研究的主要作者 Laia Tarrés 表示:“我们开发的新工具是以前发布的名为 How2Sign 的出版物的延伸,在那里,训练模型所需的数据被公布。利用这些已经可用的数据,我们开发了一个新的开源软件,能够学习视频和文本之间的映射。”
研究人员发现,他们的模型能够产生有意义的翻译,但仍存在改进的空间。该工具尚处于实验阶段,研究人员将继续努力,以创建一个能够与无听力损失者使用的技术相媲美的工具。
Laia Tarrés 同时表示:“这个自动手语翻译的开放工具是对关注无障碍环境的科学界的宝贵贡献,它的发表代表了向为所有人创造更具包容性和无障碍的技术迈出的重要一步。”
关键词:
千易网5月25日消息,巴塞罗那超级计算中心(BSC)和加泰罗尼亚理工大学(UPC)的研究人员开发了一种将手语翻译
人民网北京5月25日电(记者杜燕飞)记者从国家能源集团获悉,国内首创重载铁路基础设施智能运维技术24日正
近日,芜湖@鸠江公安官陡派出所接群众报警称自己种在店门口的盆景被偷了
上半年,我国民航完成运输总周转量293 4亿吨公里,恢复至2019年同期的46 7%;完成旅客运输量1 18亿人次,恢复
时间品类规格最低价涨跌最高价涨跌单位5月24日标准级钴13 30014 350 25美元 磅5月24日合金级钴13 95015 300美元 磅
在世界多国纷纷呼吁英国归还殖民时期掠走的珠宝文物之际,埃塞俄比亚方面要求归还当年被英国掳走、在英国去
1、字面上,哲,就是聪明与智慧的意思,哲学,就是给人智慧,使人聪明的意思。2、哲学,是通过对一系列关乎
业内人士认为,债券市场依然有较高的胜率,但是赔率有所降低,同时短期需要注意国债的调整风险
1、汉字柱读音zhùzhǔ部首木笔画数9笔画名称横、竖、撇、点、点、横、横、竖、横、柱 笔画
珠海市医保部门根据群众举报线索,调查发现当事人珠海健和诺贝尔口腔门诊部有限公司,涉嫌将参保人在非定点
来为大家解答以下的问题,个大气压等于多少水柱多少汞柱,一个大气压力等于多少水柱高度这个很多人还不知道
今天,全国大部的天气相对来说还算平静南方的阴雨仍然整体较弱只在华南局部出现了一些强降雨而北方则受
5月22日在2023大湾区科学论坛生物医药与健康分论坛上钟南山表示基于seirs模型的预测显示2023年新冠第二波疫情高
今天来聊聊关于汽车坡道玻璃雨棚多少钱一平方,玻璃雨棚多少钱一平方的文章,现在就为大家来简单介绍下汽车
项目首批单位不少于186伙,料涵盖多种户型,最快6月初开售。
作者|《财经》记者凌馨编辑|王小能不能跟上基层医院对高端设备的需求,决定国产影像后来者的未来曾经的贫困
格隆汇5月24日丨有投资者在互动平台向柘中股份(002346)提问:请问贵公司有涉及人工智能与机器人(300024)这
科技下乡,助力乡村振兴【我为群众办实事】科技下乡,助力乡村振兴近日,浦源镇乡村振兴工作组组长李圣书和
1、《自控力是训练出来的》可以帮助大学生提升自己的执行力和自控力,对大学生受益匪浅。2、《经济学原理》
为谋取不正当利益,向国家工作人员的近亲属或者其他与该国家工作人员关系密切的人,或者向离职的国家工作人