""

pokém上go style avatar结束与聋人社区的沟通障碍

发布于2018年7月4日

ucd正在开发的令人兴奋的虚拟手语项目将改变聋人与世界的沟通方式。

研究人员与科技巨头微软公司合作 365体育勒罗一个由sfi资助的研究中心,设计了一个将口语翻译成的系统 爱尔兰手语 (isl),反之亦然。

在聋人学生的帮助下,通过大学学习都柏林大学 访问程序,已经开发出一种可以解释isl中使用的手势的工作原型。

使用类似于神奇宝贝go中发现的增强现实技术,该程序使用数字化身将isl翻译成计算机生成的语音。

当一个非聋人佩戴耳机时,头像会出现在屏幕上,将该人的手语翻译成语音。


philip power是一位在ucd学习法律的聋哑学生,他说他第一次使用原型时的反应是想象它能改变他的生活和其他聋人生活的程度。

“这对学生和日常生活也有很大好处。它将有助于为每个人创造更顺畅的沟通,“他说。

“这对聋人来说真的很棒,因为他们无法进入非聋人社区仍有很多障碍。”

据另一位在ucd学习并帮助开发该系统的聋学生leah ennis mcloughlin表示,“很高兴看到聋人最终被视为优先事项。”

安东尼·文德雷斯克博士 来自ucd计算机科学学院和领导该计划的ucd复杂软件实验室主任,希望该团队能够在未来三到五年内进一步完善该系统,以便能够识别通信中使用的面部表情。


pokém上go是ios和Android设备的增强现实游戏,允许用户捕捉和训练他们最喜欢的神奇宝贝角色的化身

在ucd开发的原型使用了mircosoft的组合 Skype的 和公司的增强现实护目镜 hololens,以及其他工具 路易斯 语言理解,天蓝认知服务和xbox深度相机技术。

完成后,它将能够使用电话或耳机将isl转换为计算机生成的语音,并将语音转换回isl。

该研究项目是通过其skype4good计划与微软一起进行的。

通过: 大卫卡恩斯,数字记者/媒体官,ucd大学关系