It’s a Sign: AI Platform for Teaching American Sign Language 旨在弥合沟通鸿沟
快速阅读: 据《NVIDIA 官方博客》称,英伟达、美国聋儿协会与创意机构星期一你好合作推出“手势”平台,旨在支持美国手语学习和发展AI应用。该平台提供验证过的手语词库、三维虚拟人物演示和AI工具,支持实时反馈。平台计划收录40万条视频,由专业手语使用者验证,以构建高质量的视觉词典和教学工具。
美国手语是美国使用最广泛的语言中的第三种,但基于美国手语数据开发的人工智能工具远少于英语和西班牙语等主要语言。英伟达公司、美国聋儿协会与创意机构星期一你好携手合作,通过创建一个名为“手势”的互动式网络平台来缩小这一差距,该平台旨在支持美国手语的学习和发展人工智能应用。手语学习者可以访问平台上的手语词库,这些词库已通过验证,借助三维虚拟人物演示的手势来扩展词汇,并使用分析网络摄像头画面的人工智能工具获得实时反馈。任何水平的手语使用者都可以通过签署内容来贡献,帮助构建美国手语的开源视频数据集。英伟达计划将数据集扩展至包含一千个手语词汇的四十万个视频片段,由熟练的手语使用者进行验证,以确保每个手势的准确性,从而形成高质量的视觉词典和教学工具。
“大多数聋儿出生在听觉正常的家庭中。给家庭成员提供像‘手势’这样的工具,让他们早期开始学习手语,可以使他们从六到八个月大的时候就与孩子建立有效的沟通渠道。”美国聋儿协会执行主任切丽·道林说,“而且知道专业手语教师已经验证了平台上所有词汇,用户可以对所学内容感到放心。”
英伟达团队计划利用该数据集进一步开发人工智能应用程序,以消除聋人和听人社区之间的交流障碍。这些数据预计将在公共领域发布,用于开发包括人工智能代理、数字人类应用和视频会议工具在内的技术。它还可以用来改进“手势”平台,并为美国手语平台在整个生态系统中提供实时、人工智能驱动的支持和反馈。无论是新手还是专家,志愿者都可以录制自己的手语视频来贡献给美国手语数据集。支持美国手语教育,探索语言细节在数据收集阶段,“手势”已经提供了强大的平台,用于手语语言习得,让个人有机会学习并练习前一百个手语词汇,以便更有效地与使用手语的朋友或家人交流。
“‘手势’学习平台可以帮助有聋儿的家庭快速查找特定词汇并看到相应的手势。这是一个工具,可以帮助他们在更正式的课堂之外日常使用手语。”道林说,“我看到孩子们和家长都在探索这个平台——我认为他们可以一起使用。”
尽管“手势”目前主要关注每个手势的手部动作和手指位置,但美国手语还结合了面部表情和头部动作来传达意义。“手势”团队正在探索如何在未来版本中跟踪和整合这些非手动信号。他们还在研究如何在“手势”中展示其他细微差别,如地区差异和俚语。并与罗彻斯特理工学院无障碍与包容性研究中心的研究人员合作,评估并进一步改进“手势”平台的用户体验,使其更适合聋人和听力受损用户。
“改善手语的可及性是一个持续的过程。”星期一你好/DEPT的安德斯·杰森说,“‘手势’能够满足高级人工智能工具的需求,帮助消除聋人和听人社区之间的交流障碍。”计划在今年晚些时候发布。
开始使用或贡献“手势”:访问signs-ai.com,了解更多关于英伟达可信人工智能项目的信息。参加将于三月十七日至二十一日在圣何塞举行的全球人工智能大会英伟达GTC的参会者可以在活动期间现场参与“手势”。
(以上内容均由Ai生成)