2 月 21 日消息,科技媒体 WinBuzzer 昨日发布博文,报道称英伟达携手美国聋童协会(ASDC)和数字代理公司 Hello Monday,推出了一款名为 Signs 的 AI 平台,旨在帮助更多人学习和应用美式手语(ASL)。
训练 AI 理解手语的挑战在于 ASL 通过手势、面部表情和空间定位的组合来传达意义,许多 AI 模型难以处理这种复杂性,原因是 AI 主要依赖手部追踪,忽略了非手势信号的细微差别。Signs 平台通过用户贡献不断学习和改进,通过用户提交的真实 ASL 手势视频训练 AI 模型,致力于提高 AI 手语识别的准确性、可扩展性和对自然手语风格的理解能力。
Signs 平台的核心功能之一是提供实时 AI 反馈。用户可以使用摄像头进行手语表达,系统会分析其手势并提供必要的纠正,3D 虚拟人物会演示正确的 ASL 手势,方便用户对比学习。这一功能使用户能够在学习过程中得到即时的指导和改进,提升学习效率。
NVIDIA 的目标是构建一个理解自然使用中 ASL 的训练模型,而非依赖僵化、预定义的动作。目前,数据集包含 40 万个视频片段,涵盖 1000 个手语单词,英伟达计划向更广泛的受众开放平台,以扩大数据集规模,并公开部分数据集以支持无障碍应用研究。
Signs 平台的推出不仅为学习 ASL 提供了新的工具,也为 AI 在手语识别领域的应用开辟了新的方向。通过不断扩展和改进数据集,英伟达希望能够提高 AI 模型的准确性和适应性,推动无障碍技术的发展和应用。
英伟达携手美国聋童协会和 Hello Monday 推出的 Signs AI 平台,通过用户贡献的真实 ASL 手势视频训练 AI 模型,提供实时 AI 反馈和 3D 虚拟人物演示,帮助用户学习和应用美式手语。英伟达的目标是构建一个理解自然使用中 ASL 的训练模型,并计划向更广泛的受众开放平台,推动无障碍应用研究。Signs 平台的推出为手语学习和 AI 手语识别领域带来了新的机遇和挑战。