近期,科技界传来一则创新消息,英伟达公司联合美国聋童协会(ASDC)及数字代理公司Hello Monday,共同推出了一款名为Signs的AI平台,该平台专注于美式手语(ASL)的学习与应用推广。
ASL作为一种复杂的语言形式,结合了手势、面部表情及空间定位等元素,这一特性使得AI模型在理解手语时面临巨大挑战。传统的AI技术大多仅依赖手部追踪,往往忽视了面部表情等非手势信号的细微变化,导致识别效果有限。
Signs平台打破了这一局限,它并非一个静态的手语词典,而是通过用户贡献的视频数据不断学习和优化。用户提交的真实ASL手势视频被用作训练AI模型的材料,这一做法旨在提升AI对手语识别的准确性、可扩展性,以及对自然手语风格的深入理解。随着用户数据的积累,平台的识别能力将不断增强。
该平台的核心亮点之一在于其提供的实时AI反馈功能。用户可以通过摄像头进行手语表达,系统随即分析手势并提供即时纠正。同时,一个3D虚拟人物会演示正确的ASL手势,便于用户直观对比学习,这一功能极大地促进了学习效率。
英伟达的目标远不止于此,他们致力于构建一个能够理解自然使用状态下ASL的AI模型,而非仅仅依赖于僵化、预定义的动作。目前,Signs平台的数据集已包含40万个视频片段,涵盖了1000个手语单词。英伟达计划进一步向更广泛的受众开放平台,以扩大数据集规模,并公开部分数据集,支持无障碍应用领域的深入研究。