Clarifai特色黑客:GSTR可以使用计算机视觉教您手语

时间:2019-03-20 10:44:27 阅读:45次

   GSTR(手势)是一个基于网络的应用程序,有助于缩小非语言交流的差距。使用Clarifai的自定义培训技术,GSTR通过视觉输入识别手语,然后提供反馈和翻译信息。

<! - 多 - >

  

  与口语一样,今天世界各地都有许多不同类型的手语。每种手语都有自己的手势集,可以像口语中使用的不同音调一样细微差别。当然,学习新语言的最佳方式是练习。 GSTR是一个应用程序,可以通过提供手势的反馈和翻译来帮助您学习美国手语。

  

  

   GSTR通过自定义视觉识别模型使用Clarifai,GSTR团队使用手语训练识别标志和手势。然后它以两种不同的模式回应 - 教育和翻译。教育模式提供反馈,确认标志的正确实施。翻译模式提供与符号对应的文本和音频定义。

  为什么我们喜欢它?当开发人员利用我们的定制培训技术时,我们非常喜欢它,这是(无耻的插件)唯一的视觉识别产品,让开发人员将新概念传授给少于10个的机器学习算法数据示例,并在不到几秒钟!阅读有关Devpost项目的更多信息。

  你如何做到

我们采访了GSTR团队的Fulton Garcia来谈论GSTR的灵感。富尔顿目前正在佛罗里达中央大学学习计算机科学与信息技术,对任何与帕格和/或技术有关的人都非常热爱!

   Clarifai:是什么激发了你对GSTR的想法?
Fulton:我们受到鼓舞与残疾人一起工作,悉尼有一个发育残疾的侄女,她一直希望有机会融入她对社区的热爱和她对编程很感兴趣,所以我们团结在一起,让这个梦想成为现实。
你是如何构建应用程序的?
GSTR是基于Node.js构建的,使用Express和MongoDB作为后端。用于图像识别的Clarifai和用于捕获图像的WebcamJs。 Clarifai可以轻松创建具有多个概念的模型,并通过我们能够在黑客马拉松上收集的少量图像变得准确。
使用Clarifai API的最佳部分是什么?
Clarifai是一个非常强大的工具,使用起来非常简单。它允许开发人员轻松地将图像识别实现到他们的项目中,即使他们的经验很少。您可以使用Clarifai制作精彩的东西 - 您可以通过创造性的方式来实现它!

  
感谢分享,GSTR团队!

  
要了解更多信息,请查看我们的文档并注册免费的Clarifai帐户以开始使用我们的API - 只需三行代码即可启动和运行!我们非常高兴能够分享我们开发者社区所构建的所有精彩内容,所以不要忘记发推文@Clarifai向我们展示您的应用。

  并给富尔顿&amp; GSTR团队在下面的评论中提出了一些道具。直到下一次!

  

Clarifai特色黑客:GSTR可以使用计算机视觉教您手语所属专题:手语 黑客 《Clarifai特色黑客:GSTR可以使用计算机视觉教您手语》链接:http://www.zhouchuanxiong.net/1376