×

借助手部动作控制机械臂的手语翻译成文本和语音手套

消耗积分:0 | 格式:zip | 大小:1.54 MB | 2022-10-21

刘丽

分享资料个

描述

该项目的存在只有一个目的,即帮助聋人社区轻松地与附近的环境进行交流和互动。其目的是转换代表 ASL(美国手语)脚本中提到的 26 个英文字母的基本符号,并将它们显示在智能手机屏幕上。

 
pYYBAGNOJQWAUwwwAADGXsMpnqQ694.png
 

电路组装

 
 
 
 
pYYBAGNOJQeAD6jFAAAeJ1e8n18451.png
 
1 / 4
 

项目详情

该项目的灵感来自于借助手部动作控制机械臂的想法。大部分工作是相同的,但实现其余部分是一项相当复杂的任务。加速度计用于测量手掌的倾斜度。五个弯曲传感器放置在手套上,四个用于手指,一个用于拇指。这些传感器测量手指、拇指和手掌的弯曲度,根据弯曲角度值,Arduino Nano 微控制器了解哪组值代表哪个符号,并通过蓝牙将适当的结果值传输到 Android 应用程序,该应用程序显示并说出生成的符号.

表示前几个符号很容易也很有趣,但是很少有很难区分的符号,例如“U”和“V”,它们的形式略有不同,并且给出的值几乎相同。早期的原型在很大程度上未能表现出相同的效果,但使用手指之间的金属条解决了问题,该金属条用于判断它们是否接触。

通过不时地不断更新每个符号的数据集来提高准确性。

工作视频

 

示例图片

 
poYBAGNOJQqALYiKAAFFa8xMSPk810.jpg
 

安卓应用

我已经使用 Android Studio 来创建应用程序。该应用程序显示通过语音输出生成的符号。

 
 
 
 
pYYBAGNOJQyAUqwQAAALDjUrE2k98.jpeg
 
1 / 3
 

传感器校准

在开始之前,您必须校准传感器的最小值和最大值。将数字引脚 7 连接到 5V 并关闭和打开您的手以自动校准传感器的最小值和最大值。我只使用 if(digitalRead(7)==HIGH) 进行校准。如果您不想校准传感器,可以删除线 64-119。

未来范围

这个工具可以是:

1)进一步与各类服务相结合,助力聋哑人就业。

2) 配备控制器,在指尖上提供家庭自动化。

3)与健身传感器配对以监测个人的健康状况。

 


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

评论(0)
发评论

下载排行榜

全部0条评论

快来发表一下你的评论吧 !