0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

一种可将手语字母翻译成带显示器书面字母的智能手套

OpenFPGA 来源:OpenFPGA 2023-03-03 09:54 次阅读

一种智能手套,可将手语字母翻译成带显示器的书面字母。

绪论

在这个项目中,我们的主要目的是开发一款智能手套,帮助使用手语的人在日常生活中轻松交流。

学习手语是一个要求很高的过程。因此,许多健康人并不了解这个过程。在这款智能手套的帮助下,那些健康的人将能够理解那些使用手语的人。智能手套还可以用作想要学习手语的健康人的模拟器。

这个项目主要涉及到模拟字母,字母是语言的基石。在这个项目中,我们使用 FPGA 来实现将手势模拟为视觉字母的算法检测手势是通过手指上的柔性传感器测量出手的形状。

vga监视器用于直观显示FPGA中转换为字母的手势。

e90550ae-b8ec-11ed-bfe3-dac502259ad0.pnge92e4716-b8ec-11ed-bfe3-dac502259ad0.pnge94fdb9c-b8ec-11ed-bfe3-dac502259ad0.png

e9692584-b8ec-11ed-bfe3-dac502259ad0.png

上三图说明了 VGA 控制器产生的时序信号。控制器包含两个计数器。一个计数器在像素时钟上递增并控制 h_sync(水平同步)信号的时序。通过将其设置为显示时间从计数器值 0 开始,计数器值在显示时间内等于像素的列坐标。水平显示时间之后是消隐时间,消隐时间包括水平前沿、水平同步脉冲本身和水平后沿,每个都有指定的持续时间。在行的末尾,计数器重置以开始下一行。v_sync 计数器在垂直轴内应用相同的操作。

使用这些计数器,VGA 控制器输出水平同步、垂直同步、显示启用和像素坐标信号。每个 VGA 模式的同步脉冲被指定为正极性或负极性。

ea2c86c8-b8ec-11ed-bfe3-dac502259ad0.png

我们首先创建随机图像并使用 RGB 信号改变它们的颜色,如上图所示。

ea5311d0-b8ec-11ed-bfe3-dac502259ad0.png

要在屏幕上显示文本或字符串,有一个众所周知的 Font Rom Map -上图 - 包括所有 ASCII 字符(每个字符为 8x16 位)。通过使用 Font Rom,我们的代码现在能够在显示器上书写文本或字母,如下图所示 。

ea991d42-b8ec-11ed-bfe3-dac502259ad0.png

为了转换来自柔性传感器的模拟数据,我们使用了ADC-每通道具有 12 位分辨率。由于 4 个手指足以执行大多数手语字母,因此一个 4 通道ADC就足够了。

ADC的通信的逻辑如下图所示。

eae1dbe0-b8ec-11ed-bfe3-dac502259ad0.png

eb5640de-b8ec-11ed-bfe3-dac502259ad0.png

作为总结,项目的架构如下图所示。

eb6ae30e-b8ec-11ed-bfe3-dac502259ad0.pngeb87a688-b8ec-11ed-bfe3-dac502259ad0.pngeba02212-b8ec-11ed-bfe3-dac502259ad0.png

作为参考手语,我们使用了ASL,它具有下图中的手势。

ebe129ba-b8ec-11ed-bfe3-dac502259ad0.png

ec0a103c-b8ec-11ed-bfe3-dac502259ad0.png

现在执行工程就可以识别到上图中标记的字母。





审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • FPGA
    +关注

    关注

    1624

    文章

    21597

    浏览量

    601009
  • 显示器
    +关注

    关注

    21

    文章

    4915

    浏览量

    139702
  • 控制器
    +关注

    关注

    112

    文章

    16064

    浏览量

    176919
  • VGA
    VGA
    +关注

    关注

    5

    文章

    521

    浏览量

    62735

原文标题:优秀的IC/FPGA开源项目(六)-手语字母翻译器

文章出处:【微信号:Open_FPGA,微信公众号:OpenFPGA】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    开源项目!设计智能手语翻译眼镜

    这个项目是款创新的智能手语翻译眼镜,它能够实时地将手语转换为听得见的语音。这款眼镜采用了VIAM平台和树莓派Zero 2 W,能够帮助聋人或听力受损的人士更自由、独立地与他人交流,
    发表于 05-20 15:59

    【苏南全球创客大赛第名】手语翻译手套

    本帖最后由 ℡↘卟放棄 于 2016-3-30 10:07 编辑 国内第款可翻译手语手套
    发表于 05-06 12:46

    Fortran的程序,要翻译成matlab

    不知有哪位大神,能帮下忙,有段Fortran的程序,要翻译成matlab,翻译些但数据不对
    发表于 02-18 20:58

    cold crank, warm crank 具体翻译成中文是什么

    cold crank, warm crank 翻译成中文具体是什么场景, 越详细越好!想入门汽车电子的小白现行谢过!
    发表于 05-23 14:26

    请问snap翻译成中文是什么?

    snap翻译成中文是什么 我查没有对应的翻译
    发表于 05-07 07:35

    机器人手语翻译器Project Aslan的介绍

    目前已经有些技术尝试弥合听觉和聋人社区和正常人之间的差距,包括将手势转换为文字或音频的智能手套和平板电脑设备,甚至来自东芝的全尺寸机器人。现在,安特卫普大学的个团队正在开发一种机器
    发表于 09-19 19:00 5次下载

    Magic Leap头戴式设备识别手语和文本“感官眼镜”

    设备检测和翻译手语的方法。新专利信息的另部分详细介绍了使用头戴式设备识别标牌和店面上的文字,并将该文本翻译成耳机中显示信息的能力。Magi
    发表于 03-21 14:36 2038次阅读

    纽约大学学生创建AR应用程序_可实时翻译手语

    虽然Magic Leap可能计划在不久的将来推出智能眼镜的手语翻译服务,但现在纽约大学的学生们已经证明,在智能手机和原型应用的今天,这成就
    的头像 发表于 03-31 09:09 4786次阅读

    SignAloud手套将美语手语翻译成英语

    )翻译成英语,然后将之说出来。它叫做SignAloud手套。 这两名学生也因此获得了10000美元的勒梅森-麻省理工学生奖金(Lemelson-MIT Student Prize)。这款手套内置有传感
    的头像 发表于 04-24 02:44 4124次阅读

    为什么国内将silicon翻译成硅而不是矽

    提到半导体,大家都知道各种处理、闪存、内存等芯片都是基于半导体技术的,而我们现在常用的半导体实质上是硅基半导体,硅是这个行业最重要的材料。说到硅,很多人也见过另个词矽,为什么国内现在翻译成硅而不是矽了呢?
    的头像 发表于 12-21 11:25 5673次阅读

    研究人员发明使用智能手机应用程序将手语翻译语音的智能手套

    研究小组认为这种手套可以帮助更多的人学习手语。这个手套里面是个系统,手套上边有薄薄的、可伸缩的传感
    的头像 发表于 07-15 14:26 2930次阅读

    Facebook的AI翻译系统能翻译100语言!

    近日,Facebook 宣称已经开发出一种人工智能翻译系统,能够在 100 语言之间进行精确翻译,而不需要像许多现有 AI
    的头像 发表于 10-30 09:25 2845次阅读

    借助手部动作控制机械臂的手语翻译成文本和语音手套

    电子发烧友网站提供《借助手部动作控制机械臂的手语翻译成文本和语音手套.zip》资料免费下载
    发表于 10-21 11:57 0次下载
    借助手部动作控制机械臂的<b class='flag-5'>手语</b><b class='flag-5'>翻译成</b>文本和语音<b class='flag-5'>手套</b>

    Arduino手语手套

    电子发烧友网站提供《Arduino手语手套.zip》资料免费下载
    发表于 11-30 14:25 0次下载
    Arduino<b class='flag-5'>手语</b><b class='flag-5'>手套</b>

    基于Arduino Nano R3的手语翻译手套

    该项目的成立只有个目的,即帮助聋人社区轻松地与附近的环境进行交流和互动。目的是转换代表脚本中提到的 26 个英文字母的基本符号,并将它们显示智能手机屏幕上。电路组装项目详情该项目的
    发表于 12-21 10:47 0次下载