0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

一種可將手語(yǔ)字母翻譯成帶顯示器書(shū)面字母的智能手套

OpenFPGA ? 來(lái)源:OpenFPGA ? 2023-03-03 09:54 ? 次閱讀

一種智能手套,可將手語(yǔ)字母翻譯成帶顯示器的書(shū)面字母。

緒論

在這個(gè)項(xiàng)目中,我們的主要目的是開(kāi)發(fā)一款智能手套,幫助使用手語(yǔ)的人在日常生活中輕松交流。

學(xué)習(xí)手語(yǔ)是一個(gè)要求很高的過(guò)程。因此,許多健康人并不了解這個(gè)過(guò)程。在這款智能手套的幫助下,那些健康的人將能夠理解那些使用手語(yǔ)的人。智能手套還可以用作想要學(xué)習(xí)手語(yǔ)的健康人的模擬器。

這個(gè)項(xiàng)目主要涉及到模擬字母,字母是語(yǔ)言的基石。在這個(gè)項(xiàng)目中,我們使用 FPGA 來(lái)實(shí)現(xiàn)將手勢(shì)模擬為視覺(jué)字母的算法。檢測(cè)手勢(shì)是通過(guò)手指上的柔性傳感器測(cè)量出手的形狀。

vga監(jiān)視器用于直觀顯示FPGA中轉(zhuǎn)換為字母的手勢(shì)。

e90550ae-b8ec-11ed-bfe3-dac502259ad0.pnge92e4716-b8ec-11ed-bfe3-dac502259ad0.pnge94fdb9c-b8ec-11ed-bfe3-dac502259ad0.png

e9692584-b8ec-11ed-bfe3-dac502259ad0.png

上三圖說(shuō)明了 VGA 控制器產(chǎn)生的時(shí)序信號(hào)??刂破靼瑑蓚€(gè)計(jì)數(shù)器。一個(gè)計(jì)數(shù)器在像素時(shí)鐘上遞增并控制 h_sync(水平同步)信號(hào)的時(shí)序。通過(guò)將其設(shè)置為顯示時(shí)間從計(jì)數(shù)器值 0 開(kāi)始,計(jì)數(shù)器值在顯示時(shí)間內(nèi)等于像素的列坐標(biāo)。水平顯示時(shí)間之后是消隱時(shí)間,消隱時(shí)間包括水平前沿、水平同步脈沖本身和水平后沿,每個(gè)都有指定的持續(xù)時(shí)間。在行的末尾,計(jì)數(shù)器重置以開(kāi)始下一行。v_sync 計(jì)數(shù)器在垂直軸內(nèi)應(yīng)用相同的操作。

使用這些計(jì)數(shù)器,VGA 控制器輸出水平同步、垂直同步、顯示啟用和像素坐標(biāo)信號(hào)。每個(gè) VGA 模式的同步脈沖被指定為正極性或負(fù)極性。

ea2c86c8-b8ec-11ed-bfe3-dac502259ad0.png

我們首先創(chuàng)建隨機(jī)圖像并使用 RGB 信號(hào)改變它們的顏色,如上圖所示。

ea5311d0-b8ec-11ed-bfe3-dac502259ad0.png

要在屏幕上顯示文本或字符串,有一個(gè)眾所周知的 Font Rom Map -上圖 - 包括所有 ASCII 字符(每個(gè)字符為 8x16 位)。通過(guò)使用 Font Rom,我們的代碼現(xiàn)在能夠在顯示器上書(shū)寫(xiě)文本或字母,如下圖所示 。

ea991d42-b8ec-11ed-bfe3-dac502259ad0.png

為了轉(zhuǎn)換來(lái)自柔性傳感器的模擬數(shù)據(jù),我們使用了ADC-每通道具有 12 位分辨率。由于 4 個(gè)手指足以執(zhí)行大多數(shù)手語(yǔ)字母,因此一個(gè) 4 通道ADC就足夠了。

ADC的通信的邏輯如下圖所示。

eae1dbe0-b8ec-11ed-bfe3-dac502259ad0.png

eb5640de-b8ec-11ed-bfe3-dac502259ad0.png

作為總結(jié),項(xiàng)目的架構(gòu)如下圖所示。

eb6ae30e-b8ec-11ed-bfe3-dac502259ad0.pngeb87a688-b8ec-11ed-bfe3-dac502259ad0.pngeba02212-b8ec-11ed-bfe3-dac502259ad0.png

作為參考手語(yǔ),我們使用了ASL,它具有下圖中的手勢(shì)。

ebe129ba-b8ec-11ed-bfe3-dac502259ad0.png

ec0a103c-b8ec-11ed-bfe3-dac502259ad0.png

現(xiàn)在執(zhí)行工程就可以識(shí)別到上圖中標(biāo)記的字母。





審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • FPGA
    +關(guān)注

    關(guān)注

    1624

    文章

    21539

    瀏覽量

    600483
  • 顯示器
    +關(guān)注

    關(guān)注

    21

    文章

    4891

    瀏覽量

    139642
  • 控制器
    +關(guān)注

    關(guān)注

    112

    文章

    16031

    瀏覽量

    176652
  • VGA
    VGA
    +關(guān)注

    關(guān)注

    5

    文章

    520

    瀏覽量

    62708

原文標(biāo)題:優(yōu)秀的IC/FPGA開(kāi)源項(xiàng)目(六)-手語(yǔ)字母翻譯器

文章出處:【微信號(hào):Open_FPGA,微信公眾號(hào):OpenFPGA】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    開(kāi)源項(xiàng)目!設(shè)計(jì)智能手語(yǔ)翻譯眼鏡

    這個(gè)項(xiàng)目是款創(chuàng)新的智能手語(yǔ)翻譯眼鏡,它能夠?qū)崟r(shí)地將手語(yǔ)轉(zhuǎn)換為聽(tīng)得見(jiàn)的語(yǔ)音。這款眼鏡采用了VIAM平臺(tái)和樹(shù)莓派Zero 2 W,能夠幫助聾人或聽(tīng)力受損的人士更自由、獨(dú)立地與他人交流,
    發(fā)表于 05-20 15:59

    【蘇南全球創(chuàng)客大賽第名】手語(yǔ)翻譯手套

    本帖最后由 ℡↘卟放棄 于 2016-3-30 10:07 編輯 國(guó)內(nèi)第款可翻譯手語(yǔ)手套
    發(fā)表于 05-06 12:46

    Fortran的程序,要翻譯成matlab

    不知有哪位大神,能幫下忙,有段Fortran的程序,要翻譯成matlab,翻譯些但數(shù)據(jù)不對(duì)
    發(fā)表于 02-18 20:58

    cold crank, warm crank 具體翻譯成中文是什么

    cold crank, warm crank 翻譯成中文具體是什么場(chǎng)景, 越詳細(xì)越好!想入門(mén)汽車(chē)電子的小白現(xiàn)行謝過(guò)!
    發(fā)表于 05-23 14:26

    請(qǐng)問(wèn)snap翻譯成中文是什么?

    snap翻譯成中文是什么 我查沒(méi)有對(duì)應(yīng)的翻譯
    發(fā)表于 05-07 07:35

    機(jī)器人手語(yǔ)翻譯器Project Aslan的介紹

    目前已經(jīng)有些技術(shù)嘗試彌合聽(tīng)覺(jué)和聾人社區(qū)和正常人之間的差距,包括將手勢(shì)轉(zhuǎn)換為文字或音頻的智能手套和平板電腦設(shè)備,甚至來(lái)自東芝的全尺寸機(jī)器人。現(xiàn)在,安特衛(wèi)普大學(xué)的個(gè)團(tuán)隊(duì)正在開(kāi)發(fā)一種機(jī)器
    發(fā)表于 09-19 19:00 ?5次下載

    Magic Leap頭戴式設(shè)備識(shí)別手語(yǔ)和文本“感官眼鏡”

    設(shè)備檢測(cè)和翻譯手語(yǔ)的方法。新專(zhuān)利信息的另部分詳細(xì)介紹了使用頭戴式設(shè)備識(shí)別標(biāo)牌和店面上的文字,并將該文本翻譯成耳機(jī)中顯示信息的能力。Magi
    發(fā)表于 03-21 14:36 ?2025次閱讀

    紐約大學(xué)學(xué)生創(chuàng)建AR應(yīng)用程序_可實(shí)時(shí)翻譯手語(yǔ)

    雖然Magic Leap可能計(jì)劃在不久的將來(lái)推出智能眼鏡的手語(yǔ)翻譯服務(wù),但現(xiàn)在紐約大學(xué)的學(xué)生們已經(jīng)證明,在智能手機(jī)和原型應(yīng)用的今天,這成就
    的頭像 發(fā)表于 03-31 09:09 ?4776次閱讀

    SignAloud手套將美語(yǔ)手語(yǔ)翻譯成英語(yǔ)

    )翻譯成英語(yǔ),然后將之說(shuō)出來(lái)。它叫做SignAloud手套。 這兩名學(xué)生也因此獲得了10000美元的勒梅森-麻省理工學(xué)生獎(jiǎng)金(Lemelson-MIT Student Prize)。這款手套內(nèi)置有傳感
    的頭像 發(fā)表于 04-24 02:44 ?4110次閱讀

    為什么國(guó)內(nèi)將silicon翻譯成硅而不是矽

    提到半導(dǎo)體,大家都知道各種處理、閃存、內(nèi)存等芯片都是基于半導(dǎo)體技術(shù)的,而我們現(xiàn)在常用的半導(dǎo)體實(shí)質(zhì)上是硅基半導(dǎo)體,硅是這個(gè)行業(yè)最重要的材料。說(shuō)到硅,很多人也見(jiàn)過(guò)另個(gè)詞矽,為什么國(guó)內(nèi)現(xiàn)在翻譯成硅而不是矽了呢?
    的頭像 發(fā)表于 12-21 11:25 ?5641次閱讀

    研究人員發(fā)明使用智能手機(jī)應(yīng)用程序?qū)?b class='flag-5'>手語(yǔ)翻譯語(yǔ)音的智能手套

    研究小組認(rèn)為這種手套可以幫助更多的人學(xué)習(xí)手語(yǔ)。這個(gè)手套里面是個(gè)系統(tǒng),手套上邊有薄薄的、可伸縮的傳感
    的頭像 發(fā)表于 07-15 14:26 ?2918次閱讀

    Facebook的AI翻譯系統(tǒng)能翻譯100語(yǔ)言!

    近日,F(xiàn)acebook 宣稱已經(jīng)開(kāi)發(fā)出一種人工智能翻譯系統(tǒng),能夠在 100 語(yǔ)言之間進(jìn)行精確翻譯,而不需要像許多現(xiàn)有 AI
    的頭像 發(fā)表于 10-30 09:25 ?2813次閱讀

    借助手部動(dòng)作控制機(jī)械臂的手語(yǔ)翻譯成文本和語(yǔ)音手套

    電子發(fā)燒友網(wǎng)站提供《借助手部動(dòng)作控制機(jī)械臂的手語(yǔ)翻譯成文本和語(yǔ)音手套.zip》資料免費(fèi)下載
    發(fā)表于 10-21 11:57 ?0次下載
    借助手部動(dòng)作控制機(jī)械臂的<b class='flag-5'>手語(yǔ)</b><b class='flag-5'>翻譯成</b>文本和語(yǔ)音<b class='flag-5'>手套</b>

    Arduino手語(yǔ)手套

    電子發(fā)燒友網(wǎng)站提供《Arduino手語(yǔ)手套.zip》資料免費(fèi)下載
    發(fā)表于 11-30 14:25 ?0次下載
    Arduino<b class='flag-5'>手語(yǔ)</b><b class='flag-5'>手套</b>

    基于Arduino Nano R3的手語(yǔ)翻譯手套

    該項(xiàng)目的成立只有個(gè)目的,即幫助聾人社區(qū)輕松地與附近的環(huán)境進(jìn)行交流和互動(dòng)。目的是轉(zhuǎn)換代表腳本中提到的 26 個(gè)英文字母的基本符號(hào),并將它們顯示智能手機(jī)屏幕上。電路組裝項(xiàng)目詳情該項(xiàng)目的
    發(fā)表于 12-21 10:47 ?0次下載