Lwm Txoj Kev Sib Txuas Lus (CoCoA): 8 Kauj Ruam (nrog Duab)

2024 Tus sau: John Day | [email protected]. Kawg hloov kho: 2024-01-30 09:26

Txoj Haujlwm CoCoA yog lub tsho khiab hnav uas txuas nrog rau hauv internet uas muab cov cim kev sib tham ntawm lwm txoj kev sib txuas lus los pab tib neeg hais lus lossis tsis hais lus tsis zoo. Cov ntawv luv CoCoa los ntawm kev tshem tawm ntawm lub npe Portuguese: Colete de Comunicação Assistiva.

Kev hais lus tsis zoo cuam tshuam rau cov neeg uas muaj autism, aphasia, ua rau lub cev tsis taus, ib nrab lossis tag nrho cov lag ntseg, ntawm lwm yam teeb meem. Nyob rau hauv cov xwm txheej ntawm autism, tsis hais lus lossis ncua kev hais lus feem ntau tuaj. Kev tsis hais lus kuj tseem tuaj yeem ua rau neeg xiam oob qhab ib ntus vim qee yam mob.

Kev hais lus tsis zoo, tas mus li lossis ib ntus, xav tau kev saib xyuas thiab kho, vim tias lub peev xwm no tseem ceeb rau kev sib raug zoo. Alo, kev hais lus yog qhov txuj ci tseem ceeb rau cov tib neeg uas muaj lwm yam mob lossis xiam oob qhab nthuav tawm lawv cov kev xav tau.

Hauv cov ntsiab lus no, Kev Pabcuam Sib Txuas Lus (AC) tau siv los pab cov neeg tsis muaj peev xwm hais lus sib txuas lus nrog lawv tsev neeg, kws kho mob, thiab lwm tus. Pictograms yog ib qho ntawm feem ntau siv AC, txij li tus neeg tuaj yeem taw tes rau cov cim ruaj khov ntawm cov ntsiab lus tseem ceeb hauv tsev lossis siv daim ntawv thov uas hais cov cim no, xws li Proloquo2Go.

Txawm li cas los xij, daim duab lub cev tsuas tuaj yeem siv sib txuas lus nrog lwm tus hauv ib puag ncig ib puag ncig, uas ua rau nws nyuaj rau ib tus neeg los sib tham nrog lawv cov neeg saib xyuas yog tias lawv xav tau sai thiab lawv nyob hauv lwm qhov chaw ib puag ncig.

Qhov Kev Sib Txuas Lus Sib Txuas (CoCoA) yog lub tsho khiab hauv internet uas siv tau yooj yim uas ua rau muaj kev sib txuas ntawm lwm yam kev sib txuas lus piv txwv los pab tib neeg nrog kev hais lus lossis tsis hais lus tsis zoo los nthuav qhia lawv cov kev xav tau rau cov neeg saib xyuas, kws kho mob, kws qhia ntawv thiab lwm tus kws tshaj lij kev noj qab haus huv, yam tsis muaj lawv ib txwm muaj nyob hauv ib puag ncig ib yam li tus neeg xiam oob qhab, yog li ua kom saib xyuas yooj yim dua.

CoCoA yuav tso cai rau tus neeg siv suav nrog rau rau rau AC cim tso cai rau tus neeg siv los ua qhov sib txawv ua ke. Thaum lub pob cuam tshuam nrog lub cim raug nias ob qhov ua:

1) Lub suab sib haum nrog qhov kev xaiv tau ua los ntawm lub suab hais lus txuas rau lub tsho khuam. Kev nqis tes ua hauv cov ntawv yog xa hauv is taws nem mus rau ib tus neeg saib xyuas, kws kho mob lossis kws qhia ntawv, tso cai rau lawv ceeb toom ntawm tus neeg xav tau yog tias lawv tsis nyob hauv ib chav.

2) Txhawm rau muab kev tawm tswv yim rau tus neeg xiam oob khab, cov nyees khawm nias kuj tau ua lub teeb ci LED los qhia qhov kev xaiv ua. Yog li, kev hnav, txuas nrog, tsis cuam tshuam, nqa tau yooj yim thiab siv tau yooj yim siv kev daws teeb meem tau thov los pab cov neeg tsis muaj peev xwm hais lus sib tham lawv cov kev xav tau ntawm qhov chaw lossis nyob deb. Lub tsho khuam tsis xav tau kev siv dag zog lub cev los hnav, tuaj yeem hnav hauv ntau qhov chaw thiab pab txhawb cov neeg xiam oob khab kom ua tau raws li qhov lawv xav tau, muaj peev xwm tiv thaiv lawv kom tsis xis nyob lossis nyuaj siab.

Txoj haujlwm no tau tsim los ntawm Mauro Pichiliani ([email protected]) thiab Talita Pagani ([email protected])

Kauj Ruam 1: Cov Khoom Kho Vajtse

Peb siv cov khoom siv kho vajtse hauv qab no rau CoCoA txoj haujlwm:

* 1x DragonBoard 410C daim npav. Koj tuaj yeem hloov lub rooj tsav xwm no nrog Raspberry Pi lossis lwm lub khoos phis tawj me me, tab sis nco ntsoov qhov no yog lub cuab yeej siv tau.

* 1x NodeMCU ESP 8266 Arduino lossis lwm yam arduino nrog tsawg kawg 13 GPIO PWM chaw nres nkoj.

* 1x Mifare Qauv RC522 RFID Tag Reader Module.

* 8x Mifare RFID Cim npe.

* 8x Push Button Buttons.

* 8x LEDs ntawm ntau xim.

* 6x 330Ohm Resistors.

* 5x square meters ntawm xim av TNT ntaub.

* Cov paj rwb me me los ntim cov pawm

* 1x meter velcro pluaj.

* 8x Cov duab ntawm cov cim luam tawm ntawm daim ntawv

* 1x USB hais lus.

* 1x USB suab adapter dongle.

* 4GB miniSD nco daim npav.

* 1x roj teeb pob raws li lub zog siv (2000 mAPH thiab 12 V tso tawm).

* 20x meters ntawm cable nrog 2 xov hlau

* Cov cuab yeej dav dav (pliers, ntswj ntsia hlau, cov laug cam, phom kua nplaum, thiab lwm yam), xov hlau thiab kab xev hluav taws xob

Kauj Ruam 2: Daim Duab Flow

Txhawm rau pab nkag siab tias lub tsho khuam ua haujlwm li cas, cia peb piav qhia nws siv li cas los ntawm peb daim duab. Txheeb cov duab ntawm cov kauj ruam no rau siv.

Daim duab 1: Cov dej ntws no sawv cev rau thawj zaug siv lub tsho khuam piav qhia cov kauj ruam uas yuav tsum tau hnav nws thiab nkag mus rau cov ntaub ntawv audio uas twb tau kaw lawm.

Daim duab 2: Daim duab no qhia cov kauj ruam rau kev hloov pauv ib qho ntawm cov ntaub qhwv uas twb muaj lawm (cov rooj zaum me me) kom lwm lub cim/suab tso rau ntawm lub tsho khuam.

Daim duab 3: Daim duab no qhia cov kauj ruam rau kev hloov lub suab cuam tshuam nrog lub ncoo uas twb muaj lawm. Cov kauj ruam no tsis tau ua tiav hauv lub tsho khuam version 1.0

Kauj ruam 3: Software

Peb siv cov software hauv qab no hauv qhov haujlwm:

Arduino IDE Cov

Nab hab sej 3.5

Txoj haujlwm qhov kev cia siab sab nraud yog lub tsev qiv ntawv arduino rau kev tuav RFID nyeem ntawv module, Python twx.botapi lub tsev qiv ntawv rau cuam tshuam nrog Telegram, thiab PySerial lub tsev qiv ntawv rau nyeem/sau cov ntaub ntawv hla tus lej txuas nrog Python. Python cov tsev qiv ntawv tuaj yeem teeb tsa siv tus thawj tswj hwm pob.

Txhua qhov phiaj xwm phiaj xwm tau tsim muaj nyob hauv GitHub chaw cia hauv qab no:

github.com/pichiliani/CoCoA

Kauj Ruam 4: Txuas Cov Khoom Siv

Lub CoCoA tsim qauv tsim raws DragonBoard 410C pawg thawj coj, NodeMCU 8622 arduino, daim npav nyeem ntawv RFID, coj, nyees khawm thiab lub suab hais lus. Nws kuj tseem koom ua ke nrog Telegram bot hu ua ProjectCoCoABot uas xa xov nrog cov suab tsim tawm txhua zaus ib qho ntawm cov nyees khawm raug nias. Txheeb tus lej hauv cov kauj ruam no kom pom tag nrho ntawm kev ua tiav ntawm kev daws teeb meem.

Pib los ntawm kev txuas RFID nyeem ntawv thiab LEDs rau arduino thiab tom qab ntawd xa cov cai hauv /CocoaNodeMCUServer nplaub tshev ntawm no GitHub reposiboty. Daim duab txuas ntawm ob qho tib si LEDs thiab tus nyeem ntawv RFID tau qhia hauv cov duab qhia txog qib no.

Tom ntej no peb yuav tsum txuas lub laub khawm rau daim npav DragonBoard. Muaj daim duab thiab cov ntxhuav hauv cov duab ntawm cov kauj ruam no uas qhia txog cov chaw nres nkoj sib txuas thiab cov xaim xav tau txuas nrog.

Kauj ruam 5: Pads Tsim

Cov ntaub qhwv uas muaj cov cim yuav tsum tau tsim tom ntej. Muaj ntau lub cim thiab cov kab ke rau kev sib txuas lus tsis hais lus, tab sis peb tuaj yeem siv PECS. Cov kab ke no muaj ntau lub cim uas tuaj yeem luam tawm thiab muab tso rau ntawm lub ncoo.

Cov pawm yog cov rooj zaum me me ntsuas 10x10cm thiab tau ntim nrog paj rwb. Nws yog ib qho tseem ceeb kom nco ntsoov tso ib daim RDID tag hauv txhua lub ncoo kom koj tuaj yeem txheeb xyuas txhua lub ncoo thiab lawv lub suab sib xws.

Peb tso tib lub cim ob zaug rau sab xub ntiag ntawm txhua lub ncoo: ib qho nrog daim duab tig mus rau sab saud thiab ib qho nqes mus. Txoj hauv kev no nws muaj peev xwm rau cov neeg siv lub tsho khuam saib seb lub cim twg raug nias. Nco ntsoov muab lub velcro tso rau tom qab ntawm lub ncoo kom koj tuaj yeem txuas/tshem nws hauv lub tsho khuam

Kauj Ruam 6: Vest Assembly

Cov kauj ruam tom ntej yog kev tsim lub tsho khuam. Peb siv tus txiv neej lub tsho khuam me nyuam tuaj pwm thiab txiav rau ntawm daim ntaub kom thiaj li muaj txoj hlua. Hauv cov kab ntawv txuas no peb tuaj yeem pom qee daim qauv ntawm lub tsho khuam koj tuaj yeem luam tawm

marlenemukaimoldeinfantil.com.br/2017/02/02……

cuttingecosting.com/Pap%20collect.html

Nws yog ib qho tseem ceeb los txheeb xyuas qhov chaw nyob ntawm lub hauv ntej uas cov ntaub qhwv yuav haum. Hauv cov chaw no peb yuav tsum tso cov velcro kom cov ntaub qhwv haum kom raug. Tseem nyob rau pem hauv ntej peb tuaj yeem ua qhov rau tso cov LEDs saum toj ntawm lub ncoo.

Nyob ze rau qhov chaw ntawm lub ncoo hauv lub tsho khuam peb yuav tsum ua kom haum cov LEDs thiab txhua lub laub khawm. Nws yog ib qho tseem ceeb kom haum lub laub khawm kom lawv nyob tom qab txoj haujlwm velcro ntawm lub tsho khuam. Txoj kev no sai li sai tau thaum tus neeg siv nias lub hauv paus ntawm lub hauv ncoo nws/nws yuav yuam qhov "nyuaj" ib feem ntawm lub ncoo (rfid tag) thiab nias lub pob thawb.

Peb pom zoo kom kho txhua qhov sab hauv ntawm lub tsho khuam (LEDs, tiv thaiv, thawb cov nyees khawm thiab xov hlau) siv cov kua nplaum kub. Kev sib txuas ntawm cov xov hlau tuaj yeem ua nrog cov laug + kab xev hluav taws xob. Lwm txoj hauv kev kom tsis txhob vuam yog cov kua nplaum kub lossis siv cov ntsia thawv ntsia thawv.

Tshooj tom ntej yog tsim cov hnab me me los khaws cov khoom ntawm txhua lub ncoo. Kuj tsim lub hnab tshos nyob rau pem hauv ntej ntawm lub tsho khuam kom ze rau lub duav kom tuav tus hais lus. Nws raug nquahu kom muab ob peb txoj hlua ntawm velcro muab rau cov khaub ncaws kom ruaj khov.

Cov xov hlau uas yuav txuas rau LEDs thiab thawb cov nyees khawm ntawm txhua qhov chaw kov yuav tsum tau ua ob pawg los ntawm ob. Txoj kev no peb yuav muaj rau daim kab xev nrog ob txoj kab hluav taws xob ib leeg. Nco ntsoov tias txhua txoj kab hluav taws xob muaj ob lub xov hlau: zoo thiab tsis zoo. Nws yog ib qho tseem ceeb kom cim qhov kev txiav txim ntawm cov kab hluav taws xob thiab cov khoom siv txuas nrog rau txhua kab (coj lossis thawb khawm). Peb pom zoo kom qhwv lub xub pwg pluaj hla ob pawg ntawm peb.

Thaum cov kab thiab cov xov txuas tau txuas nrog peb tuaj yeem kaw lub tsho khuam los ntawm kev tso kab sab hauv. Thaum kawg, tsim kom muaj lub hnab tshos kab rov tav nyob tom qab ntawm lub tsho khuam kom tuav cov laug cam eletronic (NodeMCU thiab DragonBoard), USB suab txuas thiab lub roj teeb uas yuav txuas DragonBoard. Ib rooj plaub me me tau rov ua dua los tuav cov laug cam zoo dua qub.

Kauj Ruam 7: Kov Kawg thiab Xeem

Thaum cov hlua khuam khwb twb tau txuas rau sab nraum qab koj yuav tsum ua qhov sib txuas rau cov laug cam. 12 qhov kev sib txuas rau cov nyees khawm (6x2) thiab 12 qhov txuas rau LEDs xav tau.

Yuav tsum tau saib xyuas ntxiv txhawm rau txuas cov xov hlau uas nqa lub teeb liab hauv av (GND) mus rau LEDs, raws li tag nrho rau tus pin ntawm LEDs yuav tsum txuas nrog tib lub xov hlau. Ib yam li ntawd, cov pins ntawm hauv av thawb khawm (GND) yuav tsum txuas nrog tib lub xaim.

Thaum kawg, ntsaws lub dongle rau hauv USB chaw nres nkoj thiab ntsaws lub adapter rau tus hais lus, uas yuav tsum tau muab tso rau hauv lub hnab tshos pem hauv ntej ntawm lub tsho khuam. Txuas lub USB cable rau hauv NodeMCU thiab lwm USB chaw nres nkoj ntawm DragonBoard 410c daim npav. Thaum kawg, txuas lub roj teeb pob rau tus pin fais fab thiab pib CoCoaServer.py program ntawm DragonBoard board li sudo (siv SSH ntsaws lossis txuas lub saib + keyboard + nas ncaj qha rau lub rooj tsavxwm):

$ sudo nab hab sej CoCoaServer.py

Ntawm txhua lub pob nyem nias cov lus yuav tshwm ntawm lub rooj tsavxwm, lub suab sib xws yuav raug ntaus thiab cov coj ua nrog lub ncoo yuav ua si.

Kauj Ruam 8: Cov neeg ua tim khawv

Cov ntaub ntawv ntawm Lwm Txoj Kev Sib Txuas Lus: Proloquo2Go cim lub suab thov daim ntawv thov

Saba MP, Filippo D., Pereira FR, los ntawm Souza P. L. P. (2011) Hav yaa: A Haptic Warning Wearable to Support Deaf People Communication. Hauv: Vivacqua AS, Gutwin C., Borges MRS (eds) Kev Sib Koom Tes thiab Tshuab. CRIWG 2011. Lecture Notes in Computer Science, vol 6969. Springer, Berlin, Heidelberg. DOI 10.1007 / 978-3-642-23801-7_17

Python cov tsev qiv ntawv siv:

PySerial

Twx.botapi

DrabonBoard 410c Cov Ntaub Ntawv Cov Ntaub Ntawv

Arduino RFID Nyeem Ntawv Siv Piv Txwv

Cov menyuam yaus lub tsho khiab mis

marlenemukaimoldeinfantil.com.br/2017/02/07…

cortandoecosturando.com/Pap%20colete.html