Яриа/Текст хувиргах бээлий дохио: 5 алхам

2024 Зохиолч: John Day | [email protected]. Хамгийн сүүлд өөрчлөгдсөн: 2024-01-30 11:01

Энэхүү төслийг хэрэгжүүлэх санаа/түлхэц нь яриа ашиглан харилцахад бэрхшээлтэй байгаа хүмүүст туслах, гарын дохио зангаа ашиглан харилцах эсвэл Америкийн гарын үсэг (ASL) гэж нэрлэдэг. Энэхүү төсөл нь дохионы хэлийг ойлгодоггүй бусад хүмүүстэй хамтран ажиллах орчинд хамтран ажиллах боломжийг бүрдүүлэх алхам болно. Түүнчлэн, энэхүү төсөл нь тэдэнд жинхэнэ хүний орчуулагч ашиглахгүйгээр олон нийтийн өмнө үг хэлэх боломжийг олгоно. Эхлээд би зөвхөн A, B, I гэх мэт цагаан толгойн зарим хялбар дохиог олж илрүүлэхийг оролдож байсан бөгөөд 'Сайн уу', 'Өглөөний мэнд' гэх мэт нийтлэг үгс/мэндчилгээнд тодорхой дохио зангаа өгсөн.

Алхам 1: Хэлхээний угсралт

Алхам 2: Төслийн дэлгэрэнгүй мэдээлэл

Энэхүү төсөл нь жижиг, дунд, долоовор хуруу, эрхий хуруунд зориулагдсан 4 уян мэдрэгч бүхий бээлийд наасан/бэхлэгдсэн өмсдөг бээлий багтсан болно. Flex мэдрэгчийг Arduino Uno R3 дээр аналог оролтын зүүг ашиглах боломж хязгаарлагдмал, мөн хуруугаараа дохионы хэлээр харуулсан бие даасан хөдөлгөөн байхгүйн улмаас цагираган хуруунд ашиглаагүй болно. MMA8452Q хурдатгал хэмжигчийг бас гарын ар тал дээр наасан бөгөөд гарын чиглэлийг хэмждэг. Эдгээр мэдрэгчийн оролтыг шинжилж, дохио зангаа мэдрэхэд ашигладаг. Зан үйлийг мэдэрсний дараа харгалзах тэмдэгт/мессежийг хувьсагч болгон хадгална. Эдгээр тэмдэгтүүд болон зурвасууд нь өгүүлбэр дууссан болохыг илтгэсэн тодорхой дохио зангаа хийх хүртэл хоорондоо нийлсээр байх болно. Энэхүү тусгай дохиог илрүүлсний дараа хадгалсан өгүүлбэрийн мөрийг Arduino USB кабелиар Raspberry Pi руу илгээдэг. Raspberry Pi дараа нь хүлээн авсан утсыг Полли нэртэй Amazon Cloud Service рүү илгээж, текст хэлбэрээр хүлээн авсан өгүүлбэрийг ярианы формат руу хөрвүүлж, дараа нь AUX кабелиар Raspberry Pi -тай холбогдсон спикер дээр хүлээн авсан яриаг дамжуулдаг.

Энэхүү төсөл нь үзэл баримтлалын нотолгоо байсан бөгөөд илүү сайн тоног төхөөрөмж, төлөвлөлт, бусад олон дохио зангаа, гар хөдөлгөөнийг илрүүлэхийн тулд илүү сайн тохируулагдсан болно. Одоогийн байдлаар зөвхөн дохио зангаа илрүүлэх, текстээс яриаг дамжуулах гэх мэт хязгаарлагдмал функцуудыг энэ төсөлд програмчилсан болно.

Алхам 3: Код

Алхам 4: Алхам

1. Уян хатан мэдрэгч ба акселерометр MMA8452Q -ийг Arduino -той холбосон схемийн дагуу холбоно уу.

2. Final_Project.ino (Arduino_code.zip файлд байгаа) програмыг Arduino руу хаяна.

3. Arduino -г Raspberry Pi -тэй USB кабелиар холбоно уу. (Кабелийн төрөл A/B).

4. Raspberry Pi -г асаагаад Raspberry_pi_code.zip файлыг Raspberry Pi руу хуулж аваад задлаарай. Чанга яригчийг Raspberry Pi руу холбоно уу.

5. AWS дансны итгэмжлэлийг өөрөөр хэлбэл aws_access_key_id, aws_secret_access_key болон aws_session_token файлуудыг ~/.aws/итгэмжлэлийн файлд хуулж аваарай. Энэ алхам нь AWS үүлтэй харилцах, AWS үйлчилгээг ашиглахад шаардлагатай.

6. 4 -р алхамд задалсан хавтас дотор байгаа seria_test.py програмыг ажиллуулна уу.

7. Одоо дохио зангаа хийж өгүүлбэр үүсгээд дараа нь тусгай дохио зангаа хий (хуруу, алгаа шулуун, алгаа өөрөөсөө харсан байдлаар эгнээнд байлга, дараа нь бугуйгаа эргүүлээд доошоо эргүүл. Тантай нүүр тулж, хурууны үзүүр нь хөл рүүгээ доош чиглүүлж байна.) өгүүлбэр дууссан гэсэн дохио.

8. Хэрэгтэй мэдээлэл авахын тулд терминалыг үргэлжлүүлэн шалгаж байгаарай.

9. Мөн хөрвүүлсэн яриаг чанга яригч дээр цацаж байгааг сонсоорой.

Алхам 5: Ашигласан материал

1.

2.

3.

4.