የእጅ ምልክት ወደ ንግግር/ጽሑፍ ጓንት መለወጥ - 5 ደረጃዎች

2024 ደራሲ ደራሲ: John Day | [email protected]. ለመጨረሻ ጊዜ የተሻሻለው: 2024-01-30 07:30

ይህንን ፕሮጀክት ከመተግበሩ በስተጀርባ ያለው ሀሳብ/ግፊት የንግግር አጠቃቀምን ለመገናኘት እና የእጅ ምልክቶችን በመጠቀም ወይም በሰፊው በሰፊው በሚታወቀው የአሜሪካ ፊርማ ቋንቋ (ኤኤስኤል) በመጠቀም ለመግባባት የሚቸገሩ ሰዎችን ለመርዳት ነበር። ይህ ፕሮጀክት እነዚህ ሰዎች የምልክት ቋንቋውን መረዳት ካልቻሉ ከሌሎች ሰዎች ጋር በጋራ ሥራ አካባቢ እንዲሠሩ ዕድል ለመስጠት አንድ እርምጃ ሊሆን ይችላል። እንዲሁም ፣ ይህ ፕሮጀክት እውነተኛ የሰው ተርጓሚ ሳይጠቀሙ የሕዝብ ንግግሮችን እንዲሰጡ ያስችላቸዋል። እንደ መጀመሪያው ፣ አንዳንድ እንደ ቀላል ፊደሎችን ሀ ፣ ቢ ፣ እኔ ፣ ወዘተ ያሉ አንዳንድ ምልክቶችን ለመለየት እየሞከርኩ ነበር ፣ እንዲሁም እንደ ‹ሰላም› ፣ ‹መልካም ጥዋት› ፣ ወዘተ ላሉ የተለመዱ ቃላት/ሰላምታዎች የተወሰኑ ምልክቶችን/ምልክቶችን ሰጥቻለሁ።

ደረጃ 1 የወረዳ ስብሰባ

ደረጃ 2 የፕሮጀክት ዝርዝሮች

ይህ ፕሮጀክት በ 4 ተጣጣፊ ዳሳሾች/ጓንቶች ውስጥ ተጣብቀው/ተጣብቀው የሚለብሱ ጓንትን ያጠቃልላል - እያንዳንዳቸው ለትንሽ ፣ ለመካከለኛ ፣ ለመረጃ ጠቋሚዎች እና ለአውራ ጣት። ተጣጣፊ ዳሳሽ በአርዱዲኖ ዩኖ አር 3 ላይ የአናሎግ ግብዓት ፒኖች መገኘቱ እና በአጠቃላይ በምልክት ቋንቋዎች በጣቱ የሚታየው ገለልተኛ እንቅስቃሴ ባለመኖሩ ምክንያት ለቀለበት ጣት አላገለገለም። የ MMA8452Q የፍጥነት መለኪያ የእጅን አቅጣጫ ለመለካት በዘንባባው ጀርባ ላይ ተጣብቆ የሚውል ነው። የእነዚህ ዳሳሾች ግብዓት ተንትኖ የእጅ ምልክቱን ለመገንዘብ ይጠቅማል። የእጅ ምልክቱ አንዴ ከተሰማ ፣ ተጓዳኙ ገጸ -ባህሪ/መልእክት ወደ ተለዋዋጭ ይቀመጣል። የአረፍተ ነገሩን ማጠናቀቅን የሚያመለክት የተወሰነ የቅድሚያ ምልክት እስኪያደርግ ድረስ እነዚህ ቁምፊዎች እና መልእክቶች እርስ በእርስ መገናኘታቸውን ይቀጥላሉ። ያ ልዩ የእጅ ምልክት ከተገኘ በኋላ የተቀመጠው የዓረፍተ ነገር ሕብረቁምፊ በዩኤስቢ ገመድ በአርዱዲኖ ወደ Raspberry Pi ይላካል። Raspberry Pi በመቀጠል የተቀበለውን ሕብረቁምፊ በፖሊ ወደተጠራው የአማዞን ደመና አገልግሎት ይልካል ፣ በጽሑፍ ቅርጸት የተቀበለውን ዓረፍተ ነገር ወደ የንግግር ቅርጸት ይለውጠዋል እና በመቀጠል የተቀበለውን ንግግር በ “AUX” ገመድ በኩል ከ Raspberry Pi ጋር በተገናኘው ተናጋሪው ላይ ያስተላልፋል።

ይህ ፕሮጀክት የፅንሰ -ሀሳብ ማረጋገጫ እና በተሻለ የመሳሪያ ቁርጥራጮች እና እቅድ እና ብዙ ሌሎች የእጅ ምልክቶችን እና የእጅ እንቅስቃሴዎችን ለመለየት በተሻለ ሁኔታ የተስተካከለ ነበር። በአሁኑ ጊዜ በዚህ ፕሮጀክት ውስጥ እንደ መሠረታዊ የእጅ ምልክት ለይቶ ማወቅ እና ለንግግር ውፅዓት ጽሑፍ የተቀረፀው ውስን ተግባር ብቻ ነው።

ደረጃ 3 ኮድ

ደረጃ 4: ደረጃዎች

1. በተሰጠው የወረዳ ሥዕላዊ መግለጫ መሠረት ተጣጣፊ ዳሳሾችን እና የፍጥነት መለኪያ MMA8452Q ን ወደ አርዱinoኖ ያገናኙ።

2. ፕሮግራሙን Final_Project.ino (በ Arduino_code.zip ፋይል ውስጥ ይገኛል) ወደ አርዱinoኖ ይጣሉ።

3. አርዱዲኖን በዩኤስቢ ገመድ ከ Raspberry Pi ጋር ያገናኙ። (የኬብል ዓይነት ሀ/ለ)።

4. Raspberry Pi ን ያብሩ ፣ Raspberry_pi_code.zip ፋይልን ወደ Raspberry Pi ይቅዱ እና ያውጡት። ተናጋሪውን ከ Raspberry Pi ጋር ያገናኙ።

5. የ AWS መለያ ምስክርነቶችን ማለትም aws_access_key_id ፣ aws_secret_access_key እና aws_session_ ወደ ~/.aws/ምስክርነቶች ፋይል ይቅዱ። ይህ እርምጃ ከ AWS ደመና ጋር ለመገናኘት እና የ AWS አገልግሎቶችን ለመጠቀም ያስፈልጋል።

6. በደረጃ 4 በተወጣው አቃፊ ውስጥ የተገኘውን seria_test.py ፕሮግራም ያሂዱ።

7. አሁን አንድ ዓረፍተ ነገር ለመፍጠር የእጅ ምልክቶቹን ያድርጉ እና ከዚያ ልዩ ምልክቱን ያድርጉ (ጣቶችዎን እና መዳፍዎን ቀጥ ብለው እና መዳፉ ከእርስዎ ፊት ለፊት ባለው መስመር ላይ ያድርጉ ፣ እና ከዚያ የእጅ መዳፍዎን ወደታች ማዞር በመስጠት አሁን የእጅዎ መዳፍ ወደታች እንዲዞር ያድርጉት። ፊት ለፊትዎ ነው እና የጣቶችዎ ጫፍ ወደታች ወደ እግሮችዎ እየጠቆመ ነው።) የአረፍተ ነገር ማጠናቀቅን ለማመልከት።

8. ጠቃሚ መረጃ ለማግኘት ተርሚናልን መመርመርዎን ይቀጥሉ።

9. እና የተለወጠ ንግግር በድምጽ ማጉያው ላይ ሲለቀቅ ያዳምጡ።

ደረጃ 5 - ማጣቀሻዎች

1.

2.

3.

4.