IoT. Կառավարեք HoloLens- ը ՝ օգտագործելով ձեր հոնքերը (EMG) ՝ 5 քայլ

2024 Հեղինակ: John Day | [email protected]. Վերջին փոփոխված: 2024-01-30 09:47

Այս նախագիծը Կոլորադո Բոուլդերի համալսարանի NASA SUITS նախագծի մի մասն էր, որը ներկայացվել և փորձարկվել էր NASA JSC- ում 2019 թվականի ապրիլին: Այդ տարվա ծրագրի համար ես ապարատային մշակման նախագծի ղեկավարն էի և սա իմ ներդրումներից մեկն էր: Կարդացեք ավելին NASA SUITS մարտահրավերի մասին այստեղ:

Այս նախագծով ես ուզում էի որևէ մեկին (այս դեպքում EVA տիեզերագնացներին) թույլատրել շփվել Heads-Up-Display (HUD)-ի հետ, որը տեղակայված է Microsoft HoloLens- ում ՝ առանց ներկառուցված ձեռքի ժեստերի կամ ձայնային ներածումների օգտագործման: Ես լուծեցի այս նպատակը մատչելիության տեսանկյունից, ես ուզում էի զարգացնել ծայրամասային/կրելի սարք, որը թույլ կտար EVA տիեզերագնացներին միջամտել իրենց էկրանին ՝ առանց գրունտային վերահսկողության հետ հաղորդակցություն ունենալու, և նրանց բարձր ճնշման ձեռնոցների պատճառով ժեստերի միջերեսն անհիմն է: Թեև սա մի տիրույթ է, որին ես որոշ չափով անծանոթ եմ, բայց կարող եմ նաև տեսնել, որ այս ծայրամասային սարքը օգտակար է հաշմանդամություն ունեցող անձանց համար, ինչը թույլ է տալիս նրանց օգտագործել HoloLens- ը կամ այլ AR/VR սարքեր և հրաժարվել միջերեսային մուտքերից, որոնք բացառիկ կամ սարսափեցնող են:

Թեև այս նախագծի իրերի ցանկը բացառիկ է (HoloLens- ը շատ թանկ է), ծայրամասային սարքը կարող է օգտագործվել AR/VR այլ սարքերի հետ:

Եթե ունեք որևէ հարց, ցանկանում եք հետևել իմ աշխատանքին կամ պարզապես գաղափարներ շպրտել, խնդրում եմ դա անել իմ Twitter- ում ՝ @4Eyes6Senses:

Պարագաներ

Microsoft HoloLens (կամ այլ AR/VR սարք)

Ֆոտոն մասնիկ

MyoWare Muscle Sensor - MyoWare սենսորը կարող է փոխարինվել այլ ԷՄԳ ճեղքման տախտակներով: Եթե վստահ չեք, թե որտեղ է EMG- ն, առաջարկում եմ դրա մասին ավելին կարդալ այստեղ

Կենսաբժշկական սենսորային բարձիկներ

Միասնություն (անվճար)

Միասնության մեջ նախագծերի ստեղծման որոշակի փորձ

Մետաղալար

Քայլ 1. MyoWare- ի միացում մասնիկի ֆոտոնի հետ

Particle Photon- ը MyoWare տախտակին միացնելը բավականին պարզ է: Այս քայլի համար ձեզ հարկավոր է միացնել Particle Photon- ի և MyoWare տախտակի միջև կապերը: Համոզվեք, որ դուք ունեք ամուր կապեր, որպեսզի մալուխները չկոտրվեն սարքը կրելիս: Ընդմիջումներից խուսափելու համար խորհուրդ եմ տալիս հյուսել մալուխները դրանք Photon- ում զոդելուց առաջ:

- Մետաղալար կպցրեք MyoWare տախտակի «+» պորտին, այնուհետև մալուխի մյուս ծայրը կպցրեք Ֆոտոնի «3v3» պինին:

- Լարը միացրեք MyoWare տախտակի «-» պորտին, այնուհետև մալուխի մյուս ծայրը կպցրեք Ֆոտոնի «GND» կապում:

- Լարը կպցրեք MyoWare տախտակի «SIG» նավահանգստին, այնուհետև մալուխի մյուս ծայրը կպցրեք Ֆոտոնի «A0» կապում:

Քայլ 2. Կոդի վերբեռնում մասնիկի ֆոտոնին

Օգտագործելով Particle Photon- ի IDE- ն ՝ վերբեռնեք.ino ֆայլը: Տեղադրեք MyoWare տախտակը մկանային խմբի վրա և ստուգեք արժեքները `համոզվելու համար, որ ձեր սարքն աշխատում է: Երբ նայում եք ծածկագրին, կնկատեք, որ արդեն գոյություն ունի «շեմ» փոփոխական: Այս փոփոխականն այն նվազագույն արժեքն է, որը MyoWare- ը կարդում է իմ մկանից, երբ հոնքս լիովին բարձրացնում եմ: Ես նաև փոփոխականը սահմանեցի «600», որովհետև դա թույլ տվեց նորմալ խոսակցություններ վարել MyoWare- ը կրելիս ՝ առանց որևէ կեղծ պոզիտիվ ստեղծելու (պատահական հրահրում):

Քայլ 3. MyoWare- ի տեղադրում

Մեր NASA SUITS նախագծի համար ես ընտրեցի տեղադրել MyoWare տախտակը հոնքի վերևում: Ինձ ոգեշնչեց տեղադրել MyoWare- ն այնտեղ, երբ դիտեցի Adafruit- ի «'Sup Brows» նախագիծը: Որոշ փորձարկումներից հետո պարզ դարձավ, որ հոնքերը հիանալի վայր են այս կոնկրետ նախագծի համար: Դա հիանալի վայր է, քանի որ սենսորների վրա չեն ազդի ձեռքերի, ոտքերի և իրանի միջոցով մկանների մշտական շարժումները, որոնք կատարում են EVA տիեզերագնացները տիեզերագնացության ժամանակ:

Քայլ 4. MyoWare- ի միացումը միասնության հետ

Այժմ եկել է վերջին քայլի ժամանակը, եկեք MyoWare- ը միացնենք Unity- ի հետ: Այս Instructable- ում ներառված է այն սցենարը, որը ձեզ հարկավոր է ներառել ձեր Unity նախագծում: Բայց առաջին հերթին, դուք պետք է մի քանի բան փոխեք ծածկագրում: Նախ, դուք պետք է ձեր նախագծում ավելացնեք JSON Object Unity հավելումը: Հաջորդը, ձեզ հարկավոր է ավելացնել ձեր սարքի ID- ն և մուտքի նշանը 19 -րդ տողում: մուտքի նշան] »: Դուք կարող եք ձեր սարքի ID- ն ստանալ Particle IDE- ից, նկար 2 -ից հետո, կտտացրեք ձեր սարքերի ներդիրին (կարմիր տուփ) և ձեր սարքի անվան տակ փնտրեք ՝ գտնելու ձեր ID- ն (կապույտ վանդակ): Հաջորդը, ձեր մուտքի նշանը գտնելու համար կտտացրեք IDE- ի կարգավորումների ներդիրին:

Քայլ 5: Կատարված է:

Ձեր Unity նախագիծն ավարտելուց հետո կունենաք EMG- ով վերահսկվող HoloLens:

Եթե ունեք որևէ խորքային հարցեր, ցանկանում եք սովորել մարդու աճի մասին, ցանկանում եք հետևել իմ աշխատանքին կամ պարզապես գաղափարներ շպրտել, խնդրում եմ դա անել իմ Twitter- ում.

Եթե Ձեզ հետաքրքրում է աշխատել մեր թիմի հետ NASA SUITS մարտահրավերին 2019 - 2020, խնդրում եմ ինձ էլ.

Հատուկ շնորհակալություն առաջին նկարի մոդելին ՝ Դարենին, ով նաև դիզայնը փորձարկեց ՆԱՍԱ -ում: Մեկ այլ շնորհակալություն ծրագրավորման իմ գործընկերոջը AJ նախագծի համար, որը շատ բան հնարավոր դարձրեց: