Մուլտիմոդալ երաժշտական տակդիր ՝ 9 քայլ (նկարներով)

2024 Հեղինակ: John Day | [email protected]. Վերջին փոփոխված: 2024-01-30 09:52

Multimodal Music Stand (MMMS) - ը ավանդական գործիք նվագելիս (սաքս, ֆլեյտա, ջութակ, անունդ) աուդիո սինթեզն ու էֆեկտները վերահսկելու նոր միջոց է, և առաջարկում է մի քանի լրացուցիչ հնարավորություններ ընդլայնված տեխնիկայի համար, որոնք կարող են օգտագործվել նվագելիս: ! Արդեն կա մի վեբ էջ UC Santa Barbara- ի մեր խմբի նախագծի վերաբերյալ, որում մենք մշակեցինք MMMS- ը, այնպես որ այստեղ դա կրկնելու փոխարեն ես տեղադրեմ հղումը `ստուգեք այն: Multimodal Music Stand կայքը այստեղ, բայց վերևում կան ավելի լավ տեսանյութեր… Multimodal- ը վերաբերում է մեկից ավելի եղանակներով մուտքագրման ունակության ընկալման ունակությանը (աուդիո մուտք, վիդեո մուտք և սենսորների վրա հիմնված մուտք): Աուդիո և վիդեո մուտքագրումը բավականին պարզ է, ներառում է սովորական խոսափող և ձեր համակարգչին միացված տեսախցիկ, բայց սենսորի մուտքը մի փոքր ավելի բարդ է, ուստի սա ուսանելի է: Ես դասավանդում եմ UCSB- ում ՝ E-field- ի համար (նաև հայտնի է որպես capacitive sensing) հանդերձանքի հետ միասին, ինչպես ցույց է տրված այստեղ ՝ CREATE USB InterfaceThereminVisionII հավաքածու Եթե չգիտեք, թե ինչ է Theremin- ը, ինքներդ ձեզ լավություն արեք և Youtube- ում որոնեք, մի՛ հիասթափվեք MMMS- ը հիմնականում համարժեք է 2 Theremins- ին, քանի որ այն ունի 4 E-field sensing ալեհավաքներ, իհարկե, բացի աուդիո/վիդեո մուտքագրումից: Եթե դուք հետաքրքրված եք ձեր կատարողականի տեխնիկան ձեր գործիքի հետ ընդլայնելով `համագործակցելով համակարգչի հետ, բայց մի՛ ցանկացեք օգտագործել պարզ ոտնահետքեր, ինքներդ կառուցեք Multimodal Music Stand և սկսեք զբաղվել դրանով:

Քայլ 1: Ստեղծեք USB ինտերֆեյսի մասին

CREATE USB ինտերֆեյսը (CUI) PIC- ի վրա հիմնված ծրագրավորվող միացում է, որը կարող է կամ ամբողջությամբ կառուցվել ինքնուրույն, կամ կարող եք ինձանից նախապես ձեռք բերել նախապես կառուցված 50 դոլար (առաքման համար ՝+ 5), և ձեզ հարկավոր չի լինի: գնել PIC ծրագրավորող, քանի որ ես դրա վրա դրել եմ բեռնիչը … մանրամասների համար տես կայքը կամ պարզապես ինձ էլ -նամակ ուղարկեք ՝ CREATE USB Interface կայք: Հետաքրքիր նախագծեր ամբողջ աշխարհում… Սանտա Բարբարայի համալսարանի ուսանողների մի քանի օրինակներ կան այս գիտաժողովի փաստաթղթում (PDF): CUI- ն կարող է ծրագրավորվել USB մալուխի միջոցով `օգտագործելով bootloader- ը, այդ իսկ պատճառով այն հեշտությամբ հարմարվող է. Պարզապես փոխեք որոնվածը և դա այլ բան է: Օրինակ, հեշտ է CUI- ն դարձնել անլար սենսորային միջերես ՝ օգտագործելով որևէ մեկը Bluetooth մոդուլները ՝ կայծային զվարճանքից. CUI- ն ունի 10-բիթանոց անալոգային մուտքերի 13 ալիք և 16 ընդհանուր նշանակության մուտքային/ելքային կապում: Լռելյայն որոնվածը, որն առաքվում է CUI v1.0 տախտակներով, դրանք բոլորը ուղարկում է որպես ընդունող համակարգիչ և լավ է աշխատում ինտերակտիվ արվեստ ստեղծող միջավայրերի հետ, ինչպիսիք են Max/MSP/Jitter, Pd/Gem, SuperCollider, Chuck և այլն: Ես օգտագործել եմ CUI v1.0 տախտակներից մեկը `այս ուսանելիում Multimodal Music Stand- ը կառուցելու համար: Մենք օգտագործում ենք Max/MSP/Jitter- ը որպես միջավայր, բայց ամեն դեպքում ազատ զգալ հարմարեցրեք սա Pd- ին կամ ձեր ընտրած ծրագրակազմին: Ես բաց կոդի մեծ երկրպագու եմ (CUI- ն ինքն է բաց կոդ), և դա մեծապես օգնում է, եթե մենք բոլորս կանգնենք միմյանց ուսերին և բարելավենք մեր պատրաստածը:

Քայլ 2. ThereminVision II հավաքածուի մասին

ThereminVision II- ը հասանելի է ինչպես հավաքածուի ($ 50), այնպես էլ նախապես կառուցված ($ 80) վաճառողի կայքից ՝ RobotLand, և նաև բաց կոդով է. MMMS- ի համար ես գնեցի հավաքածուն, այնուհետև որոշեցի այս անգամ գնալ նախապես կառուցվածի հետ (սա իմ կառուցած երկրորդ MMMS- ն է): Մի կողմ, եթե մտածում եք, թե ինչու ես չեմ առաջարկում CREATE USB ինտերֆեյսի հավաքածուի ձև, քանի որ CUI բեռնիչը պետք է ծրագրավորվի սովորական PIC ծրագրավորմամբ, նախքան նոր որոնվածը USB- ով ուղարկելը. thereminVision II - եթե այն գնել եք հավաքածուի տեսքով, հետևեք pdf- ի (հիանալի!) հրահանգներին. ThereminVision II ձեռնարկ Կան էլեկտրագծերի շատ գեղեցիկ գծապատկերներ, որոնք դուք պետք է անեք. միակ բանը, որ այն ցույց չի տալիս կապերն են CREATE USB ինտերֆեյսի հետ, այնպես որ ես կտեղադրեմ իմ արած լուսանկարները հաջորդ մի քանի քայլերի վրա … օ, և ես ստացել եմ Allmin Electronics- ի ThereminVision- ի ալեհավաքները (ներառված չեն):

Քայլ 3: Երաժշտական կրպակի պատրաստում

Դարձրեք ձեր մուլտիմոդալ երաժշտությունը Առանձնացեք գեղեցիկ երաժշտական տաղավարից, ինչպիսին է այստեղ ցուցադրված «դիրիժորների տակդիրը» կամ օգտագործեք այն, ինչ ունեք ձեռքի տակ, ավելի լավ ՝ պատրաստեք ձեր սեփականը:

Անկախ նրանից, թե ինչ կրպակից եք օգտվում, այն կպահանջվի մեկուսացված ամրակներ չորս ալեհավաքների համար, որոնք տեղադրված են անկյունում: Սկսեք անկյուններում անցքեր հորատելով. Տեղադրման սարքավորումները, որոնց շուրջը ես տեղակայված էի, աշխատում էին 1/4 դյույմ հորատիչով, հավանաբար ձերն այլ կլինի: Փորձեք մակերևույթի առջևը հնարավորինս ողորկ պահել, որպեսզի խուսափեք թիթեղների միջամտությունից:

Քայլ 4: Միացրեք ThereminVision սենսորային մոդուլները

ThereminVision «սենսոր» մոդուլները (555 ժամանակաչափի սխեմաներ) ThereminVision «պրոցեսոր» մոդուլին միացնելը նույնպես ավելի մանրամասն քննարկվում է ThereminVision II ձեռնարկում, բայց ահա գործընթացի մի քանի լուսանկար…

Քայլ 5. ThereminVision- ը միացնել CREATE USB ինտերֆեյսին

Ինչպես տեսանք վերջին քայլին, սենսորային մոդուլներից յուրաքանչյուրը միացնող 4 լար կա ThereminVision պրոցեսորային մոդուլին: Կան նաև 6 լար, որոնք միացնում են ThereminVision պրոցեսորային մոդուլը CREATE USB ինտերֆեյսին `դրանք Power, Ground, Sensor Output, Sensor Select A, Sensor Select B և Sensor Stop են:

Քանի որ ThereminVision II- ն իր էներգիան կստանա CREATE USB ինտերֆեյսից (որն իր հերթին ստանում է իր հզորությունը USB- ից), ես որոշեցի միացնել ThereminVision սենսորային մոդուլներից յուրաքանչյուրի էներգիան անմիջապես CREATE USB ինտերֆեյսի հետ. թռչնի բույն էլեկտրագծերի վրա, քանի որ արդեն շատ լարեր են անցնում TherminVision պրոցեսորային տախտակին: Միացրեք «+»-ը ThereminVision- ին «5V»-ին CUI Connect- ում-«ThereminVision- ում« GND »-ին CUI միացրեք« 4 »(բաժանումը 4 ելքի վրա) ThereminVision- ում« D7 »-ին CUI Connect- ում «SEL B» - ը ThereminVision- ին «D5» - ին CUI- ում միացրեք «SEL A» - ն ThereminVision- ին «D4» - ին CUI- ում «S» - ը միացրեք ThereminVision- ին CUI- ի «D6» - ին:

Քայլ 6: Ամեն ինչ ամրացրեք կանգառին

Այսպիսով, էլեկտրոնիկան ավարտված է, այժմ այն պարզապես տեղադրվում է կանգառի վրա. Դրա համար կան բազմաթիվ մեթոդներ, և գուցե ցանկանաք ձեր էլեկտրոնիկան դնել պաշտպանիչ տուփի մեջ և այլն…

Ահա տեղադրման ամենապարզ մեթոդներից մի քանիսի լուսանկարները:

Քայլ 7: ThereminVision- ի որոնվածը ներբեռնել CUI- ում

ThereminVision- ը անալոգային ելքերի փոխարեն (կամ որևէ ստանդարտ թվային արձանագրությունից, ինչպիսիք են I2C կամ SPI), ժամանակացույցի ազդանշաններ է ուղարկում իր տվիչների համար: Այսպիսով, անհրաժեշտ էր որոշ ազդանշան ՝ այս ազդանշանների ժամանակը չափելու համար… Multimodal Music Stand ֆիրմայի առաջին տարբերակը գտնվում է ներքևում տեղադրված zip ֆայլում, ներառված են ինչպես սկզբնաղբյուրը, այնպես էլ կազմված վեցանկյուն ֆայլը (Max- ի փորձնական կարկատանի հետ միասին) Ստորև բերված էկրանի պատկերը ցույց է տալիս Craig Schimmel- ի կողմից Boot Down OS X ծրագիրը ՝ CUI- ի համար Macintosh- ի բեռնման օգտակար ծրագիր: Եթե պատուհանների վրա եք, ապա ամենահեշտը Microchip- ի սեփական գործիքի ՝ PDFSUSB.exe- ի օգտագործումն է, որը կարելի է ներբեռնել իրենց կայքից կամ ներառված է CREATE USB ինտերֆեյսի այս օրինակի կոդի մեջ: CUI- ն «bootloader ռեժիմում» տեղադրելու համար պահեք ծրագրի կոճակը և սեղմեք վերակայման կոճակը (կամ պարզապես միացրեք USB մալուխը ՝ ծրագրի կոճակը ներքև պահելով): CUI- ի կարգավիճակի LED- ն անընդհատ թարթում է ՝ նշելով, որ այն բեռնման ռեժիմում է: Այժմ կարող եք օգտագործել Boot Down ՝ CUIEfieldBootDown.hex ֆայլը CREATE USB ինտերֆեյս ուղարկելու համար: Եթե երբևէ ցանկանում եք CREATE USB ինտերֆեյսի որոնվածը փոխել սկզբնականին, այն այստեղ է, և կան ծրագրակազմի այլ օրինակներ CUI այստեղ նույնպես:

Քայլ 8. Մուլտիմոդալ երաժշտական կրպակի փորձարկում Max/MSP/Jitter- ում

Բացեք օրինակի կարկատանը Max/MSP/Jitter- ում (30-օրյա ցուցադրական տարբերակը ներբեռնվում է www.cycling74.com կայքից, իսկ մատչելի է նաև «գործարկման ժամանակ» տարբերակը, որը թույլ չի տալիս պահպանել կարկատաններ) կամ հետևեք Max կարկատման պայմաններին: և պատրաստիր քո սեփական կարկատակը PureData- ում (Pd)…, բայց աշխատում է! Առանձին սենսորների տվյալները նույնպես ուղարկվում են որպես OSC 127.0.0.1 (localhost) ՝ անհրաժեշտության դեպքում այլ ծրագրերի օգտագործման համար: Max/MSP/Jitter- ի օգտակար օբյեկտ ՝ սենսորային տվյալներից բծերը զտելու համար (առաջացած էլեկտրական միջամտության պատճառով) այն Տրիստան hanեհանի «ավելի սահուն» է, որը կարելի է ներբեռնել այստեղ ՝ ավելի սահուն max objectTristan- ի կայքում կան Max- ի համար MSP- ի արտաքին տեսակներ, որոնք մենք օգտագործում ենք Multimodal Music Stand- ի մուտքի աուդիոալիզի մասի համար. դրանք ներառում են բարձրություն, բարձրություն, պայծառություն:, աղմկոտություն և անալիզատոր ~ օբյեկտ: Երբ Max- ում մուտքագրվող տվյալներ ունենաք, պետք է անհատապես հարմարեցնեք ThereminVision սենսորների զգայունությունը առանձին ՝ փոքր պտուտակահանով: Դա արեք ՝ երկարացնելով ալեհավաքները ամբողջ ճանապարհով, այնուհետև շրջելով կապույտ տրիպոտը ժամացույցի սլաքի հակառակ ուղղությամբ, մինչև այն անցնի «հակառակ զգայարան» ռեժիմի, այնուհետև այն հետ շրջեք ժամացույցի սլաքի ուղղությամբ, մինչև որ վերադառնաք նորմալ զգայարանների տիրույթ: Փոքր ճշգրտումներ (զգայունության կարգաբերում, ճիշտ ինչպես կիթառի թյունինգ) կարող են կատարվել ալեհավաքների երկարությունը փոխելով, այնպես որ ձեզ հարկավոր չէ փոքրիկ պտուտակահան պտտել ձեզ հետ համերգների ժամանակ:

Քայլ 9. Օգտագործելով Multimodal Music Stand- ը `կատարման մեջ: (և ընդլայնել այն)

Մի մոռացեք, որ կատարման նոր տեխնիկան, որը թույլ է տալիս Multimodal Music Stand- ը, պահանջում է պրակտիկա և նոր քարտեզագրումների և գաղափարների մշակում այն, ինչ ցանկանում եք վերահսկել դրանով: Բացի այդ, եթե ցանկանում եք ընդլայնել ձեր MMMS- ը `ներառելով այլ տեսակի սենսորներ, MMMS որոնվածի ապագա տարբերակներում հնարավոր կլինի օգտագործել CUI- ի 13 անալոգային մուտքերը ի լրումն ThereminVision սենսորների, այնպես որ որոշ պարզ սենսորներով (սահիչներ/բռնակներ/ոտնաթաթեր) կամ սենսորների այլ տեսակներ (IR/ուլտրաձայնային և այլն), դրանք կարող են օգտագործվել համակարգչին աուդիո մուտքի և տեսանյութի հետ միասին: Ներկայումս որոնվածը օգտագործում է «սերիական-USB- ի» արձանագրություն, սակայն, ի վերջո, ծրագիրը պետք է անցնի «HID» (Մարդու մուտքագրման սարք) արձանագրությանը, որը սովորաբար օգտագործվում է CREATE USB ինտերֆեյսի կողմից: Խնդրում ենք ազատ զգալ Ձեր ներդրումը ջանքերի մեջ … Գոյություն ունի նման բաց կոդով նախագիծ E -field sensing- ի համար (հայտնի է նաև որպես capacitive sensing), որն օգտագործում է նույն միացման տոպոլոգիան (հիմնված ThereminVision- ի դիզայնի վրա), որը կոչվում է CapToolKit. Այն օգտագործում է «փոքր եղբայրը «PIC18F4550- ից, PIC18F2550- ից, որն այնքան անալոգային մուտքեր չունի (10 -ի փոխարեն 13): CapToolKit- ի որոնվածը մի փոքր այլ կլինի, քանի որ նրանք չեն օգտագործում ThereminVision պրոցեսորային տախտակը: Մենք օգտագործում ենք պարզ հրակայուն տեսախցիկ (տեսախցիկի ոճ), որը տեղադրված է երաժշտական կրպակի վերևում `ֆիզիկական ժեստերի և հայացքի հայտնաբերման օպտիկական ճանաչման համար: հետաքրքրված են մեր խմբի հետազոտության համակարգչային տեսլականի կամ ձայնային վերլուծության և սինթեզի ասպեկտներով, խնդրում ենք թերթերը տեսնել Multimodal Music Stand կայքում: Եվ խնդրում ենք տեղադրել ձեր փորձը, եթե կառուցում եք Multimodal Music Stand… Մենք այժմ դրանցից երկուսն ունենք UCSB- ում, ինչպես ցույց է տրված ստորև ներկայացված լուսանկարում. Հիանալի կլիներ, որ դրանք ավելի շատ ստեղծագործություններ, կատարումներ և երաժիշտներ օգտագործեին: Բժիշկ Aոան Կուչերա-Մորինը գրել է MMMS- ի մասնակցությամբ առաջին կոմպոզիցիան, որը կատարվել է ֆլեյտահար Jիլ Ֆելբերի կողմից Eastman Music School- ում 2007 թվականի մարտին: