संगीत का सामना करें: कैसे "नेत्र कंडक्टर" Paralytics रॉक आउट बकवास में मदद करता है

एम्स्टर्डम में रहने वाले एक इंटरेक्शन डिजाइनर और क्रिएटिव कोडर एंड्रियास रेफ्सगार्ड ने एक म्यूजिकल इंटरफ़ेस तैयार किया है, जो शारीरिक विकलांग लोगों को संगीत बनाने की अनुमति देता है। नेत्र कंडक्टर संगीत रचना के विभिन्न घटकों में चेहरे की गतिविधियों का अनुवाद करने के लिए नेत्र ट्रैकिंग सॉफ्टवेयर और एक कंप्यूटर के वेब कैमरा का उपयोग करता है। उपयोगकर्ता अपने चेहरे के साथ चीज़ को चलाने के लिए खुद को प्रशिक्षित कर सकते हैं, जिसका अर्थ है लकवाग्रस्त लोग - वे लोग जो अब वाद्ययंत्र नहीं बजा सकते हैं - उनके पास सुंदर (या सिर्फ ज़ोर से) आवाज़ करने का दूसरा मौका हो सकता है। राइट टकटकी वास्तव में Refsgaard के आविष्कार के साथ एक कॉर्ड पर हमला करता है। सही अभिव्यक्ति खुद को ज़ोर से व्यक्त करती है।

रेफ्सगार्ड से बात की श्लोक में अपनी परियोजना के पीछे की प्रेरणा के बारे में, संघर्ष वह रास्ते में भाग गया, और उसने जो सीखा वह लोगों को दिया जिसने संगीत को एक और मौका बनाने की क्षमता खो दी।

संगीत के साथ आपकी पृष्ठभूमि क्या है?

मैं खुद को संगीतकार नहीं कहूंगा क्योंकि मैं केवल मनोरंजन के लिए खेलता हूं, लेकिन मैं गिटार और बास खेलता हूं। एबलटन एक संगीत कार्यक्रम है, जो एक डिजिटल वर्क स्टेशन है जो लॉजिक या प्रोटॉल्स या गैरेज बैंड जैसे सॉफ्टवेयर्स को रिकॉर्ड करने के समान है। मैंने इस पर एक कोर्स किया, और मैं इसके साथ संगीत बनाने में महान नहीं था, लेकिन मैंने जो संभावनाएं देखीं, मैं उन पर मोहित था। फिर हमने सहयोग करना शुरू किया और कुछ और आर्टिस्टिक इंस्टॉलेशन-टाइप स्टफ किए, जहां वह ध्वनियों को डिजाइन करते थे और मैं सेंसर को हुक करता था, उदाहरण के लिए एक गहराई वाला कैमरा ताकि जब लोग अतीत में चले जाएं, तो वे परियोजना के कुछ पहलू को नियंत्रित करेंगे।

तो आप एक इंटरैक्शन डिज़ाइनर और क्रिएटिव कोडर हैं। क्या आप बता सकते हैं कि उन शीर्षकों का क्या मतलब है?

मेरे द्वारा डिज़ाइन की गई सभी चीजें इंटरैक्टिव हैं। इसलिए अगर मुझे किसी प्रकार का फर्नीचर बनाना होता, तो उसकी कुछ कार्यक्षमता होती, जिससे वह किसी चीज पर प्रतिक्रिया करता। मैं एक रचनात्मक कोडर भी हूं। बहुत सारे अन्य लोगों की तुलना में - उदाहरण के लिए मैंने कोपेनहेगन इंस्टीट्यूट ऑफ इंटरेक्शन डिज़ाइन में कोपेनहेगन में अध्ययन किया, जहां लोग बहुत अधिक पृष्ठभूमि से आते हैं - मैं कोडिंग पक्ष की ओर थोड़ा अधिक हूं। मैं खुद को "रचनात्मक कोडर" भी कहता हूं क्योंकि मैं एक उचित कोडर नहीं हूं। मैं इसके बारे में अच्छा नहीं हूँ, लेकिन मैं वास्तव में तेजी से कुछ सामान कर सकता हूं और मैं चीजों को कनेक्ट कर सकता हूं और मैं उपन्यास विचारों के साथ आने में अच्छा हूं।

वह क्या था जिसने आपको शारीरिक अक्षम लोगों को संगीत बनाने में मदद करने के लिए प्रेरित किया?

दो या तीन महीने के लिए हाई स्कूल के बाद मैं पेशी dystrophy के साथ किसी के लिए एक कार्यवाहक था। हर समय उनके साथ रहने से मुझे कुछ ऐसी चीजों का एहसास हुआ, जिनसे मैं उनकी मदद नहीं कर सकता था। उनमें से एक खुद को रचनात्मक तरीके से व्यक्त कर रहा था। ऐसा नहीं था कि मैंने सोचा था, "ठीक है यहाँ एक समस्या है जिसे मुझे हल करने की आवश्यकता है," क्योंकि उस समय मैं छोटा था और कोई पेशेवर कौशल नहीं था। लेकिन यह मेरे साथ चिपक गया।

तकनीकी प्रेरणा के संदर्भ में क्या?

लगभग एक साल पहले मैंने देखा था कि एक परियोजना का एक कार्यक्रम है जो एक पेंटिंग प्रोग्राम है जिसे एक ऐसे व्यक्ति के लिए डिज़ाइन किया गया था जो कभी भित्तिचित्र कलाकार हुआ करता था लेकिन तब उसे लकवा मार गया था। उनके कुछ दोस्त कोडर थे और उन्होंने उनके लिए आंखों पर नज़र रखने के लिए एक उपकरण बनाया जिससे वह आकर्षित हो सके। और तब से मैं संगीत सॉफ्टवेयर में सेंसर और सामान के साथ खेल रहा था, मैंने एक संबंध बनाया। मैंने इसे स्कूल में अपनी अंतिम परियोजना के रूप में किया।

आप जिस रचनात्मक क्षेत्र का पता लगाना चाहते थे, उसका संगीत कैसे समाप्त हुआ?

मुझे लगता है कि शायद इसलिए कि मैं खुद संगीत का आनंद लेती हूं और परियोजना के लिए मेरे पास समय है। बस यह स्पष्ट हो गया कि संगीत वही था जो मैं काम करना चाहता था। तब मैं ग्राफिक्स बनाने के मामले में Eyewriter से बहुत प्रेरित था।

संगीत एक शानदार विकल्प की तरह लगता है क्योंकि यह सार्वभौमिक है। मैं ऐसे किसी व्यक्ति के बारे में नहीं सोच सकता जो संगीत पसंद नहीं करता है।

शुरुआत में मैं वास्तव में यह परीक्षण करना चाहता था कि मैं जिस समूह के लिए डिजाइन कर रहा था, उसके लिए कितना महत्वपूर्ण संगीत था। शुरुआती चरण सिर्फ यह देख रहे थे कि विभिन्न शारीरिक अक्षमता वाले लोग संगीत के साथ कैसे तालमेल बिठाते हैं। जिस घर में मैं गया था, उसका संगीत गुरुवार था। कुछ एक कीबोर्ड पर थोड़ा इंगित कर सकते हैं या खेल सकते हैं, और कुछ बिल्कुल भी नहीं कर सकते हैं, लेकिन तथ्य यह है कि वे संगीत गुरुवार के लिए दिखा रहे हैं।

अवलोकन करने और फिर उपकरण बनाने के बीच, कितना समय लगा?

अक्सर एक डिजाइन प्रक्रिया में वे दो अलग चीजें होंगी, लेकिन मैं उस दृष्टिकोण की तरह नहीं हूं। मुझे शुरू से ही निर्माण करना पसंद है और फिर जब मैंने जो कुछ भी बनाया है, उसके बारे में बातचीत की है। और फिर मैं इसे संशोधित या परिष्कृत करता हूं।

पहली बार इसका इस्तेमाल करने वाले लोगों को देखना कैसा था?

यह काफी अच्छा था, हाँ। क्योंकि कुछ लोग बोल नहीं सकते थे, इसलिए कनेक्शन एक कठिन हो सकता है। लेकिन तब जब उन्होंने मेरे आई कंडक्टर का इस्तेमाल किया, हम वास्तव में जुड़े थे। वे मुझे देख रहे थे और मुस्कुरा रहे थे या वास्तव में खुश थे या जब मैंने इसे डेमो किया तो वे वास्तव में केंद्रित थे। यह एक शानदार उदाहरण था जिस तरह से संगीत लोगों को बातचीत करने और भावनाओं को व्यक्त करने में मदद कर सकता है।

बहुत तकनीकी होने के बिना, जब आप आई कंडक्टर डिजाइन कर रहे थे, तब आपको सबसे बड़ी समस्या क्या थी?

काम करने की प्रणाली के लिए आपको उसी मुद्रा में बैठना होगा जैसे हम अभी अपने लैपटॉप के सामने बैठे हैं क्योंकि अभी आपको जो छवि दिखाई दे रही है वह सीधी है और मेरे चेहरे और आंखों को ट्रैक करने के लिए अच्छी है। उदाहरण के लिए, यदि आप व्हीलचेयर में किसी ऐसे व्यक्ति के साथ हैं, जो अपने आसन या अपनी पीठ या गर्दन पर नियंत्रण नहीं रखता है, तो कभी-कभी वे अधिक बग़ल में बैठते हैं और सिस्टम उनके चेहरे की गतिविधियों को ट्रैक नहीं कर सकता है। और फिर कभी-कभी मेरे लिए यह कहना थोड़ा असुविधाजनक होगा, "ठीक है, इसके लिए आपको काम करना होगा, आपको स्ट्रैटनर बैठना होगा।" और फिर उनके साथ नॉन वर्बल होने के नाते, हम इसे कैसे संवाद करते हैं?

यदि किसी का सिर इस तरह झुका हुआ था, तो क्या आप सैद्धांतिक रूप से लैपटॉप को इस तरह से पकड़ सकते हैं जो उनके चेहरे के हावभाव को चुनता है?

हाँ। इसलिए मैं वास्तव में उस मुद्दे को सुलझाने में नहीं गया था, लेकिन बहुत सारे लोगों के कंप्यूटर उनके व्हीलचेयर पर लगे हुए हैं और कंप्यूटर एक पोल पर है और फिर उस पोल पर एक बढ़ते डिवाइस है और वे इसे सही दिशा में इंगित करने के लिए कोण पर रखते हैं व्यक्ति का चेहरा। ऐसा कोई स्थान नहीं है जो सही या गलत है, यह सिर्फ सेंसर प्राप्त करने के बारे में है - जो कि वेबकैम और एक आई ट्रैकर है - सिर के लिए सीधे होना। यह थोड़ा चुनौतीपूर्ण था। यह एक हार्डवेयर चीज़ के रूप में अधिक था क्योंकि अन्यथा मुझे एक संरचना बनाने की कोशिश करनी होगी और यह गड़बड़ हो जाएगा। मैं इतना अच्छा नहीं हूँ

क्या आपने पूरी बात खुद से की या आप तकनीकी मुद्दों में भाग गए जिन्हें केवल अन्य लोग जानते थे कि कैसे हल करना है?

मैंने खुद से किया लेकिन साउंड डिज़ाइन की तरफ से मुझे उस प्रोफेसर से मदद मिली जिसके बारे में मैंने आपको बताया था। मूल रूप से सिर्फ ध्वनि डिजाइन सामान। मेरे पास एक सलाहकार भी था जिसने मुझे मैक्स नामक एक प्रोग्रामिंग भाषा के संदर्भ में कुछ संकेत दिए, जो वह वास्तव में बहुत अच्छा था। उन्होंने मुझे कुछ प्रोग्रामिंग विवरणों के साथ अधिक सहज होने में मदद की। बेशक, यह बहुत कुछ नया था, लेकिन इसके बारे में मुझे पहले से पता था कि इसकी मूल बातें पहले से ही थीं। मैंने आठ सप्ताह में आई कंडक्टर बनाया और लोगों ने कहा, "ओह, यह पागल है कि आप इसे आठ सप्ताह में कैसे बना सकते हैं?" लेकिन मैंने कुछ और सामान बनाया जो सेंसर और संगीत सॉफ्टवेयर के साथ काम करने के मामले में भी उन्नत है और इस तरह से अधिक समय लग गया है। मुझे नहीं पता कि यह कैसे करना है। अब जब मुझे पता है कि यह उतना मुश्किल नहीं है, भले ही यह परियोजना अधिक जटिल थी। मेरे लिए यह बताना भी महत्वपूर्ण है कि यह पूरी तरह से काम करने वाला प्रोटोटाइप है लेकिन यह उत्पाद नहीं है। इसलिए लोग बाहर जाकर इसे नहीं खरीद सकते और इसे अपने कंप्यूटर पर इंस्टॉल कर सकते हैं।

मैं आपसे यह पूछने जा रहा हूं कि क्या आपके पास इसे बेचने की योजना है?

मैं वास्तव में इसे बेचना नहीं चाहता, मैं इसे दूर करना चाहता हूं। मैं इसे एक ओपन सोर्स चीज़ बनाना चाहता हूं, लेकिन मैं अब कुछ भी वादा नहीं कर सकता। मेरे पास अभी तक इसके लिए कोई धन नहीं है और मेरे पास काम करने के लिए और अन्य चीजें हैं। मुझे मिशिगन के एक लड़के से उदाहरण के लिए एक संदेश मिला जो एक निर्माता हुआ करता था और फिर उसे ALS मिला। मैं इसे किसी तरह इन सभी लोगों के लिए उपलब्ध कराना चाहता हूँ। यह मेरे लिए कुछ बिंदु पर बहुत महत्वपूर्ण है, और मैं वादा नहीं कर सकता, लेकिन उम्मीद है कि बहुत जल्द ही इसे एक तरह से पैकेज कर दूंगा ताकि लोग या तो इसे एक चीज़ के रूप में डाउनलोड कर सकें और यह अधिकांश कंप्यूटरों पर चलेगा या वास्तव में इसे आज़माएगा ब्राउज़र में। इसे ब्राउज़र की चीज़ बनाने के पीछे के विचार के लिए लोगों को केवल ऑनलाइन एक्सेस के साथ कंप्यूटर की आवश्यकता होगी और फिर एक माउस के लिए जो कुछ भी उनके कंप्यूटर पर हो सकता है, उसका प्रतिस्थापन किया जाएगा। यदि मैं इसे खुला स्रोत बनाता हूं तो मैं मूल डेमो प्रदान कर सकता हूं और फिर लोग इसे बनाने के लिए अपने स्वयं के ट्विस्ट जोड़ सकते हैं।

यह सुनकर अच्छा लगा कि आप ऐसा कर रहे हैं क्योंकि आप लोगों की मदद करना चाहते हैं न कि इसलिए कि आप अमीर बनना चाहते हैं या ऐसा कुछ करना चाहते हैं।

जिन उपकरणों को मैंने बनाया था - कम से कम काम करने वाले प्रोटोटाइप - खुले स्रोत हैं। फिर मुझे इसका श्रेय क्यों मिलेगा? उदाहरण के लिए फेस ट्रैकिंग सिस्टम जो मैं अपने प्रोटोटाइप के लिए उपयोग करता हूं, जो लोगों को अपनी भौहें उठाकर या अपना मुंह खोलकर ध्वनि बनाने में सक्षम बनाता है, जो कि काईस मैकडॉनल्ड नाम के लड़के द्वारा बनाई गई FaceOSC नामक चीज है और यह एक ओपन सिस्टम है। मुझे नहीं लगता कि सॉफ्टवेयर के उस टुकड़े के बिना मैंने जहां तक ​​पाया होता।