नई प्रौद्योगिकी वास्तविक समय में चेहरे की अभिव्यक्तियों को स्वैप कर सकती है

याद रखें कि बिज़ारो वर्ल्ड “माइयडोल” ऐप जो इस वसंत में वायरल हो गया था क्योंकि यह एक डिजिटल अवतार बनाने के लिए चेहरे की पहचान सॉफ्टवेयर का उपयोग करने की क्षमता है जो दिखता है और चलता है ठीक ठीक आप की तरह ज्यादातर? यह एक वास्तविकता बनने वाली है … एक तरह की।

स्टैनफोर्ड के शोधकर्ताओं ने यह पता लगा लिया है कि वीडियो के माध्यम से वास्तविक समय में किसी व्यक्ति के चेहरे के भावों को किसी दूसरे व्यक्ति के चेहरे पर कैसे स्थानांतरित किया जाए।

स्टैनफोर्ड के प्रदर्शन वीडियो में दिखाया गया मॉडल बस प्रत्येक अभिनेता के लिए उपभोक्ता-ग्रेड पीसी और गहराई वाले कैमरे का उपयोग करता है - जिसका अर्थ है कि आपको इस ट्रॉम l’oeil को निष्पादित करने के लिए फैंसी उपकरण की आवश्यकता नहीं है, आपको बस कुछ जटिल एल्गोरिदम की आवश्यकता है।

शोधकर्ताओं ने एक नया वास्तविक समय एल्गोरिथ्म विकसित किया है जो प्रत्येक प्रतिभागी के चेहरे के उच्च-गुणवत्ता वाले दृश्यों को लेता है और उन्हें "स्रोत अभिनेता" (चेहरे के भाव और / या भाषण प्रदान करने वाले व्यक्ति) से "लक्ष्य अभिनेता" के भावों को स्थानांतरित करने के लिए उपयोग करता है। (वह व्यक्ति जिसके चेहरे का हेर-फेर उसी के अनुसार किया जाएगा जो स्रोत अभिनेता करता है)। स्रोत अभिनेता की दृश्य जानकारी कार्यक्रम के माध्यम से जाती है और लक्ष्य अभिनेता के वीडियो स्ट्रीम के शीर्ष पर प्रदान की जाती है, इसलिए ऐसा लगता है कि लक्ष्य अभिनेता मुस्कुरा रहा है, बात कर रहा है, अपनी जीभ बाहर ला रहा है, या जो कुछ भी मन में आता है।

चेहरे के चारों ओर मैप किए गए संदर्भ बिंदुओं की एक श्रृंखला के लिए धन्यवाद (Myidol ऐप के समान), सिस्टम द्वारा मापी गई दृश्य जानकारी के प्रकारों में चेहरे का आकार और विशेषताएं (जैसे आपकी आंखें, नाक, मुंह और यहां तक ​​कि झुर्रियां) शामिल हैं चेहरे की बनावट और गहराई। यह कार्यक्रम तब स्रोत अभिनेता के संदर्भ बिंदुओं को लक्ष्य अभिनेता के साथ मिलाता है और उन भावों को हाइपर-यथार्थवादी वीडियो फ़ीड के लिए लक्ष्य पर निर्धारित करता है।

चूंकि यह प्रणाली अभी भी काम कर रही है (और सुंदर अल्पविकसित उपकरण का उपयोग किया गया था), अंतिम परिणाम अभी भी थोड़े अलौकिक हैं - जैसे अर्ध-परेशान करने वाले अशुद्ध दांत कार्यक्रम के लक्ष्य के अंदर सुपरिंपोज किए जाते हैं, इसलिए जब यह काला हो तो गैप ब्लैक होल नहीं होता है। खुला ”(ऊपर देखें)… और साथ ही लक्ष्य की आंखों में ब्लैंक लुक। लेकिन इस कार्यक्रम के विकास के लिए कौन सी शांत चीजों की तुलना में वे छोटे फ्राइज़ हैं।

यहाँ हम इस तकनीक के लिए क्या उपयोग कर सकते हैं, इसके लिए कुछ विचार दिए गए हैं:

• आपको Skype पर एक महत्वपूर्ण नौकरी का साक्षात्कार मिला है, और आपने सफलता के लिए कपड़े नहीं पहने हैं। जब आप चेहरे के भाव और हत्यारे के साक्षात्कार उत्तर प्रदान करते हैं तो बस एक फैंसी दिखने वाले स्टैंड का उपयोग करें।

• आप जर्मनी के एक शीर्ष प्राध्यापक से लाइव-स्ट्रीम किए गए व्याख्यान को देख रहे हैं - एकमात्र समस्या यह है कि आप जर्मन नहीं बोलते हैं। कोई चिंता नहीं है, इस सॉफ्टवेयर का उपयोग करके एक वास्तविक समय अनुवादक के लिए धन्यवाद, आप देख सकते हैं कि प्रोफेसर अपने भाषण को अपनी मूल जीभ में दे सकते हैं, बिना किसी घबराहट के डबिंग के दृश्य में देरी।

कार्रवाई में अभिव्यक्ति-स्वैप देखें: