AI ASL वीडियो अनुवादक

AI ASL वीडियो अनुवाद क्या है?

ASL वीडियो अनुवाद एक सांकेतिक वीडियो प्रदर्शन को लिखित अंग्रेजी में परिवर्तित करता है। भाषण-से-पाठ या वीडियो ट्रांसक्रिप्शन के विपरीत, जो ऑडियो को पाठ में अनुवाद करता है, ASL अनुवाद को दृश्य मोडालिटी को पढ़ना होता है - सांकेतिककर्ता का हाथ का आकार, स्थान, गति, हथेली की ओर, और गैर-मैनुअल मार्कर (चेहरे के भाव, सिर का झुकाव, शरीर के बदलाव) जो व्याकरणिक अर्थ रखते हैं। यहाँ कोई ऑडियो ट्रैक नहीं है जिस पर वापस लौटना है।

ASL भी अंग्रेजी का एक-से-एक मानचित्र नहीं है। इसकी अपनी व्याकरण, शब्द क्रम, और मुहावरेदार वाक्यांश होते हैं। शब्द-के-संकेत प्रतिस्थापन ऐसा आउटपुट उत्पन्न करता है जो तकनीकी रूप से शाब्दिक है लेकिन टूटी हुई अंग्रेजी के रूप में पढ़ता है। गुणवत्ता अनुवाद को दृश्य संकेत को पहचानना और परिणाम को प्राकृतिक अंग्रेजी में पुनर्गठन करना होता है - यह एक भाषा के बीच अनुवाद करने के करीब है न कि एक का ट्रांसक्रिप्शन।

लक्ष्य: एक बहरा या सुनने में कठिनाई वाला सांकेतिककर्ता एक वीडियो रिकॉर्ड करता है; एक सुनने वाला दर्शक अंग्रेजी उपशीर्षक या ट्रांसक्रिप्ट पढ़ता है। अनुवाद पुल है।

Curify ASL वीडियो का अनुवाद कैसे करता है?

पाइपलाइन चार चरणों में चलती है। पहले, स्रोत वीडियो को फ्रेम-दर-फ्रेम संसाधित किया जाता है ताकि सांकेतिककर्ता को स्थानीयकृत किया जा सके, ऊपरी शरीर को अलग किया जा सके, और सांकेतिक स्थान को विभाजित किया जा सके - जो बैकग्राउंड गति को छोड़ देता है जो संकेत का हिस्सा नहीं है।

दूसरे, एक दृष्टि एन्कोडर दृश्य धारा को पढ़ता है और संकेत-जानकारी वाले एम्बेडिंग का एक अनुक्रम उत्पन्न करता है: हाथ का आकार, गति वेक्टर, और गैर-मैनुअल मार्कर (चेहरे के भाव, सिर का झुकाव, आंखों की दृष्टि) जो एक संकेत को एक बयान से प्रश्न में बदलते हैं।

तीसरा, एक अनुवाद सिर उन एम्बेडिंग को अंग्रेजी पाठ में डिकोड करता है। डिकोडर समानांतर ASL-इंग्लिश वीडियो कॉर्पोरा पर प्रशिक्षित है, इसलिए यह ASL व्याकरण को प्राकृतिक अंग्रेजी में पुनर्गठित करता है न कि शाब्दिक ग्लॉस उत्पन्न करता है।

चौथा, अनुवादित पाठ को स्रोत समय के साथ संरेखित किया जाता है - प्रत्येक अंग्रेजी वाक्य उस वीडियो के सेकंड से जोड़ा जाता है जिसने इसे उत्पन्न किया। इससे आपको ऐसे उपशीर्षक मिलते हैं जिन्हें आप सीधे वीडियो संपादक में डाल सकते हैं, साथ ही एक SRT निर्यात जो YouTube में साफ-सुथरा लोड होता है।

इस पृष्ठ पर डेमो एक वास्तविक संवादात्मक ASL क्लिप पर चलने वाला उत्पादन मॉडल है। प्रारंभिक पहुंच अपलोड उसी पाइपलाइन पर चलेंगे।

जहां ASL वीडियो अनुवाद महत्वपूर्ण है