AI वीडियो अनुवाद गुणवत्ता का मूल्यांकन – मायने रखने वाले मेट्रिक्स

1. ट्रांसक्रिप्शन गुणवत्ता

इंजन: WhisperX

• WER (वर्ड त्रुटि दर)
• Punctuation F1 (अभिव्यक्ति और पठनीयता के लिए)

2. अनुवाद गुणवत्ता

इंजन: Helsinki, MarianMT

• BLEU (मानक मेट्रिक)
• COMET / chrF++ (अर्थात्मक समानता)
• मानव समीक्षा: धाराप्रवाहता + उपयुक्तता

3. वॉयस सिंथेसिस गुणवत्ता

इंजन: XTTS / YourTTS

• MOS (प्राकृतिकता, समानता, अभिव्यक्ति)
• स्पीकर सत्यापन सटीकता

4. संरेखण और लिप सिंक

• सेगमेंट अवधि बेमेल
• Wav2Lip सिंक विश्वास
• अस्थायी ड्रिफ्ट विश्लेषण

5. अर्थात्मक संरक्षण

हम LLMs (जैसे GPT-4) का उपयोग यह न्याय करने के लिए करते हैं कि क्या अनुवादित भाषण मूल अर्थ, स्वर और भावना को संरक्षित करता है। उदाहरण प्रॉम्प्ट:

इस मैंडरिन ट्रांसक्रिप्ट की तुलना अंग्रेजी वॉयसओवर से करें। क्या स्वर, इरादा और सामग्री मेल खाते हैं? 1-5 तक रेट करें और स्पष्ट करें।

6. उपयोगकर्ता प्रतिक्रिया और GTM सत्यापन

• उत्पाद श्रेणी के लिए वॉयस गुणवत्ता फिट
• दर्शक प्रतिधारण में सुधार
• प्रारंभिक उपयोगकर्ताओं से अपनाने की इच्छा (जैसे, 1688 विक्रेताओं)