AI Video Çeviri Kalitesini Değerlendirme – Önemli Metrikler
Videoları diller arasında çevirmek küçük bir başarı değildir — transkripsiyon, çeviri, ses sentezi, zamanlama ve daha fazlasını içerir. Curify'da, her parçanın endüstri standartlarını karşıladığından emin olmak için sağlam bir değerlendirme hattı oluşturduk.
1. Transkripsiyon Kalitesi
Motor: WhisperX
- WER (Kelime Hata Oranı)
- Noktalama İşareti F1 (ifade ve okunabilirlik için)
2. Çeviri Kalitesi
Motorlar: Helsinki, MarianMT
- BLEU (standart metrik)
- COMET / chrF++ (anlamsal benzerlik)
- İnsan incelemesi: akıcılık + yeterlilik
3. Ses Sentezi Kalitesi
Motorlar: XTTS / YourTTS
- MOS (Doğallık, benzerlik, ifade)
- Konuşmacı doğrulama doğruluğu
4. Hizalama ve Dudak Senkronizasyonu
- Segment süresi uyuşmazlığı
- Wav2Lip senkronizasyon güveni
- Zaman kayması analizi
5. Anlamsal Koruma
Çevrilen konuşmanın orijinal anlamı, tonu ve duyguyu koruyup korumadığını değerlendirmek için LLM'leri (GPT-4 gibi) kullanıyoruz. Örnek istem:
Bu Mandarin transkriptini İngilizce seslendirme ile karşılaştırın. Ton, niyet ve içerik eşleşiyor mu? 1–5 arası puanlayın ve açıklayın.
6. Kullanıcı Geri Bildirimi ve GTM Doğrulaması
- Ürün kategorisi için ses kalitesi uyumu
- İzleyici tutma iyileştirmesi
- Erken kullanıcılardan benimseme istekliliği (örneğin, 1688 satıcıları)