वीडियो के लिए एआई स्टाइल ट्रांसफर

वीडियो के लिए एआई स्टाइल ट्रांसफर क्या है?

स्टाइल ट्रांसफर एक स्रोत वीडियो और एक लक्षित दृश्य शैली - पिक्सर 3डी, घिबली पेंटिंग, एनीमे लाइन आर्ट, जल रंग - लेता है और क्लिप को लक्षित शैली में फिर से प्रस्तुत करता है जबकि मूल गति, फ्रेमिंग, और विषय पहचान को बनाए रखता है। आउटपुट एक नया वीडियो है, न कि मूल फ्रेम पर लागू किया गया एक फ़िल्टर।

इमेज स्टाइल ट्रांसफर एक दशक से मौजूद है, लेकिन वीडियो के लिए कठिनाई समय संबंधी सामंजस्य है। एक साधारण फ्रेम-द्वारा-फ्रेम फिर से स्टाइलिंग झिलमिलाती है - प्रत्येक फ्रेम स्वतंत्र रूप से फिर से स्टाइल किया जाता है, इसलिए रंग और बनावट झिलमिलाते हैं क्योंकि मॉडल आसन्न फ्रेम पर विभिन्न विकल्प बनाता है। आधुनिक पाइपलाइन इसे पिछले फ्रेम पर कंडीशनिंग करके और समय संबंधी धुरी के पार स्टाइल निर्णयों को फैलाकर ठीक करती हैं।

इस पृष्ठ पर डेमो एक लाइव-एक्शन क्लिप को घिबली पेंटिंग लुक में फिर से स्टाइल करता है। गति सुचारू रहती है, चेहरे पहचाने जाने योग्य रहते हैं, और रंग पैलेट पूरे शॉट में स्थिर रहता है।

Curify स्टाइल ट्रांसफर के लिए कैसे संपर्क करता है

उत्पादन-ग्रेड वीडियो स्टाइल ट्रांसफर एक विशेषीकृत चरणों की पाइपलाइन है, न कि एकल मॉडल कॉल। प्रत्येक चरण समय-संबंधी सामंजस्य की समस्या के एक भाग को संभालता है ताकि सुधार एक-दूसरे से लड़ने के बजाय जोड़ें।

चरण 1: शॉट पहचान और दृश्य विभाजन। क्लिप को शॉट सीमाओं पर विभाजित किया जाता है ताकि प्रत्येक शॉट को अपने स्वयं के स्टाइल पैरामीटर मिलें और मॉडल को एक अप्रासंगिक कट के बीच सामंजस्य बनाए रखने के लिए नहीं कहा जाता है।

चरण 2: संदर्भ एन्कोडिंग। या तो एक स्टाइल संदर्भ छवि या एक नामित प्रीसेट को एक लक्षित स्टाइल एम्बेडिंग में एन्कोड किया जाता है जो फिर से स्टाइलिंग को संचालित करता है।

चरण 3: फ्रेम-संगत फिर से स्टाइलिंग। फ्रेम पिछले आउटपुट फ्रेम के प्रति जागरूकता के साथ फिर से स्टाइल किए जाते हैं, इसलिए रंग, बनावट, और रेखा के वजन गति के पार स्थिर रहते हैं।

चरण 4: समय संबंधी स्मूदिंग और गुणवत्ता-जानकारी एन्कोडिंग। एक अवशिष्ट झिलमिलाहट पास किसी भी शेष कलाकृतियों को साफ करता है और अंतिम क्लिप को एक बिटरेट पर एन्कोड किया जाता है जो फिर से स्टाइल किए गए विवरण को बनाए रखता है।

एआई स्टाइल ट्रांसफर का उपयोग कौन करता है?