3D कलाकारों ने AI की सबसे बड़ी कमी पकड़ी, Reallusion ने ByteDance के साथ मिलकर उसे ही अपनी ताकत बना लिया

यह प्रक्रिया दो गंभीर समस्याओं को हल करने के लिए डिज़ाइन की गई है। पहला, यह फ्रेम-टू-फ्रेम कंसिस्टेंसी सुनिश्चित करता है—जो टेक्स्ट-टू-वीडियो मॉडलों की एक बदनाम कमजोरी है—क्योंकि 3D ज्यामिति AI को विज़ुअल अराजकता में भटकने से रोकती है । दूसरा, यह कलाकार को 100% निर्देशकीय नियंत्रण देता है; जब कोई निर्देशक 3D कैमरे को एडजस्ट करता है या किसी किरदार को खिसकाता है, तो AI-जनरेटेड आउटपुट उसके हिसाब से चलता है, न कि शून्य से एक नया शॉट गढ़ लेता है ।

बाइटडांस का सीडांस 2.0 इस हाइब्रिड वर्कफ़्लो को कैसे शक्ति देता है

लॉन्च का मुख्य आकर्षण बाइटडांस के साथ एक क्रिएटिव अलायंस है, जिसमें सीडांस 2.0 को मूल रूप से AI स्टूडियो में इंटीग्रेट किया गया है । प्रोडक्शन का मूल सिद्धांत सीधा है: "3D स्पेशियल संरचना को संभालेगा, AI विज़ुअल फ़िनिश को" ।

सीडांस 2.0 बाइटडांस की दूसरी पीढ़ी का वीडियो मॉडल और एक यूनिफाइड मल्टीमॉडल सिस्टम है। एक ही आर्किटेक्चर एक रिक्वेस्ट के भीतर टेक्स्ट, इमेज, ऑडियो और वीडियो को इनपुट के रूप में स्वीकार कर सकता है और आउटपुट के रूप में सिंक्रोनाइज़्ड वीडियो और डुअल-चैनल स्टीरियो ऑडियो देता है । AI स्टूडियो के संदर्भ में, इस मॉडल को iClone के साथ जोड़ा गया है ताकि 3D प्रीविज़ वह संरचना प्रदान करे जो सीडांस 2.0 को एक पॉलिश्ड, सिनेमाई शॉट बनाने के लिए चाहिए, जबकि वह कलाकार के लेआउट, कैमरे और समय से जुड़ा रहे ।

यह जोड़ी AI वीडियो जनरेशन को एक प्रायोगिक खिलौने से एक व्यावहारिक प्रोडक्शन टूल की ओर ले जाती है। एक साधारण 3D प्लेब्लास्ट (त्वरित प्री-रेंडर) भी बहुत अधिक निखरे और डायनामिक फ़ुटेज तैयार करने का एक मज़बूत आधार बन सकता है । कलाकार इस प्रक्रिया में डायरेक्टर बना रहता है, न कि महज़ एक प्रॉम्प्ट इंजीनियर।

अर्ली एक्सेस में और कौन से मॉडल उपलब्ध हैं?

आधिकारिक प्रेस रिलीज़ AI स्टूडियो को "अधिकतम स्टूडियो लचीलेपन के लिए बनाया गया" बताती है और यह बताती है कि यह "कई प्रमुख जनरेटिव इंजनों को एक ही इंटरफ़ेस में समेकित करता है" । हालाँकि, प्रदान की गई अर्ली एक्सेस अनाउंसमेंट सामग्रियों में, मूल इंटीग्रेशन के रूप में नाम से पुष्टि किया गया एकमात्र AI मॉडल बाइटडांस का सीडांस 2.0 है ।

इसका मतलब है कि इस प्रारंभिक रिलीज़ में इंटीग्रेटेड जनरेटिव मॉडलों की पूरी सूची अभी सार्वजनिक रूप से पुष्ट नहीं हुई है। हालाँकि प्लेटफ़ॉर्म को एक क्रिएटिव इकोसिस्टम के रूप में डिज़ाइन किया गया है जो कई AI इंजनों की मेज़बानी कर सकता है, इस लॉन्च में इस समय सीडांस 2.0 एकमात्र नामित साझेदार है, जबकि अन्य इंटीग्रेशन फ़िलहाल अनिर्दिष्ट हैं ।