गतिशील दृश्यों में उपन्यास दृश्य और अस्थायी संयोजन के लिए एक पोर्टेबल मल्टी-व्यू कैमरा

नई दृश्य रचना 3D दृश्य प्रतिपादन और मॉडलिंग के लिए एक सामान्य शोध विषय है। हालाँकि, वर्तमान दृष्टिकोण स्थिर दृश्यों या चलती वस्तुओं के एककोशिकीय वीडियो के साथ कैप्चर की गई मल्टीव्यू छवियों पर ध्यान केंद्रित करते हैं। arXiv.org पर एक हालिया अध्ययन गतिशील वास्तविक दुनिया के दृश्यों में उपन्यास दृश्य-समय संश्लेषण की पड़ताल करता है।

प्रस्तावित बहु-दृश्य कैमरे की भौतिक संरचना। छवि क्रेडिट: arXiv:2208.14433 [cs.CV]

शोधकर्ता पोर्टेबल का उपयोग करते हैं मल्टीस्कोपिक आम जनता के लिए सुलभ एक कैमरा। मनमाना कैमरा पोज़ और मनमाने समय पर गतिशील दृश्यों पर उपन्यास दृश्य और अस्थायी संश्लेषण करने के लिए एंड-टू-एंड तंत्रिका चमक क्षेत्र-आधारित पद्धति का प्रस्ताव है। शोधकर्ता प्रस्तावित कैमरा और मूल्यांकन के लिए एक अनुकूलित सिम्युलेटर से प्रदान किए गए सिंथेटिक डेटा का उपयोग करके कैप्चर किए गए वास्तविक दुनिया के डेटा का एक डेटासेट एकत्र करेंगे।

परिणाम बताते हैं कि प्रस्तावित दृष्टिकोण उपयुक्त वेगों पर चलती वस्तुओं (जैसे फ्लाइंग चेयर) वाले 3 डी दृश्य डेटा का उपयोग करके उच्च-गुणवत्ता वाली छवियां प्रस्तुत कर सकता है।

हम एक पोर्टेबल मल्टीस्कोपिक कैमरा सिस्टम प्रस्तुत करते हैं जिसमें उपन्यास दृश्यों और गतिशील दृश्यों में अस्थायी संयोजन के लिए समर्पित मॉडल हैं। हमारा लक्ष्य पोर्टेबल मल्टी-व्यू कैमरे का उपयोग करके किसी भी समय किसी भी परिप्रेक्ष्य से गतिशील दृश्यों की उच्च-गुणवत्ता वाली छवियों को प्रस्तुत करना है। इस तरह के नए विचारों और अस्थायी संश्लेषण को प्राप्त करने के लिए गतिशील दृश्य के अस्थायी और स्थानिक दोनों डोमेन में तंत्रिका चमक क्षेत्र (एनईआरएफ) को प्रशिक्षित करने के लिए पांच कैमरों वाला एक भौतिक बहु-दृश्य कैमरा। हमारा मॉडल 6D निर्देशांक (3D स्थानिक स्थिति, 1D अस्थायी समन्वय, और 2D दृश्य अभिविन्यास) को दृश्य-निर्भर, समय-भिन्न चमक और वॉल्यूम घनत्व के लिए मैप करता है। एक निर्दिष्ट कैमरा मुद्रा और समय पर फोटोरिअलिस्टिक छवियों को प्रस्तुत करने के लिए वॉल्यूम प्रतिपादन लागू करें। भौतिक कैमरों की मजबूती में सुधार करने के लिए, हम समय के साथ सूचना प्रसार की सुविधा के लिए एक कैमरा पैरामीटर अनुकूलन मॉड्यूल और एक समय सीमा प्रक्षेप मॉड्यूल का प्रस्ताव करते हैं। हमारे सिस्टम का मूल्यांकन करने के लिए, हम वास्तविक दुनिया और सिंथेटिक डेटासेट दोनों पर प्रयोग करते हैं, और परिणाम बताते हैं कि हमारा दृष्टिकोण वैकल्पिक समाधानों से गुणात्मक और मात्रात्मक रूप से बेहतर है। हमारा कोड और डेटासेट यहां उपलब्ध हैं: यह https URL.

शोध पत्र: झांग, टी., लाउ, वाई.-एफ., चेन, क्यू., “पोर्टेबल मल्टीस्कोपिक कैमरा फॉर नॉवेल व्यूज़ एंड टेम्पोरल कंपोजिटिंग इन डायनेमिक सीन,” 2022। संपर्क: https://arxiv.org/abs/2208.14433

तुम कर सकते हो अपना लिंक प्रदान करें इस पोस्ट के विषय से संबंधित पेज के लिए।