वीडियो टाइम पिरामिड के साथ समय बीतने की कल्पना करें
हम धीमी गति और समय-व्यतीत फोटोग्राफी जैसी विभिन्न तकनीकों का उपयोग करके अपने आस-पास की दुनिया को अलग-अलग गति से देखते हैं।
छवि क्रेडिट: arXiv:2208.11885 [cs.CV]
arXiv.org पर एक हालिया पेपर वीडियो टेम्पोरल पिरामिड का प्रस्ताव करता है। यह विभिन्न समय-सीमाओं में परिवर्तनों की कल्पना करने के लिए एक दृष्टिकोण है और पिरामिड को नेविगेट करने और उसकी खोज करने के लिए एक विज़ुअलाइज़ेशन टूल है।
पिरामिड में नए वीडियो का एक संग्रह होता है, प्रत्येक विशिष्ट समय पर होने वाले आसवन परिवर्तन। अलियासिंग या झिलमिलाहट के बिना एक सहज देखने का अनुभव प्रदान करता है। एक वीडियो स्पेक्ट्रोग्राम समय बनाम टाइमस्केल प्लॉट करता है और दिन और रात जैसे मजबूत आवधिक परिवर्तनों का एक स्पष्ट पैटर्न दिखाता है। उपयोगकर्ता पहले एक सिंहावलोकन स्कैन चला सकते हैं और फिर विवरण देखने के लिए कम समय-सीमा तक ड्रिल डाउन कर सकते हैं।
शोधकर्ताओं ने निर्माण स्थलों जैसे विभिन्न बाहरी दृश्यों के कई लंबी अवधि के वेबकैम डेटासेट का उपयोग करके इस दृष्टिकोण को मान्य किया है।
किसी दृश्य को महीनों या वर्षों तक देखकर हम उसके बारे में क्या सीख सकते हैं? लंबे समय तक रिकॉर्ड किए गए वीडियो कई समय के पैमाने पर दिलचस्प घटनाओं को दर्शाते हैं, लेकिन उन्हें पहचानना मुश्किल है। यह देखना मुश्किल है। वीडियो सब कुछ देखने के लिए बहुत लंबा है, और कुछ घटनाएं, जैसे पीछे हटने वाले ग्लेशियर, वास्तविक समय में अनुभव करने के लिए बहुत देर हो चुकी हैं। टाइमलैप्स वीडियोग्राफी लंबे वीडियो को सारांशित करने और धीमी टाइमस्केल्स को देखने के लिए एक लोकप्रिय तरीका है। हालांकि, टाइम-लैप्स एक चुनी हुई टेम्पोरल फ़्रीक्वेंसी तक सीमित होते हैं और अक्सर फ़्रेम के बीच अलियासिंग और टेम्पोरल डिसकंटिन्यू के कारण झिलमिलाहट के अधीन होते हैं। इस पत्र में, हम वीडियो टेम्पोरल पिरामिड का प्रस्ताव करते हैं, एक ऐसी तकनीक जो इन सीमाओं को संबोधित करती है और समय बीतने की कल्पना करने की संभावनाओं का विस्तार करती है। कंप्यूटर विज़न में स्थानिक छवि पिरामिड से प्रेरित होकर, हमने टाइम डोमेन में वीडियो पिरामिड बनाने के लिए एक एल्गोरिथम विकसित किया। वीडियो टेम्पोरल पिरामिड का प्रत्येक स्तर एक अलग टाइमस्केल की कल्पना करता है। उदाहरण के लिए, मासिक टाइमस्केल पर वीडियो आमतौर पर मौसमी परिवर्तनों को देखने के लिए अच्छे होते हैं, जबकि एक मिनट के टाइमस्केल पर वीडियो सूर्योदय और आकाश में घूमते बादलों को देखने के लिए बहुत अच्छे होते हैं। विभिन्न पिरामिड स्तरों की खोज में सहायता के लिए, हम एक वीडियो स्पेक्ट्रोग्राम भी प्रस्तावित करते हैं जो पूरे पिरामिड में गतिविधि की मात्रा की कल्पना करता है। यह दृश्य गतिकी का एक समग्र अवलोकन और समय और समय-सीमा में घटनाओं का पता लगाने और खोजने की क्षमता प्रदान करता है। अपने दृष्टिकोण को प्रदर्शित करने के लिए, हमने 10 बाहरी दृश्यों से वीडियो टेम्पोरल पिरामिड बनाए। प्रत्येक में महीनों या वर्षों का डेटा होता है। वीडियो टेम्पोरल पिरामिड लेयर की तुलना एक साधारण टाइमलैप्स से करने से पता चलता है कि कैसे पिरामिड हमें अलियासिंग के बिना दीर्घकालिक परिवर्तन देखने की अनुमति देता है। हम यह भी दिखाते हैं कि वीडियो स्पेक्ट्रोग्राम अवलोकन और विस्तार-केंद्रित दोनों दृष्टिकोणों को सक्षम करके पिरामिड स्तरों पर घटनाओं की जांच और खोज की सुविधा प्रदान करते हैं।
शोध पत्र: स्विफ्ट, एमई, एयर्स, डब्ल्यू।, पलैंक, एस।, और वेहरविन, एस।, “वीडियो टेम्पोरल पिरामिड के साथ समय के मार्ग की कल्पना”, 2022। लिंक: https://arxiv.org/abs/2208.11885
