'Gaussian splatting' काफ़ी कमाल की है

 (aras-p.info)
2 पॉइंट द्वारा GN⁺ 2023-09-09 | 1 टिप्पणियां | WhatsApp पर शेयर करें
  • "3D Gaussian Splatting for Real-Time Radiance Field Rendering" शीर्षक वाले शोध-पत्र पर एक लेख
  • Gaussian splatting, 3D दृश्यों को position, rotation, size, opacity और color वाले लाखों particles के रूप में दर्शाने की एक विधि है
  • particles को फैले हुए spheres के रूप में नहीं, बल्कि screen space में 2D Gaussian के रूप में render किया जाता है
  • शोध-पत्र के लेखकों ने gradient descent और differentiable rendering का उपयोग करके फ़ोटो में दर्शाए गए दृश्य का प्रतिनिधित्व करने वाले लाखों particles बनाने की एक विधि विकसित की
  • लेखकों ने इन लाखों scaled particles को तेज़ी से render करने की विधि भी विकसित की
  • लेख के लेखक Unity में Gaussian splatting के real-time visualization हिस्से को implement कर रहे हैं और data size कम करने के तरीकों पर विचार कर रहे हैं
  • लेख में Gaussian splatting के इतिहास और उसके पहले के उपयोगों पर भी चर्चा है, जो लगभग 2001-2002 के आसपास शुरू हुए थे
  • लेखक ने GitHub पर Gaussian splatting का अपना implementation साझा किया है, और बताया है कि यह काम करता है, लेकिन official implementation जितना तेज़ नहीं है
  • लेखक यह भी कहते हैं कि Gaussian splatting इस्तेमाल करते समय data size और memory usage महत्वपूर्ण बातें हैं, और लेख में इस्तेमाल किया गया उदाहरण दृश्य disk पर 1.5GB data मांगता है

संबंधित पढ़ाई

1 टिप्पणियां

 
GN⁺ 2023-09-09
Hacker News राय
  • Gaussian splatting की क्षमता पर लेख; कई इमेजों से 3D सीन को पुनर्निर्मित करने वाली तकनीक, जिसने टेक उत्साहियों के बीच उत्साह पैदा किया
  • Gaussian splatting को अतीत के परिवेश को फिर से रचने के लिए एक आशाजनक टूल माना गया, जो यादों की लहर जगा सकता है
  • इसमें gradient descent और "differentiable rendering" का उपयोग होता है, "neural" से जुड़े शब्दों से बचा गया है; कुछ पाठकों ने इसे ट्रेंड के पीछे न भागने के लिए सराहा
  • हालांकि, कुछ पाठकों का कहना है कि neural network से बचना अपने-आप में सराहना का लक्ष्य नहीं होना चाहिए; वे लोकप्रिय होने के कारण हैं और अच्छे function approximator हैं
  • लेख में point-based rendering का भी उल्लेख है, जो गेम के particle system के मूल में है; पाठकों ने हाल के गेमों में particle system के बदलावों पर ध्यान दिया
  • कुछ पाठकों ने सवाल उठाया कि क्या Gaussian splatting dynamic lighting और movement को सपोर्ट कर सकता है; सीन/रैडियंस फील्ड आमतौर पर static होते हैं और उनमें lighting पहले से baked-in होती है
  • इस तकनीक की तुलना Cyberpunk 2077 के braindance कॉन्सेप्ट से की गई, जिसमें खिलाड़ी किसी और की दृश्य स्मृतियों के भीतर घूम सकता है
  • पाठक 3D Gaussian splatting rendering के पहले WebGPU-optimized implementation और efficient scene data compression/decompression का इंतजार कर रहे हैं
  • कुछ पाठकों ने Gaussian splatting का उपयोग करने के तरीके पर संसाधन साझा किए, जैसे YouTube पर beginner guide
  • यह तकनीक बिल्कुल नई नहीं है; 1991 में volume rendering के लिए splatting के संदर्भ और 90 के दशक के उत्तरार्ध में voxel iso-surface के उपयोग का भी उल्लेख किया गया
  • पाठक structure from motion की state of the art तकनीक के बारे में जिज्ञासु थे, जो किसी स्पेस के वीडियो को 3D सीन में बदल देती है