Show HN: Fill 3D - AI-आधारित virtual staging के लिए 3D Generative Fill

 (github.com/fill3d)
1 पॉइंट द्वारा GN⁺ 2023-09-30 | 1 टिप्पणियां | WhatsApp पर शेयर करें
  • Fill 3D API दिखाने वाला एक starter project है, और AI-आधारित virtual staging के लिए 3D Generative Fill के implementation का उदाहरण है
  • चलाने से पहले .env.example को .env.local में बदलें, और fill3d.ai पर जनरेट की गई API key को FILL3D_API_KEY में दर्ज करें
  • dependency installation और development server चलाने के लिए npm install और npm run dev का उपयोग करें
  • development server चलने के बाद वेबपेज http://localhost:3000 पर खोला जा सकता है

संबंधित पढ़ाई

1 टिप्पणियां

 
GN⁺ 2023-09-30
Hacker News टिप्पणियाँ

  • तकनीक अपने-आप में प्रभावशाली है, लेकिन इसकी संभावनाएँ काफ़ी डरावनी हैं
    जहाँ मैं रहता हूँ, वहाँ रियल एस्टेट ‘एजेंट’ पहले से ही लिस्टिंग की तस्वीरों को Photoshop से एडिट करके उन्हें पूरी तरह रिनोवेटेड और फर्नीचर से सजे घर जैसा दिखाते हैं
    असल में घर अक्सर खाली होता है और हालत भी बहुत खराब होती है, इसलिए ऐसी तकनीक के साथ बिना खुद देखे प्रॉपर्टी की स्थिति समझना और मुश्किल हो जाएगा
    अब ऐसी तकनीक को विज्ञापनों में इस्तेमाल होने से रोकना मुश्किल है, और लिस्टिंग्स भी असल में विज्ञापन ही बन चुकी हैं, इसलिए रियल एस्टेट प्लेटफॉर्म पर फर्जी तस्वीरें अपलोड करने से रोकने वाली नीतियाँ/कानून ही एकमात्र समाधान लगते हैं
    हालांकि निर्माता इस तकनीक को सब्सक्रिप्शन मॉडल पर एजेंटों को बेचकर काफी पैसा कमा सकते हैं

    • बिक्री के लिए रखी चीज़ों को गलत तरीके से दिखाने के खिलाफ कानून पहले से मौजूद लगते हैं
      फर्नीचर शामिल है या नहीं, यह कॉन्ट्रैक्ट में साफ़ लिखा होता है, और इलाका-दर-इलाका अलग हो सकता है, लेकिन हमारे क्षेत्र में सबसे आम चीज़ खिड़कियों या घर के पीछे की तस्वीरों में सूर्यास्त जोड़ देना है
      हालांकि एजेंट ने फफूंद या पानी से हुए नुकसान जैसी चीज़ें हटाई हैं या नहीं, यह पहचानना मुश्किल हो सकता है
    • स्टेजिंग Photoshop तो लंबे समय से मौजूद है

  • उदाहरण बहुत अच्छे लग रहे हैं। अगर और images शेयर कर सकें तो अच्छा होगा
    अलग-अलग तरह के कमरों और इंटीरियर जैसे और उदाहरण हों, जो दिखाएँ कि यह tool किस हद तक संभाल सकता है, तो अच्छा रहेगा
    उल्टा, यह क्या नहीं कर सकता, यह भी जानना चाहूँगा। क्या ऐसी स्थितियाँ हैं जहाँ यह टूट जाता है?

    • अच्छा सुझाव है। कल समय निकालकर /gallery page जोड़ने की कोशिश करूँगा
      ट्रैकिंग के लिए issue भी बनाया है: https://github.com/fill3d/fill/issues/1
      अच्छा first issue है :D

  • हैरान करने वाला। जो objects डाले गए हैं, वे diffusion model + ControlNet से बने नहीं हैं, बल्कि texture लगाए हुए 3D models को render किया गया है?
    यह भी जानना चाहूँगा कि उपलब्ध texture वाले 3D models का set fixed है, या prompt के आधार पर तुरंत generate होता है

    • सही है। अभी हम Blenderkit dialog का इस्तेमाल कर रहे हैं, लेकिन इसे उससे आगे भी expand किया जा सकता है
      जब आप prompt डालकर search करते हैं, तो असल में multimodal search चलती है; उदाहरण के लिए, अगर आप ‘red painting’ माँगते हैं तो यह सच में लाल painting ढूँढ देता है
      इसलिए यह सामान्य search से अविश्वसनीय रूप से ज़्यादा accurate है। AI हर जगह घुस रहा है

  • मेरे use case में शायद apartment सजाना होगा
    मेरे पास एक बड़ा खाली studio apartment है जिसमें bed और sofa पहले ही खरीद लिए हैं, और अब बाकी खाली जगह में क्या भरना है यह तय करना है
    coffee table, media console, TV या ultra-short-throw projector, bar, bookshelf, desk जैसी चीज़ें
    अच्छा होगा अगर इसे किसी pure concept के बजाय वास्तव में खरीदे जा सकने वाले products से भरा जा सके

    • सही, यह सच में roadmap में मौजूद feature है
      क्योंकि यह 3D में generate करता है, user अपना 3D model लाकर catalog में जोड़ सकता है
      Apple के object capture जैसी चीज़ (https://developer.apple.com/augmented-reality/object-capture...) जोड़ दें, तो sofa को वैसे ही scan करके Fill 3D पर upload करना, place करना और फिर generate करना भी संभव है
      आगे के लिए उत्साहित हूँ
    • अभी मैंने इसे इस्तेमाल नहीं किया है, लेकिन कुछ दिन पहले ऐसे use case के लिए एक site देखी थी: https://aihomedesign.com
      मेरा उनसे कोई संबंध नहीं है

  • क्या real estate companies ने यह तरीका सोचा होगा कि घरों को बिना furniture के खाली रखा जाए, और संभावित खरीदार AR goggles पहनकर देखें कि उनका अपना furniture रखने पर कैसा लगेगा?

    • लगता है सिर्फ phone या tablet को viewport की तरह इस्तेमाल करना भी काफी होगा
      immersion कम होगा, लेकिन adoption barrier बहुत कम हो जाएगा
    • अगर एक single frame को path tracing से render करने में 1 मिनट से ज़्यादा लगता है, तो इस स्तर की realism मौजूदा AR में संभव नहीं लगती

  • क्या यह deck और front porch पर भी काम करेगा?
    construction company website के लिए staging की जरूरत वाली deck और porch photos हैं

  • demo आज़माया, लेकिन लगता है bug है, और ऐसा दिखता है कि predefined database के existing items ही चुने जा सकते हैं

    • जानना चाहूँगा कि आपको कौन-सा bug मिला
      और हाँ, चूँकि हम actual 3D models का इस्तेमाल कर रहे हैं, model set fixed है। अभी 300 से थोड़ा कम हैं
      प्राथमिकता अत्यंत realistic results है, इसलिए मौजूदा state-of-the-art 3D model diffusion technology काफी नहीं है। OpenAI Point-e देखें: https://github.com/openai/point-e

  • Fill3D की ‘path tracing से अत्यंत realistic results render करने’ वाली architecture और fxn.ai की transparent deployment feature को साथ देखकर सच में प्रभावशाली लगा
    मौजूदा project में दोनों का इस्तेमाल कर सकता हूँ, इसलिए इन्हें देखूँगा

  • business model के बारे में क्या सोच रहे हैं?
    मैं एक छोटे MLS का system administrator हूँ, और सोच रहा हूँ कि इसे कहाँ integrate किया जा सकता है
    प्रति staging 2 डॉलर हो तो शायद Realtor को सीधे bill करना पड़ेगा। जहाँ तक मुझे पता है, हम pass-through billing नहीं करते
    हालांकि प्रति Realtor प्रति माह कुछ stagings शामिल करने वाला model संभव हो सकता है
    consumers के खुद staging करके देखने का एक मज़ेदार use case भी दिमाग में आता है, लेकिन बहुत कम Realtors होंगे जो consumers से ऐसा करवाने के लिए प्रति staging 2 डॉलर देंगे

    • इस पर सही से बात करना चाहूँगा
      bulk pricing में कीमत काफी घटाई जा सकती है
      अंतिम लक्ष्य यह है कि users आपकी real estate website या MLS के अंदर ही सीधे staging कर सकें
      कृपया yusuf@fill3d.ai पर संपर्क करें

  • https://www.fill3d.ai/ पर मौजूद screencast किससे बनाया गया है?

    • लगता है https://www.screen.studio है
    • मुझे भी जानना है
      हाल में इसी style के बहुत screencasts देखे हैं, और मुझे ये खास पसंद नहीं हैं
      recording area लगातार move करता रहता है, जो काफी distracting है
    • Screen Studio है