Krita AI Diffusion - ओपन सोर्स पेंटिंग टूल Krita के लिए Generative AI

• Krita वर्कफ़्लो के भीतर inpaint और outpaint सपोर्ट
  • किसी क्षेत्र को चुनें और बटन दबाएँ, तो इमेज से मेल खाती नई सामग्री जनरेट हो जाती है
  • कैनवास को बढ़ाकर नए क्षेत्र को जनरेट की गई सामग्री से भरने पर, मौजूदा इमेज के साथ स्वाभाविक रूप से घुलने-मिलने वाला विस्तार बनता है
  • प्रॉम्प्ट वैकल्पिक है, इसे देना ज़रूरी नहीं
• लक्ष्य है कि Photoshop के "Generative Fill/Expand" से भी अधिक क्षमताएँ दी जाएँ
• strength समायोजित करके मौजूदा सामग्री (img2img) को refine किया जा सकता है या इमेज को शुरुआत से नया जनरेट किया जा सकता है
• सब कुछ लोकल में चलता है, ओपन सोर्स है, और मुफ़्त है

फीचर सारांश

• Inpaint: Krita के selection tools का उपयोग करके किसी क्षेत्र को मार्क करें और इमेज के भीतर मौजूदा सामग्री को हटाएँ या बदलें
• Outpaint: कैनवास बढ़ाएँ, खाली क्षेत्र चुनें, और उसे मौजूदा इमेज के साथ स्वाभाविक रूप से मेल खाने वाली सामग्री से अपने-आप भरें
• Generate: शब्दों या मौजूदा इमेज से शुरुआत से नई इमेज जनरेट करें
• Refine: मौजूदा इमेज सामग्री को पूरी तरह बदलने के बजाय, सूक्ष्म समायोजन के लिए strength slider का उपयोग करें
• Control: sketch या line art से सीधे इमेज जनरेशन को guide करें, या मौजूदा इमेज और 3D scenes से depth या normal map का उपयोग करें
• Resolutions: सभी resolutions पर कुशलता से काम करें, AI मॉडल के अनुकूल resolution का अपने-आप उपयोग करें और उसे इमेज क्षेत्र के हिसाब से समायोजित करें
• Upscaling: मेमोरी खत्म हुए बिना इमेज को 4k, 8k या उससे ऊपर तक upscale करें और उसे अधिक समृद्ध बनाएँ
• Job Queue: हार्डवेयर के अनुसार इमेज जनरेशन में समय लग सकता है, इसलिए jobs को queue में डालें और रद्द भी करें
• History: हर इमेज masterpiece नहीं होती, इसलिए परिणामों का preview देखें और पुराने generations व prompts को कभी भी ब्राउज़ करें
• Strong Defaults: अलग-अलग scenarios को कवर करने वाले सरल UI के लिए बहुउपयोगी default style presets उपलब्ध
• Customization: अपने presets बनाएँ - stable diffusion checkpoint चुनें, LoRA जोड़ें, sampler समायोजित करें आदि

शुरू करना

• प्लगइन में Stable Diffusion backend के लिए integrated installer शामिल है
• आवश्यकताएँ: Windows या Linux (MacOS का परीक्षण नहीं हुआ), Linux पर Python + venv इंस्टॉल होना चाहिए
• हार्डवेयर सपोर्ट: लोकल में चलाने के लिए कम-से-कम 6 GB VRAM वाला शक्तिशाली graphics card सुझाया जाता है, नहीं तो इमेज जनरेशन बहुत धीमी होगी
• इंस्टॉलेशन: Krita इंस्टॉल करें, प्लगइन डाउनलोड करें और pykrita फ़ोल्डर में extract करें, Krita settings में प्लगइन enable करें और restart करें, plugin docker दिखाएँ, और server installation के लिए "Configure" पर क्लिक करें
• GPU cloud: लोकल में चलाने के बजाय GPU किराये पर लिया जा सकता है; इस स्थिति में चरण 5 की आवश्यकता नहीं होती, और प्लगइन से remote server से कनेक्ट किया जा सकता है
• वैकल्पिक: ComfyUI server को customize करें; auto-install के बजाय manual install या मौजूदा install का उपयोग किया जा सकता है; अगर server, Krita शुरू होने से पहले ही लोकल में चल रहा हो तो प्लगइन अपने-आप कनेक्ट करने की कोशिश करेगा; remote server का उपयोग भी संभव है

GN⁺ की राय

इस लेख का सबसे महत्वपूर्ण बिंदु यह है कि Krita उपयोगकर्ताओं के लिए एक नया प्लगइन जारी किया गया है, जो AI तकनीक का उपयोग करके रचनात्मक प्रक्रिया को सरल और बेहतर बना सकता है। यह प्लगइन इमेज जनरेशन, विस्तार और सूक्ष्म समायोजन जैसी कई सुविधाएँ देता है, जिससे डिजिटल कलाकारों के वर्कफ़्लो में बड़ा बदलाव आ सकता है। इसका ओपन सोर्स होना और कस्टमाइज़ किया जा सकना, तकनीक में रुचि रखने वाले शुरुआती software engineers के लिए भी इसे खास तौर पर दिलचस्प बनाता है।

[GN⁺]

Hacker News राय

• Krita कम्युनिटी और core team ने AI के खिलाफ स्पष्ट रुख अपनाया है.

  • Krita user interface विकसित करने वाले एक group का हिस्सा होने के नाते, इसी कारण Krita version पर काम करना बंद कर दिया.

• interactive AI drawing संभव करने वाले system के उपयोग का अनुभव साझा किया गया.

  • system 4090 GPU का उपयोग करता है, जो प्रति सेकंड 20-30 iterations कर सकता है.
  • प्रति image 8 iterations मानें तो प्रति सेकंड 4 images बनाई जा सकती हैं.
  • मनचाही image मिलने के बाद, image को final करने के लिए 30-50 iterations चलाए जाते हैं.

• AMD GPU को DirectML के जरिए support किया जाता है, लेकिन यह केवल Windows पर संभव है.

  • इस रुझान पर असंतोष व्यक्त किया गया.
  • विकल्प के तौर पर ComfyUI नामक torch-आधारित project को backend के रूप में इस्तेमाल किया जा सकता है.

• Krita और कला की अच्छी बात यह थी कि सस्ते tools और internet भर से कोई भी कला के जरिए कमाई कर सकता था.

  • अगर महंगे graphics card अनिवार्य हो जाएँ, तो कला की लोकतांत्रिक पहुंच काफी कम हो जाएगी, ऐसी चिंता है.

• अगर यह माना जाए कि AI कुछ वर्षों में सभी संभावित कलाकृतियाँ बना देगा, तो खुद कुछ रचने की कोशिश ही निरर्थक लगती है.

  • AI का अच्छा उपयोग करना सीख लेने पर भी, एक creator के रूप में आजीविका कितने समय तक चल सकेगी, इस पर सवाल है.
  • रचना करना hobby के रूप में आनंददायक हो सकता है, लेकिन पेशे के रूप में, जब हर कोई कला बना सकेगा, तब कमाई करना मुश्किल हो जाएगा.

• फिलहाल मुफ्त में उपलब्ध शक्तिशाली computing resources का उपयोग करके सृजनात्मक काम करने वाले एक व्यक्ति का अनुभव साझा किया गया.

  • आर्थिक कठिनाइयों के बावजूद, AI-सहायित सृजन में सकारात्मक पहलू पाए गए.

• Ubuntu पर installation का अनुभव साझा किया गया.

  • पहले Krita install करके चलाना होता है, फिर plugin को मनचाहे folder में copy करना पड़ता है.

• इस बात पर आश्चर्य व्यक्त किया गया कि open source software ने Adobe Photoshop जैसी functionality लागू कर दी है.

  • इसका मतलब है कि Photoshop AI generation tools के लिए जो proprietary स्थिति बनाए हुए था, वह खो सकता है.

• एक शक्तिशाली graphics card recommended है, और कम से कम 6GB VRAM चाहिए.

  • 4GB VRAM card पर image generation में कितना अधिक समय लगेगा, इस पर सवाल पूछा गया.

• आवश्यक hardware न होने पर अफसोस जताने वाले user का उल्लेख.

  • क्या किसी ने Steam Deck पर stable diffusion सफलतापूर्वक चलाया है, और अन्य विकल्पों के बारे में जानकारी साझा की गई.

• कई GPU का उपयोग करके यह काम करता है या नहीं, इस पर प्रश्न पूछा गया.