3 पॉइंट द्वारा GN⁺ 2025-04-14 | 1 टिप्पणियां | WhatsApp पर शेयर करें
  • Anubis संयुक्त राष्ट्र सहित कई प्रमुख संगठनों में इस्तेमाल किया जा रहा सॉफ़्टवेयर है
  • यह सॉफ़्टवेयर Linux Kernel Mailing List, FreeBSD, SourceHut, FFmpeg, Wine, UNESCO आदि में डिप्लॉय किया गया है
  • Anubis की तैनाती इस सॉफ़्टवेयर के महत्व और प्रभाव को दिखाती है
  • डेवलपर Anubis की इंस्टॉलेशन को और आसान बनाना चाहता है, और इसके लिए वित्तीय समर्थन का अनुरोध कर रहा है
  • इंटरनेट पर बढ़ते bot traffic की समस्या से निपटने के लिए Anubis पर और अधिक प्रयास करने की योजना है

Anubis की तैनाती

  • Anubis संयुक्त राष्ट्र सहित कई प्रमुख संगठनों में इस्तेमाल हो रहा है
  • इसे Linux Kernel Mailing List, FreeBSD, SourceHut, FFmpeg, Wine, UNESCO, Science Olympiad Student Center, Enlightenment, और GNOME's GitLab आदि में डिप्लॉय किया गया है
  • ऐसी तैनाती Anubis के महत्व और प्रभाव को दिखाती है

डेवलपर की चिंताएँ और योजना

  • Anubis की इंस्टॉलेशन को और आसान बनाना चाहता है
  • इसके लिए वित्तीय समर्थन का अनुरोध किया गया है, और Patreon के माध्यम से दान लिया जा रहा है
  • इंटरनेट पर बढ़ते bot traffic की समस्या का समाधान करने के लिए Anubis पर और अधिक मेहनत करने की योजना है
  • ज़रूरत पड़ने पर लोगों को नियुक्त करने की संभावना भी है

इंटरनेट ट्रैफ़िक की समस्या

  • यह उल्लेख किया गया है कि YouTube जैसे प्लेटफ़ॉर्म पर bot traffic इंसानी ट्रैफ़िक से अधिक हो सकता है
  • ऐसी समस्या पूरे इंटरनेट में पैदा हो सकती है
  • Anubis और उससे जुड़े तकनीकी स्टैक पर और अधिक प्रयास करने की ज़रूरत महसूस की जा रही है

व्यक्तिगत विचार

  • डेवलपर ने मौजूदा स्थिति को "अब तक की सबसे surreal बातचीत" बताया है
  • उसने यह हैरानी व्यक्त की है कि उसकी ज़िंदगी किस तरह बदल गई है
  • Bluesky के माध्यम से और जानकारी साझा करने की योजना है

1 टिप्पणियां

 
GN⁺ 2025-04-14
Hacker News राय
  • यह मज़ेदार है कि Xe ने ऐसी चीज़ को, जिसे ऐतिहासिक रूप से मज़ाक या तुच्छ पोस्ट माना जाता था, एक वास्तव में उपयोगी प्रोडक्ट में बदल दिया
  • यह हैरान करने वाला है कि बहुत-सी साइटों को इस प्रोडक्ट की ज़रूरत है
    • कुछ git सर्वरों के मामले में, वे गहरे history वाले, बिना cache के, और धीमी disk से serve किए जाते हैं, इसलिए git पेज धीमे हो जाते हैं — यह समझ में आता है
  • Unesco के मामले में, सबसाइट काफ़ी बड़ी है और उसमें हज़ारों दस्तावेज़ हैं, लेकिन वह static content है
    • एक ग़लत तरीके से deploy किया गया Wordpress Apache के ऊपर चल रहा है, उसमें caching नहीं है, content compression नहीं है, और HTTP 2/3 भी नहीं है
    • इसे छोटे मशीन पर सस्ते में serve किया जा सकता है, लेकिन इसके लिए विशेषज्ञता चाहिए
  • आप LLM से पूछ सकते हैं, लेकिन जब यह न पता हो कि क्या पूछना है, तब यह मददगार नहीं होता
  • यह AI scraping को रोकने के लिए है
    • Anubis यह सुनिश्चित करने के लिए proof-of-work challenge का उपयोग करता है कि client modern browser इस्तेमाल कर रहा है और SHA-256 checksum की गणना कर सकता है
  • मुझे Anubis प्रोजेक्ट शानदार लगता है
    • लेकिन यह अफ़सोस की बात है कि साइट विज़िटर को Javascript™ सक्षम करना पड़ता है
    • यह static साइटों के लिए उपयुक्त नहीं है
  • नेटवर्क स्तर पर "खराब बॉट्स" को प्रभावी रूप से ब्लॉक करने वाला समाधान बनाया गया है
    • MaxMind के database और custom WAF व Reverse Proxy का उपयोग करके कई बड़े "Big Tech / Big LLM" नेटवर्कों को ASN(BGP) स्तर पर ब्लॉक किया गया है
  • मुझे लगता है कि proof-of-work challenge को protocol स्तर तक नीचे आना चाहिए
    • accessibility के लिए इसे TCP के हिस्से के रूप में लागू करना बेहतर होगा
  • Anubis की जाँच के इंतज़ार के दौरान दिखने वाली मध्यवर्ती पेज की इमेज प्यारी है
    • मैं सोच रहा था कि इसका सामान्य search engine पर क्या असर पड़ता है और Cloudflare के AI crawler prevention solution से इसकी तुलना कैसी है
    • Anubis को install और इस्तेमाल करने पर कुछ search engines वेबसाइट को index नहीं कर सकते
    • AI scraper bots इतने आक्रामक तरीके से scraping करते हैं कि मजबूरी में यह तरीका चुनना पड़ा
    • ज़्यादातर मामलों में Cloudflare का उपयोग करके सुरक्षा की जा सकती है, लेकिन जहाँ उसका उपयोग संभव न हो, वहाँ Anubis एक विकल्प है
  • फ़ोन पर bot detection हल करने में 5 सेकंड लगते हैं
  • JavaScript अक्षम किए हुए उपयोगकर्ताओं को ब्लॉक करने में यह प्रभावी है
  • यह अच्छा दिखता है, लेकिन मैं सोचता हूँ कि AI कंपनियों को challenge हल करके और proof-of-work पूरा करके वेबसाइट scrape करने से कैसे रोका जा सकता है