Google की रैंकिंग में तेजी से ऊपर आया 'Hacker News'

 (jonathanpagel.com)
1 पॉइंट द्वारा GN⁺ 2024-02-19 | 1 टिप्पणियां | WhatsApp पर शेयर करें

Hacker News की Google रैंकिंग में तेजी

  • गूगल सर्च परिणामों में बार-बार आने वाला फोरम होने के बावजूद, पहले Hacker News गूगल पर खोजने पर नहीं मिल पाता था।
  • गूगल के 'Hidden Gems अपडेट' के बाद रैंकिंग ढाँचा बदल गया है, जिसमें उपयोगी व्यक्तिगत insights और अनुभव को, खासकर फोरम्स में, प्राथमिकता दी जा रही है।
  • बताया जाता है कि Reddit और Quora ने इस अपडेट से काफी ट्रैफिक हासिल किया है।

Hacker News की दृश्यता में बदलाव

  • सिस्ट्रिक्स (sistrix) और सेमरश (semrush) जैसे टूल्स से यह पाया गया कि ब्रिटेन में Hacker News की दृश्यता 162% बढ़ी, जबकि अमेरिका में 75%।
  • चूँकि Hacker News केवल अंग्रेज़ी सामग्री रखता है, इसलिए ब्रिटेन और अमेरिका की रैंकिंग पर फोकस किया गया।

Hacker News के शीर्ष रैंक वाले परिणाम

  • "GTA कहाँ बनाया गया था?" पूछने वाली टिप्पणी शीर्ष परिणाम के रूप में दिखाई दे रही है।
  • "Monaco को Italian में क्या कहते हैं" सवाल पर desdiv की टिप्पणी नंबर 1 पर है।
  • GRAHAM PANTHER का लेख "मेरी ज़िंदगी बर्बाद हो गई" जैसे कई कीवर्ड्स पर अच्छी रैंक कर रहा है।
  • ब्रांड-आधारित कीवर्ड्स पर भी Hacker News अच्छी तरह दिख रहा है; उदाहरण के लिए YouTube TV की कीमत से जुड़े सभी प्रश्नों में Google thunderbong की पोस्ट को प्राथमिकता दे रहा है।
  • "libgen mirror" और "4chan" जैसे खास कीवर्ड्स पर भी Hacker News पोस्टों की रैंकिंग ऊँची है।

गैर-तकनीकी विषयों में रैंकिंग

  • यह देखकर हैरानी हुई कि Hacker News कई गैर-तकनीकी विषयों में भी रैंक कर रहा है।

Hacker News की ट्रैफिक और कीवर्ड रैंकिंग

  • अंग्रेज़ी को मुख्य भाषा न मानने वाले देशों में, ट्रैफिक और कीवर्ड रैंकिंग डेटा से पता चलता है कि Hacker News की वृद्धि अमेरिका की तुलना में कहीं तेज़ है।

ज्यादा ध्यान मिलने के नुकसान

  • Google के hidden gems अपडेट के बाद कई वेबसाइटों ने spam में तेज़ बढ़ोतरी का अनुभव किया है।
  • SEO experts अब Reddit अकाउंट, टिप्पणियाँ और वोट खरीदकर अपनी साइट का प्रचार कर पा रहे हैं।
  • अपडेट से फिर से दिख रहे Google Groups ज्यादातर free-spin पर लेखों से जुड़े हैं, और LinkedIn सहित अन्य social platforms भी SEO spammers के निशाने पर हैं।
  • उम्मीद है कि बढ़ी हुई visibility का Hacker News पर बहुत नकारात्मक असर न पड़े।

GN⁺ का मत

  • Hacker News की Google रैंकिंग में वृद्धि यह दिखाती है कि उपयोगी जानकारी देने वाले फोरम और communities कितने महत्वपूर्ण हैं।
  • Google की ranking बदलाव को ऐसी कोशिश के रूप में देखा जा सकता है जो information quality को बेहतर बनाकर user experience सुधारने पर केन्द्रित हो।
  • यह बदलाव SEO रणनीतियों को भी प्रभावित करता है और इशारा करता है कि SEO को सच में value देने वाली और प्रामाणिक सामग्री पर ज़ोर देने वाली दिशा में evolve होना होगा।

संबंधित पढ़ाई

1 टिप्पणियां

 
GN⁺ 2024-02-19
Hacker News की राय

  • शायद Google अब LLM-generated posts को फ़िल्टर करने की अपनी verification strategy के तहत, मजबूत moderation policy वाली साइटों पर ज़्यादा भरोसा करने लगा है
    हो सकता है नवंबर 2022 पूरे वेब के लिए एक नए तरह का Eternal September बन गया हो

    • इससे आगे बढ़कर पूछा जा सकता है कि Google के पास कोई और विकल्प भी है क्या
      अगर प्रभावी LLM-generated content detector बनाना मुश्किल है, तो हम एक अजीब समस्या में फँस गए हैं: जब तक हम अभी भी इस बात पर सहमत हैं कि ‘जानना’ क्या होता है, तब तक इंटरनेट से ऐसा कंटेंट जिसे मानव-निर्मित माना जाता है निकालना पड़ेगा
      इसमें https://en.wikipedia.org/wiki/Low-background_steel जैसी दिलचस्प समानता है
    • Reddit की API changes के बाद हुए exodus का भी असर हो सकता है
      अच्छे open source या third-party clients के लिए लोगों की पसंद को कम करके नहीं आँकना चाहिए
    • मैं Eternal AI September को यूँ परिभाषित करना चाहूँगा: जो वेबसाइटें नवंबर 2022 से पहले से मौजूद थीं और उसी तरह का कंटेंट लगातार पोस्ट करती रही हैं, उन्हें सुरक्षित माना जाएगा, और बाकी को LLM-generated content रोकने के लिए verification के दायरे में रखा जाएगा
    • इसी तरह HN पहले से ही large language model training के लिए एक अहम data source है
      उदाहरण के लिए, RefinedWeb paper में HN को उन सिर्फ 12 websites में गिना गया है जिन्हें बाहर रखा गया था। मेरी समझ से HN इसलिए बाहर था क्योंकि वह final dataset में बिना verification के शामिल हो जाता, और RefinedWeb का इस्तेमाल Falcon model में हुआ था
      https://arxiv.org/pdf/2306.01116.pdf
    • मुझे लगता है कि ऑनलाइन दिखने वाला काफी सारा text-generated content LLM-generated होगा। HN यहाँ कितना अपवाद है, इस पर भी यक़ीन से कुछ कहना मुश्किल है
      शायद ज़्यादातर जगहों से बेहतर हो, लेकिन 2024 में LLM से ऐसा लिखवाकर पोस्ट करना बहुत आसान है जो इंसान द्वारा लिखा हुआ लगे। नवंबर 2022 से पहले का ज़्यादातर इंटरनेट AI-generated नहीं था, बस Seychelles Anon या SubredditSimGPT2 जैसे इक्का-दुक्का अपवाद थे

  • मैंने Brave डाउनलोड किया, फिर search bar में “news” टाइप किया, और वह अपने-आप मुझे यहाँ ले आया, जिसके बाद मैंने HN इस्तेमाल करना शुरू किया
    लेखों की विविधता और चर्चा की गुणवत्ता ने मुझे तुरंत प्रभावित किया, इसलिए मैं उम्मीद से कहीं ज़्यादा देर तक रुका रहा। लेकिन Reddit या Xitter की तरह, लगता है HN भी कभी न कभी लोकप्रिय social media का वही हश्र देखेगा, और शायद उसमें ज़्यादा समय भी न लगे
    असली मुद्दा social control है, और अगर आप monopoly नहीं बना सकते, तो जीतना मुश्किल है। बस यही उम्मीद है कि Dang जितना हो सके उतना लंबा टिके, और HN इंटरनेट का Masada बन जाए। हाँ, 4chan भी अभी मौजूद है, और शायद बाकी सभी social media के मरने के बाद भी 4chan काफ़ी देर तक बचा रहेगा

    • अगर आप नए हैं तो शायद न जानते हों, लेकिन HN Reddit जैसा बनता जा रहा है वाला meme कम से कम 17 साल पुराना है, और पहले यह Hacker News Guidelines की आख़िरी पंक्ति हुआ करती थी: https://news.ycombinator.com/newsguidelines.html
    • enshittification को रोकने का एक सीधा तरीका है शुरुआत से ही बहुत ज़्यादा मशहूर न होना, और उसका एक तरीका यह है कि website performance को इस तरह tune किया जाए कि वह प्रति मिनट requests की केवल एक तय संख्या ही संभाले
    • क्या किसी को पता है कि dang के retirement के बाद Hacker News का moderation operations कैसे चलाने की योजना है?

  • तो अब theory यह है कि bots HN पर कब्ज़ा कर लेंगे, अपनी पसंद की चीज़ों को ऊपर चढ़ाएँगे, और साइट की value खराब कर देंगे? इसका defense क्या होगा?

    • यह थोड़ा चिंता का विषय है। सच कहूँ तो HN पर spam इतना कम है, यह अपने-आप में हैरान करने वाली बात है, तो शायद पहले से कोई अच्छा anti-spam system मौजूद हो
      अगर सभी external links को nofollow पर सेट कर दिया जाए ताकि Google उन्हें ignore करे, तो SEO के नज़रिए से यह कम आकर्षक हो सकता है
    • संक्रमित अंग काटने की तरह Google की पहुँच पूरी तरह बंद कर दो
      या HN को active branch और archive branch में बाँट दिया जाए, और बाद वाली branch में सिर्फ वही पोस्ट Google को दिखाई जाएँ जो recommendation count threshold पार कर चुकी हों
    • पिछले कुछ हफ़्तों में मैंने पहले की तुलना में ज़्यादा crypto scam posts देखी हैं
      वे जल्दी dead हो जाती हैं, लेकिन पता नहीं क्या वे पहले से तेज़ रफ़्तार से आ रही हैं
    • HN कभी भी robots.txt बदलकर Google crawling रोक सकता है
      मेरे कुछ copyleft झुकाव वाले दोस्त भी Google/Bing indexing रोकने के लिए अपने blog और sites पर ऐसा करते हैं
    • क्या defense बस यही नहीं है कि Google crawler को index से बाहर कर दो, उसे भूखा रखो या block कर दो? अगर कोई Google ranking manipulation HN पर मौजूद ही नहीं है, तो वह समय की बर्बादी होगी

  • Kagi में मैं अपनी मर्ज़ी से HN की search ranking ऊपर और दूसरी sites की नीचे कर सकता था; ऐसा नहीं कि Google search team के किसी कर्मचारी ने HN पर कोई slide deck बना दिया हो
    https://help.kagi.com/kagi/features/website-info-personalize...
    हर महीने खर्च होने वाले 10 dollars में यह सबसे ज़्यादा संतोष देने वाला खर्च है

    • इसी comment की वजह से मैंने आखिरकार Kagi आज़माया, और वाह। मुझे पता ही नहीं था कि मैं search engine में कितनी चीज़ें मिस कर रहा था
      search में websites को pin और block किया जा सकता है—अब सोचो तो यह obvious लगता है, लेकिन वाकई कमाल है

  • यहाँ एक और चिंता की बात यह है कि Google मनमाने comments को snippet के source की तरह इस्तेमाल करना चाहता दिखता है
    मैं समझता हूँ कि औसत HN commenter दूसरे इंटरनेट users की तुलना में अपने comments और उनकी सच्चाई पर ज़्यादा मेहनत करता है, लेकिन फिर भी यह समस्या है
    मेरे मामले में, जब मैं इतालवी में Monaco खोजता हूँ, तो सबसे ऊपर वाला “result” Google Translate widget होता है जिस पर Collins Dictionary लगा होता है, और ऊपर के 3 links Wikipedia और Quora के थे। HN उससे 4–5 links नीचे आता है
    और उम्मीद है कि spammers, dang पर हावी न हो जाएँ

  • खोज करते समय मैं आम तौर पर पहले HN पर ढूंढता हूँ, फिर Google के जरिए Reddit खोजता हूँ, और आखिर में पुराने और दुखद Google का इस्तेमाल करना पड़ता है
    जब Google आया था, तब वह सबके लिए बेसब्री से इंतज़ार किया गया जवाब था, लगभग वह सब कुछ जो हम चाहते थे, और वह “evil” भी नहीं था
    अब ऐसा लगता है कि Google के लोग इस बात से बेपरवाह हैं कि कंपनी के साथ क्या होता है, उन्हें बस अपने annual bonus की पात्रता पूरी करने की चिंता है
    मुझे लगता है कि अगले 1~3 साल में कोई दूसरी कंपनी आएगी जो पुराने Google की तरह search market छीन लेगी। फिर भी Google को चिंता करने की ज़रूरत नहीं है। वह कंपनी भी “सिर्फ एक search company” ही होगी

    • क्या आपको सच में ऐसा लगता है? क्या आपको लगता है कि वह कंपनी अभी मौजूद है?

  • Google के लिए: हम search query में site:reddit.com या site:news.ycombinator.com इसलिए जोड़ते थे ताकि SEO बाजीगरों द्वारा manipulated न किए गए विचारों तक पहुंच सकें। अब विकल्प क्या है?

    • spammers कई सालों से Reddit को आक्रामक तरीके से निशाना बना रहे हैं, लेकिन site:reddit.com अभी भी उपयोगी है
      समझ नहीं आता कि Google ने Reddit को खरीदा क्यों नहीं। moderation की समस्या ज़रूर है, लेकिन AMZN ने Twitch के साथ यह कर लिया था
    • age:1year जैसी किसी चीज़ की ज़रूरत है। tech-related search करते समय मैं लगभग हर बार 2014 की StackOverflow पोस्ट नहीं चाहता
      products या खरीदने लायक किसी चीज़ को search करने पर जो बदलाव हुए हैं, उनकी बात ही नहीं करना चाहता। किसी shopping page तक पहुंचने के लिए लगभग 4 बार क्लिक करना पड़ता है, और नए tab में खोलने का तरीका भी बिल्कुल काम नहीं करता
    • Google का Hidden Gem update इस तरह पेश किया जा रहा है मानो यह users के लिए ज़्यादा उपयोगी content लाने वाला एक सकारात्मक “opportunity” हो, लेकिन असल में मुझे यह उस स्थिति के खिलाफ एक defensive move लगता है जहाँ algorithm पूरी तरह manipulate हो चुका है और search quality पागलों की तरह गिर गई है
      अब साधारण query पर भी नियमित रूप से साफ़ दिखने वाले search-engine spam के पहाड़ लौटते हैं
      ऊपर से कुछ search terms पर Google पहले result page का लगभग पूरा हिस्सा sponsored content से भर देता है, जिससे उपयोगिता एक-अंकीय गुणक तक गिर गई है। यह आंकड़ा मैंने बहुत सावधानी से निकाला है
      और quality में यह गिरावट ठीक उसी समय हुई जब ChatGPT आया। निजी तौर पर भी मैं अब बढ़ती हुई आवृत्ति से Google को पूरी तरह छोड़कर ChatGPT का उपयोग कर रहा हूँ। सोचता हूँ कितने लोग ऐसा ही कर रहे हैं, और क्या Big G की तरफ़ से हताशा की गंध आ रही है
    • high-end products खोजते समय मैंने Reddit की जगह comparatively छोटे YouTubers को देखना शुरू किया है
      उदाहरण के लिए यह channel शानदार है: https://www.youtube.com/channel/UC2rzsm1Qi6N1X-wuOg_p0Ng

  • @dang का मानना है कि अगर Google की दिलचस्पी बढ़ती है, तो marketers HN के प्रभाव और search ranking का इस्तेमाल करके influence operations चलाएँगे, जिससे HN की quality पर नीचे की ओर दबाव पड़ेगा
    क्या robots.txt से site को indexing से बाहर रखने की संभावना पर विचार करने की इच्छा है?

    • HN पर quality गिरने का दबाव बहुत पहले से रहा है, और उसे कैसे झेलना है, यही शुरू से मुख्य विचार था
      HN एक प्रयोग है। सिद्धांत रूप में, जब कोई community site लोकप्रिय होती है, तो उसकी quality गिरती है। हमारी परिकल्पना यह है कि यह अनिवार्य नहीं है। अगर हम सचेत रूप से गिरावट का प्रतिरोध करें, तो इसे होने से रोका जा सकता है। - https://news.ycombinator.com/newswelcome.html
      यह pg ने 15 साल से भी पहले लिखा था। मैं भी लगभग 10 साल से कह रहा हूँ कि हम internet entropy के तीर को कुछ समय तक रोकने की कोशिश कर रहे हैं: https://hn.algolia.com/?dateRange=all&page=0&prefix=true&que... – हमेशा के लिए यह संभव नहीं होगा, लेकिन पर्याप्त ऊर्जा लगाई जाए तो कुछ समय तक किया जा सकता है
      अब तक के अनुभव में तरीका है: समर्पित community, ऐसा software जो software से किए जा सकने वाले काम करे, और ऐसी moderation जो system को failure modes से दूर धकेले
      बाहरी दुनिया से छिप जाना आम तौर पर जवाब नहीं है। pg ने कभी-कभी Erlang Day जैसी तरकीबें इस्तेमाल की थीं, लेकिन उसे मुख्य रणनीति बनाना ऐसा है जैसे बाहर ही न निकलो ताकि infection से बचो। अगर संभव हो, तो मज़बूत immune system होना कहीं बेहतर है। सिर्फ उन pathogens से बचने की कोशिश करना जिनका प्रतिरोध किया जा सकता है, immune system को कमज़ोर कर देता है, और HN को नए users से छिपाने का रास्ता जड़ता और बुढ़ापे की ओर ले जाएगा। मेरे हिसाब से वही बड़ा खतरा है, और मौजूदा users उसे बहुत आसानी से कम करके आँकते हैं
      spam और content marketing जैसी उसकी रिश्तेदार चीज़ें, अगर पैमाना कई orders of magnitude बढ़ जाए, तो HN को मार सकती हैं, लेकिन मेरी नज़र में वे HN की सबसे कठिन समस्या नहीं हैं। वजह यह है कि हमारे पास ऐसी समर्पित community है जो ऐसी चीज़ों को flag करती है, और अगर वे बाहर निकल जाएँ तो report भी करती है, और quality के प्रति संवेदनशील है। ऐसी community न होती, तो HN बहुत पहले मर चुका होता
      इससे कहीं कठिन समस्या है low-quality comments। मेरा मतलब malicious users नहीं है; उन्हें community अच्छी तरह flag और report करती है। समस्या वे साधारण या कटु comments हैं जो मूलतः ठीक-ठाक users बिना इरादे और बिना समझे लिख देते हैं। ऐसे comments और voting system के बीच एक अशुभ dynamics है, जिसमें बुरे comments को अच्छे comments से ज़्यादा votes मिल जाते हैं, और यह काफ़ी बार होता है, जिसके बाद thread खरपतवार से भर जाता है। यही सबसे बड़ा हिस्सा है और यही वह चीज़ है जिसकी मुझे ज़्यादा चिंता है। Cassandra E Oakley और उसका trading system, या ताज़ा startup voting ring जैसी चीज़ें नहीं। अगर कभी वे चीज़ें सबसे बड़ा हिस्सा बन जाएँ, तो शायद हम ख़त्म हो जाएँ, लेकिन शायद हम उसे इतना पहले देख लेंगे कि adjust कर सकें
      परिशिष्ट: @dang काम नहीं करता। यह मुझे बस संयोग से दिख गया। दरअसल संयोग भी नहीं, क्योंकि यह thread के सबसे ऊपर आ गया था
    • यहाँ mentions काम नहीं करते, इसलिए hn [at] ycombinator.com पर email भेजना होगा
      लेकिन अगर ऐसा करना है, तो सभी AI bots और search engines को भी IP address स्तर पर block करना चाहिए
    • यह तर्क ठीक से विकसित किए जाने लायक है। साथ ही यह तर्क भी होना चाहिए कि इससे अच्छे contributors अधिक संख्या में आ सकते हैं
      दरअसल, अगर इस पोस्ट जैसी visibility को रोकने और बाधित करने वाली मानसिकता न रखने वाले लोग बढ़ते हैं, तो कुल मिलाकर भावना सकारात्मक हो सकती है
    • निजी तौर पर भी, और “community की आवाज़ के रूप में आप” के रूप में भी, ऐसा लगता है कि आप किसी ऐसी चीज़ के चारों ओर दीवार खड़ी करना चाहते हैं जो पूरी तरह आपकी नहीं है
      linked blog post असल में यह नहीं कहती कि “HN cool हो गया”, बल्कि यह समझाती है कि Google ad-driven कचरे में डूब चुका है और quality को किसी तरह सहने लायक बनाए रखने के लिए उसे हाथ से चुनी गई external structure पर निर्भर रहना पड़ रहा है
    • मेरा मानना है कि जैसे-जैसे Google की दिलचस्पी बढ़ेगी, वैसे-वैसे trackers अचानक आकर जमा होने लगेंगे, code quality पर enshittification का दबाव बनेगा, और अंत में web पहले बड़े publishers को बेचा जाएगा और बाद में AI training companies को
      surveillance capitalism के दौर में HN को देखना राहत देता है
      संपादन: HN Google Tag Manager, Analytics, Amplitude, और branch.io का उपयोग करता है

  • मुझे हमेशा अजीब लगा कि HN search results में नहीं दिखता था
    यहाँ का content signal-to-noise ratio के लिहाज़ से बहुत ऊँचा है और Google के search optimization के सभी बिंदुओं पर खरा उतरता हुआ लगता था। इसलिए उसके न दिखने को मैं जानबूझकर किया गया मानता था, और यह समझता था कि dang ने जानबूझकर indexing बंद कर रखी है और bots को block किया है
    अब जब यह दिखना शुरू हो गया है, तो मन करता है कि यह पहले जैसा हो जाए। मैं HN बहुत पढ़ता हूँ तो उसका एकमात्र कारण यह है कि यह बहुत भरोसा देता है। भले ही मैं ज़्यादातर commenters को न जानता हूँ, फिर भी content को आसानी से परख सकता हूँ, sources ढूँढ़ सकता हूँ, हैरान कर देने वाले tools खोज सकता हूँ, और founders से सीधे पढ़ सकता हूँ
    मैं सच में, सच में यह चिंता नहीं करना चाहता कि अब front page विज्ञापन बन जाएगा

    • front page हमेशा से विज्ञापन था। इस website का लगभग पूरा उद्देश्य वही तो है
      domain name से ही साफ़ है

  • अगर HN अपनी मौजूदा स्थिति से आगे बढ़कर और बड़ा हो जाए तो क्या होगा? अभी भी front page काफ़ी तेज़ी से बदलता है, और पोस्ट जल्दी दब जाती हैं
    कभी-कभी मुझे कोई दिलचस्प post और comments दिखते हैं और लगता है कि बाद में समय मिलने पर लौटकर देखूँगा, लेकिन तब तक वह front page से कई pages पीछे जा चुका होता है

    • दिलचस्प बात यह है कि 2011 के बाद से प्रति दिन submissions की संख्या बहुत नहीं बढ़ी है
      HN की बाकी लगभग हर चीज़ मोटे तौर पर रैखिक रूप से बढ़ी है, लेकिन submissions की संख्या नहीं