arXiv ने अपग्रेड के लिए ₹150 करोड़ से अधिक की फंडिंग हासिल की

 (news.cornell.edu)
2 पॉइंट द्वारा GN⁺ 2023-10-20 | 1 टिप्पणियां | WhatsApp पर शेयर करें
  • शोध पत्रों के लिए सार्वजनिक इंफ्रास्ट्रक्चर arXiv ने Cornell Tech के जरिए दान और ग्रांट मिलाकर लगभग $10m (1 करोड़ डॉलर) से अधिक हासिल किए हैं, जिससे उसके दीर्घकालिक संचालन की बुनियाद मजबूत होगी
  • 20 लाख से अधिक शोध पत्रों वाला arXiv इस फंडिंग से cloud migration और code modernization को आगे बढ़ाएगा
  • modernization का फोकस reliability, fault tolerance और accessibility सुनिश्चित करने पर है, ताकि शोधकर्ता इस पर लगातार निर्भर रह सकें
  • NSF की फंडिंग Cornell के computer science faculty द्वारा search और recommendation techniques विकसित करने में भी इस्तेमाल होगी, जिन्हें arXiv के बड़े और सक्रिय user community में test और deploy किया जा सकेगा
  • PDF-केंद्रित approach से आगे बढ़कर HTML versions की उपलब्धता बढ़ाई जाएगी, जिससे दृष्टिबाधित लोगों के लिए accessibility बेहतर होगी और open science infrastructure के रूप में इसकी sustainability बढ़ेगी

20 लाख शोध पत्रों वाले repository का infrastructure transition

  • Cornell Tech ने arXiv को support करने के लिए Simons Foundation के दान और National Science Foundation की grant मिलाकर कुल $10m से अधिक जुटाए हैं
  • arXiv scholarly papers के लिए एक मुफ्त distribution service और open access archive है
  • यह फंडिंग 20 लाख से अधिक papers वाले repository को अधिक स्थिरता से चलाने के लिए foundational work में इस्तेमाल होगी

    • Cloud migration और code modernization

      • codebase को modernize किया जाएगा और cloud पर transfer किया जाएगा
      • reliability, fault tolerance और researchers की accessibility को मजबूत किया जाएगा
      • Cornell Tech के Greg Morrisett के अनुसार यह investment arXiv service को scale करने और व्यापक user base को support करने के लिए जरूरी है
      • arXiv के faculty director Ramin Zabih ने आकलन किया कि codebase modernization और cloud transition arXiv infrastructure को मजबूत करेंगे

Development plans और research community support

  • arXiv के अगले development phase में modernization work संभालने के लिए कई software developers की hiring शामिल है
  • NSF funding से Cornell के computer science faculty नई search और recommendation techniques विकसित करेंगे
    • arXiv की बड़ी और सक्रिय user community में testing और deployment संभव होगा
    • आधुनिक privacy protections को support करेगा
  • Content PDF के साथ-साथ HTML versions में भी उपलब्ध कराया जाएगा, जिससे दृष्टिबाधित लोगों की accessibility में बड़ा सुधार होने की योजना है
  • arXiv की स्थापना 1991 में उस समय Los Alamos National Laboratory के physicist रहे Paul Ginsparg ने की थी
    • Ginsparg ने 2001 में Cornell लौटने से पहले arXiv बनाया था
    • वर्तमान में arXiv का maintenance और operation Cornell Tech करता है
  • arXiv physics, mathematics, computer science, quantitative biology, quantitative finance, statistics, electrical engineering and systems science, और economics क्षेत्रों के researchers को support करता है
  • Simons Foundation 2011 से arXiv को support करता आ रहा है, और additional support दीर्घकालिक sustainability transition को तेज करने में इस्तेमाल होगा
  • arXiv को Simons Foundation के लगातार support के अलावा academic और research libraries, universities, research institutions, professional societies और individual donors का support भी मिलता है

संबंधित पढ़ाई

1 टिप्पणियां

 
GN⁺ 2023-10-20
Hacker News की राय

  • यह देखकर सचमुच खुशी है कि arXiv को और funding मिल रही है। यह जरूरी research infrastructure है
    व्यक्तिगत रूप से मुझे यह देखना दिलचस्प लगेगा कि frontend बदलेगा या नहीं। accessibility, moderation/review tools, name-change support जैसी चीज़ों में सुधार की गुंजाइश जरूर है, लेकिन arXiv website लगभग किसी Platonic ideal जैसी लगती है। Craigslist की तरह सादा HTML, जल्दी load होती है, सिर्फ जरूरी जानकारी और functions देती है और रास्ते में बाधा नहीं बनती
    arXiv team को अब तक किए काम के लिए बहुत श्रेय मिलना चाहिए। preprint server विज्ञान के लिए कितना उपयोगी और बदलावकारी रहा है, इसे बढ़ा-चढ़ाकर कहना मुश्किल है

    • “सादा HTML, fast loading, सिर्फ जरूरी जानकारी और functions देना और बाकी समय रास्ते में न आना” ही मूल बात है। अगर यह trend के पीछे भागने वाली JavaScript-required single-page app में बदल गया, तो सच में बहुत गुस्सा आएगा
      पैसा bandwidth या storage बढ़ाने में लगे तो अच्छा है, लेकिन बेकार और hostile UI बदलावों पर बर्बाद न हो
    • मैंने arXiv API से computer science papers explore करने का tool बनाया है: https://trendingpapers.com/
      खासकर API के मामले में उम्मीद है वे अभी जैसा बेहतरीन काम करते रहेंगे
    • PDF खुलने में काफी धीमे होते हैं, इसलिए “fast” कहने में यह एक exception है

  • arXiv शायद science का सबसे महत्वपूर्ण repository है, और कुछ लोग public funding पर नाराज़ हैं, कहते हैं कि बड़ी tech companies अपनी research वहाँ डालती हैं, इसलिए उन्हें अपनी गहरी जेब से इसका support करना चाहिए। लेकिन उस प्रस्ताव के परिणामों के बारे में सोचना चाहिए
    जब आप किसी चीज़ को fund करते हैं, तो उस पर कुछ हद तक अधिकार भी पा लेते हैं। सीधे या परोक्ष रूप से यह कहना संभव हो जाता है कि “अगर आप हमारा प्रस्ताव नहीं मानेंगे, तो हम financial support पर पुनर्विचार करेंगे।” सवाल है कि science और public interest के लिए open और independent रहने वाली जगह को क्या हम corporate influence के नीचे रखना चाहते हैं, जबकि उनके लक्ष्य हमेशा समान नहीं होते

    • open source सचमुच open होता है। costs में मदद के लिए arXiv को पैसा देना अपने आप में समस्या नहीं है, जब तक उस पैसे के साथ धमकी या शर्तें न जुड़ी हों
      मूल विचार यह है कि अगर आप किसी open repository से किसी भी तरह लाभ उठाते हैं, तो योगदान देना अच्छा ही है। पर्याप्त लोग या संगठन योगदान दें तो यह सबके लिए अच्छा है, और अगर project के पीछे संगठन व्यक्तिगत hobby के स्तर का हो और उसे sustain करना मुश्किल हो, तो support की जरूरत पड़ सकती है
      आखिर arXiv जैसी जगहों पर भी खर्च आता है। योगदान देना जरूरी नहीं है, लेकिन करें तो अच्छी बात है

  • “arXiv की स्थापना 1991 में Dr. Paul Ginsparg ने की थी, जो उस समय Los Alamos National Laboratory में physicist थे, Cornell लौटने से पहले” यह हिस्सा पढ़कर पहली बार पता चला कि arXiv इतना पुराना है। सच कहूँ तो मुझे इसके बारे में 10 साल से भी कम पहले पता चला और तभी इस्तेमाल करना शुरू किया

    • अलग-अलग fields ने arXiv पर नियमित रूप से papers डालना अलग-अलग समय पर शुरू किया। बहुत मोटे तौर पर क्रम यह है: high-energy theory करीब 1992, अन्य physics theory करीब 1994, physics experiments करीब 1996, mathematics करीब 2000, और computer science करीब 2008
      कुछ fields में बदलाव लगभग रातोंरात हो गया, जबकि कुछ में यह कई साल धीरे-धीरे बढ़ा और फिर arXiv posting default बन गई
    • website बनने से पहले यह email listserv था
    • मैं आज भी कभी-कभी xxx.lanl.gov टाइप कर देता हूँ। पहले redirect हो जाता था, अब नहीं होता—अफसोस

  • मेरा अनुमान है कि arXiv को इस पैसे की जरूरत नहीं है, और upgrade की भी जरूरत नहीं है। यह पैसा सिर्फ salespeople को आकर्षित करेगा, और वे सब पैसे लेकर arXiv को और खराब बनाने के proposals देंगे। उनमें से कोई एक शायद सफल भी हो जाए

    • सहमत हूँ। arXiv का काम, गंभीरता से कहें तो, PDF repository की तरह काम करना है। अभी यह काम वह अच्छे से कर रहा है
      18 महीने बाद “इस बार गोल आकार trend में हैं” कहकर फिर बदल जाने वाला चमकदार नया frontend नहीं चाहिए। न ही इसे ऐसे “distributed, load-balanced, fault-tolerant, web-scale platform solution” पर ले जाने की जरूरत है जिसमें maintenance और engineering time अभी से करीब दोगुना लगे
      बस documents serve करने हैं। अगर load की समस्या है, तो content ज्यादातर static है, इसलिए इसे CDN के पीछे रख दें। CDN जिस काम को हल करने के लिए बना है, यह उसके लिए बिल्कुल fit है
      कृपया इसे न बदलें

  • “cloud में migration” अच्छा है। अब हर paper download पर CAPTCHA की उम्मीद कर सकते हैं
    वैसे, मुझे भरोसा है कि arXiv ऐसा मूर्खतापूर्ण फैसला नहीं करेगा, लेकिन cloud migration का मतलब अक्सर यह भी होता है कि decision-making अब अंदर नहीं रह गई है

    • यह सीधे उस hybrid approach की तरफ भी जा सकता है जिसे कई companies इस्तेमाल करती हैं। उदाहरण के लिए cloud migration का मतलब सिर्फ इतना हो सकता है कि papers का backup S3 में रहे, और initial download fail होने पर smoothly S3 location पर fallback हो जाए
      या फिर इसका मतलब यह भी हो सकता है कि सब कुछ Lambda पर चलाने के लिए दुबारा लिखा जाए। यानी “cloud में migration” का मतलब हर company या organization के लिए अलग होता है
    • यह cloud move product improvement से ज्यादा security, यानी external intrusion रोकने के उद्देश्य से हो सकता है। जैसा कहा गया, कई decisions अब Cornell के नहीं रह सकते। यह किसी बड़े geopolitical trend का संकेत लगता है

  • arXiv एक वरदान है। arXiv और research को खुले तौर पर share करने वाले लोगों की वजह से ही मैं आज जहाँ हूँ वहाँ पहुँच पाया
    DeepMind का अपनी research को Nature जैसी publications के पीछे बंद कर देना मुझे पसंद नहीं है। समझता हूँ कि इससे किसी elite club में शामिल होने जैसा असर मिलता है, लेकिन यह ईमानदार नहीं लगता। research को open करना मानवता को आगे बढ़ाता है
    arXiv कह सकता है कि उसने दुनिया पर अपनी छोटी-सी छाप छोड़ी है, और मुझे खुशी है कि sustainability के लिए उसे जरूरी funding मिल रही है। बस उम्मीद है कि अनावश्यक रूप से scale बढ़ाने की कोशिश में इसे जला न दिया जाए

  • मुझे arXiv सच में बहुत पसंद है और यह जानकर खुशी हुई कि उसे और फंडिंग मिल रही है। उम्मीद है इस पैसे से पुराने मुद्दों को ठीक किया जा सकेगा, खासकर पहचान और लेखक-नाम दिखाने के तरीके को
    उदाहरण के लिए मौजूदा सिस्टम मानता है कि लोगों के नाम नहीं बदलते[1], जिसका खास तौर पर ट्रांस लेखकों पर नकारात्मक असर पड़ता है। अब संसाधन मिलें तो इसे ठीक किया जा सकता है, और उम्मीद है ऐसा होगा
    [1]: https://www.kalzumeus.com/2010/06/17/falsehoods-programmers-...

    • नाम बदलने को संभालने का कोई अच्छा तरीका नहीं है। metadata में बदला जा सकता है, लेकिन पेपर के मुख्य टेक्स्ट में पुराना नाम रह जाता है
      लेखक को पेपर में बदलने की अनुमति दे भी दें, तो दूसरे लोगों की references में पुराना नाम रह जाएगा। references और कठिन हैं। सभी को खोजने और अस्पष्टता दूर करने के लिए automation चाहिए, और चीनी नामों जैसे मामलों में यह खास तौर पर सिरदर्द है। ऊपर से कई लेखक यह स्वीकार नहीं करेंगे कि कोई और उनके पेपर में बदलाव करे
    • यह उन महिलाओं पर कहीं ज्यादा नकारात्मक असर डालता है जो पति का surname लेती हैं या सामाजिक अपेक्षा के कारण ऐसा करने को मजबूर होती हैं
    • इतिहास नहीं बदलना चाहिए। नया नाम इस्तेमाल किया जा सकता है, लेकिन उसे एक नई और अलग पहचान माना जाना चाहिए
    • लगता है arXiv नाम बदलने को support करता है, बस citations और references में नहीं करता[1]
      इतना ठीक लगता है। citations को बदलना अजीब तरह से इतिहास बदलने और copyright में दखल जैसा महसूस होता है
      अगर कोई इस comment को quote करते हुए “bigyikes” लिखे और बाद में Dang मेरा नाम बदल दे, तो क्या मुझे quote करने वाला comment भी ठीक किया जाना चाहिए? मेरे हिसाब से नहीं, लेकिन शायद मैं अल्पमत में हो सकता हूँ
      [1]: https://blog.arxiv.org/2021/03/11/update-name-change-policy/

  • arXiv एक शानदार resource है। कम से कम मेरे क्षेत्र, यानी programming languages में, और शायद अधिकांश computer science में भी, लगता है ज्यादातर papers arXiv पर उपलब्ध हैं
    पेपर को मुफ्त में सार्वजनिक न करने की कोई वजह नहीं है। ज्यादातर चीजों की लागत इसलिए होती है क्योंकि वे खुद physical होती हैं या उनके production में पैसा और resources लगते हैं जिन्हें वापस पाना होता है। लेकिन papers को distribute करने की लागत लगभग 0 है, और वे grants से बनते हैं जिनकी funding शोध-परिणामों और discoveries के लिए ही होती है

    • अगर कोई closed journals पर समय लगाना चाहता है तो उसकी मर्जी—मेरा philosophy यही है
      जब क्षेत्र छोटे और niche थे, तब topic-wise collections उपयोगी रही होंगी। लेकिन आज की search और computational tools के दौर में समझ नहीं आता कि उनकी जरूरत क्यों है
      academia में इस structure से ज्यादा शोषणकारी धंधे जैसा कुछ नहीं लगता। मेरे हिसाब से सब कुछ publish होना चाहिए, और उस विषय पर स्वाभाविक चर्चा से ही महत्व तय होना चाहिए

  • जिसका budget सच में बहुत तंग हो, ऐसी चीज को cloud पर ले जाना क्या जरूरी तौर पर अच्छा विचार है?

  • अच्छा होगा अगर papers को web native बनाया जाए

    • लगता है इस पर पहले से काम चल रहा है
      “साथ ही arXiv content को सिर्फ PDF ही नहीं, बल्कि HTML version में भी बनाएगा, जिससे दृष्टिबाधित लोगों को कहीं बेहतर accessibility मिलेगी”
      हालांकि यह सफल होगा या नहीं, यह अलग सवाल है। HTML में compile करने वाली pipeline को लोगों द्वारा इस्तेमाल किए जाने वाले सभी LaTeX packages के साथ काम करना होगा, या कम से कम अधिकांश के साथ काम करना होगा और बाकी में graceful failure होना चाहिए। सिर्फ PDF में compile करना ही काफी मुश्किल है, इसलिए arXiv को हर साल के TeX Live version को स्थायी रूप से maintain करना पड़ा था