- अंतरराष्ट्रीय मशीन लर्निंग कॉन्फ़्रेंस ICLR 2026 के पेपर समीक्षा टिप्पणियों में लगभग 21% पूरी तरह कृत्रिम बुद्धिमत्ता द्वारा लिखे गए होने की पुष्टि हुई
- Pangram Labs के AI डिटेक्शन टूल ने 75,800 समीक्षा टिप्पणियों का विश्लेषण कर आधे से अधिक में AI उपयोग के संकेत पाए
- कुछ शोधकर्ताओं ने असामान्य रूप से लंबी या गलत फीडबैक मिलने पर AI निर्माण की संभावना उठाई
- सम्मेलन ने बताया कि वे AI उपयोग नीति उल्लंघन की जाँच ऑटोमेटेड टूल से करेंगे, और भरोसा बहाल करने की प्रक्रिया शुरू कर दी है
- यह घटना दिखाती है कि शैक्षणिक समीक्षा प्रक्रिया में पारदर्शिता और विश्वसनीयता सुनिश्चित करना तुरंत जरूरी है
ICLR 2026 के पेपर समीक्षा में उजागर AI उपयोग की स्थिति
- अंतरराष्ट्रीय मशीन लर्निंग कॉन्फ़्रेंस ICLR 2026 की पेपर समीक्षाओं में लगभग 21% पूरी तरह AI द्वारा लिखित, तथा आधे से अधिक पर AI का प्रभाव होने का संकेत मिला
- इस विश्लेषण को Pangram Labs ने किया, और इसमें कुल 19,490 पेपर तथा 75,800 समीक्षाएँ शामिल थीं
- Pangram ने AI-जनित टेक्स्ट डिटेक्शन टूल का उपयोग करके परिणाम सार्वजनिक किए
- सम्मेलन ने बताया कि वे जाँच करेंगे कि AI का उपयोग समीक्षा नीति का उल्लंघन था या नहीं, और इसके लिए ऑटोमेटेड टूल लागू करेंगे
- ICLR 2026 के program chair ने इसे बड़े पैमाने पर सामने आया AI समीक्षा मुद्दा का पहला उदाहरण कहा
शोधकर्ताओं की चिंता और जांच प्रक्रिया
- कई शोधकर्ताओं ने सोशल मीडिया पर उन समीक्षा टिप्पणियों को साझा किया जिन्हें AI द्वारा लिखी जाने की आशंका थी
- कुछ टिप्पणियों में ‘hallucinated citations’ (काल्पनिक संदर्भ) या अस्पष्ट और अत्यधिक लंबी फीडबैक देखी गई
- Carnegie Mellon University के Graham Neubig ने असामान्य समीक्षा टिप्पणियों के कारण AI निर्माण सत्यापन की माँग की
- उन्होंने X (पूर्व ट्विटर) पर एक इनाम नोटिस पोस्ट किया, और इसके जवाब में Pangram Labs के Max Spero ने पूर्ण जांच शुरू की
- Pangram के अनुसार, उन्होंने सभी सबमिशनों के टेक्स्ट का विश्लेषण करने वाला कोड केवल 12 घंटे में लिख दिया
Pangram Labs की विश्लेषण रिपोर्ट
- Pangram का टूल LLM (Large Language Model) द्वारा उत्पन्न या संपादित टेक्स्ट की भविष्यवाणी के तरीके से काम करता है
- परिणामों में 15,899 समीक्षा टिप्पणियाँ पूर्णतः AI-जनित पाईं गईं, जबकि 199 पेपर (1%) भी पूरी तरह AI-लिखित**
- 61% पेपर मानव-लिखित हैं, जबकि 9% में आधे से अधिक AI-जनित टेक्स्ट मौजूद
- Pangram ने अपना मॉडल ICLR 2026 में प्रीप्रिंट के रूप में सबमिट किया था, और उसी पेपर की कुछ समीक्षाएँ भी AI-जनित के रूप में चिह्नित की गईं
शोधकर्ताओं की प्रतिक्रिया
- कोपेनहेगन यूनिवर्सिटी के Desmond Elliott ने कहा कि उनके सबमिट किए गए एक पेपर की समीक्षा ने पेपर का सार ठीक से नहीं समझा और गलत आँकड़े दर्ज किए
- उनके PhD छात्र ने अनुमान लगाया कि वह समीक्षा शायद LLM से लिखी गई हो
- Pangram के विश्लेषण में वही समीक्षा सच में पूरी तरह AI-जनित पाई गई
- उसी समीक्षा ने पेपर को सबसे कम स्कोर दिया, जिससे वह acceptance threshold के सीमा क्षेत्र में आ गया
सम्मेलन की प्रतिक्रिया और आगे की चुनौती
- सम्मेलन ने AI उपयोग की स्वचालित पहचान हेतु टूल तैनात करने की घोषणा की, जिसका लक्ष्य समीक्षा की विश्वसनीयता बहाल करना है
- कार्यक्रम प्रमुख ने कहा कि यह प्रक्रिया यह दिखाती है कि ‘trust’ की अवधारणा को फिर से परिभाषित करने की जरूरत है
- यह घटना एक उदाहरण है कि AI शैक्षणिक समीक्षा प्रक्रिया में गहराई तक पहुँच चुका है और शोध मूल्यांकन की पारदर्शिता सुनिश्चित करना मुख्य प्राथमिकता बनकर सामने आया है
अभी कोई टिप्पणी नहीं है.