पिछले फ़रवरी में पोस्ट किए गए on-device AI fill-in-the-blank quiz app Blank. के अपडेट की खबर है.

उस समय टिप्पणियों में मिले फ़ीडबैक ने development direction तय करने में सचमुच बहुत बड़ी मदद की. धन्यवाद.
खास तौर पर deleuze द्वारा बताई गई "7 सवालों में से 5 के सही उत्तर एक ही शब्द थे" वाली बग
काफ़ी कड़वा फ़ीडबैक था, और इस अपडेट का मुख्य सुधार बिंदु बन गया.


मुख्य बदलाव

1. Gemma 3 1B → Gemma 4 E2B
Inference engine भी MediaPipe LlmInference से Google AI Edge LiteRT में बदल दिया गया है.
Instruction following की स्थिरता बढ़ी है, इसलिए prompt से बाहर जाने वाले अजीब output
स्पष्ट रूप से कम हुए हैं.

2. डुप्लिकेट सही उत्तर बग फिक्स
एक ही blank शब्द के कई सवालों में बार-बार आने की समस्या को ठीक किया गया है.
एक document से quiz बनाते समय पहले से इस्तेमाल किए गए शब्दों को track करके बाहर रखा जाता है.

3. गलत विकल्पों की गुणवत्ता में सुधार
पहले document keywords में से बस random 3 चुनकर उन्हें गलत विकल्प के रूप में डाल दिया जाता था,
इस बार उसे scoring system से बदल दिया गया है.

  • सही उत्तर के साथ भाषा मिलान (कोरियाई↔कोरियाई, अंग्रेज़ी↔अंग्रेज़ी)
  • सही उत्तर के साथ अक्षर संख्या की समानता
  • उसी वाक्य में आने वाले शब्दों को प्राथमिकता
  • document में उपस्थिति आवृत्ति की समानता

इससे सही उत्तर का बहुत ज़्यादा साफ़-साफ़ दिख जाना काफ़ी कम हुआ है.

4. क्विज़ दोबारा हल करने की सुविधा जोड़ी गई
Result screen से उसी document के साथ तुरंत फिर से quiz शुरू किया जा सकता है.


पुराने फ़ोन की performance समस्या(newbie1004) on-device LLM की मूलभूत सीमाओं की वजह से पूरी तरह हल करना
मुश्किल है, लेकिन model और engine बदलने से कुछ सुधार की उम्मीद है.
iOS version(luclipse) पर Android stabilization पूरा होने के बाद विचार किया जाएगा.

Play Store: https://play.google.com/store/apps/details?id=com.shootsir.blank

इसे आगे भी लगातार बेहतर बनाते रहेंगे. फ़ीडबैक का स्वागत है.

अभी कोई टिप्पणी नहीं है.

अभी कोई टिप्पणी नहीं है.