DwarFS - उच्च compression ratio वाला read-only filesystem

 (github.com)
7 पॉइंट द्वारा xguru 2020-12-01 | 1 टिप्पणियां | WhatsApp पर शेयर करें

  • दोहराए गए डेटा के लिए उच्च compression ratio हासिल करना इसका लक्ष्य है

  • SquashFS (Linux distributions में बहुत उपयोग होने वाला read-only filesystem) की तुलना में compression बेहतर है और filesystem बनाने की गति 4 गुना तेज़ है

  • फ़ाइल access की गति तेज़ है और CPU का उपयोग भी कम करता है

  • similarity hash function का उपयोग करके file clustering

  • decompressed filesystem के आकार को कम करने के लिए block-level segment analysis. compressed filesystem इस्तेमाल करने पर memory बचती है, जिससे cache में अधिक डेटा रखा जा सकता है और संभावित रूप से cache hit rate अधिक हो सकती है

  • filesystem creation tool और FUSE driver, दोनों में उन्नत multithreaded implementation

  • custom filtering और sorting functionality के लिए Lua support

संबंधित पढ़ाई

1 टिप्पणियां

 
xguru 2020-12-01

डेवलपर का कहना है कि यह हज़ारों Perl installations की वजह से बहुत ज़्यादा storage खाने की समस्या से शुरू हुआ था.. (हालाँकि इसकी ज़रूरत क्यों थी, यह मुझे भी ठीक से नहीं पता..)

लगता है कि यह file system duplicate files वाली Docker images / npm repositories के लिए बिल्कुल उपयुक्त होगा