Greenflare - ओपन सोर्स लोकल SEO क्रॉलर

• लोकल में वेबसाइट को क्रॉल करके SEO विश्लेषण में मदद करने वाला टूल

→ H1, H2 टैग और Meta डेटा की जांच

→ XPath और CSS selector से प्रत्येक पेज की जानकारी निकालना

→ Robots.txt parser से स्थिति की जांच

→ टूटे हुए लिंक और status code (3xx, 4xx, 5xx) की जांच

→ filters से URLs को exception के रूप में संभालना संभव

• Windows/Mac/Linux के executable उपलब्ध

• crawling परिणामों को CSV में export करना (आंतरिक रूप से sqlite में सहेजा जाता है)

• कम-संसाधन वाले सिस्टम पर भी चल सकता है, और आकार की कोई सीमा नहीं है

→ 40 लाख से अधिक पेजों वाली साइटों पर परीक्षण पूरा

• Python code और pypi package के रूप में भी उपलब्ध (pip install greenflare)

[xguru]

टेस्ट करके देखा तो यह URLs को काफ़ी तेज़ी से crawl करके प्रोसेस कर देता है.

5000 URLs पढ़ने में भी ज़्यादा समय नहीं लगता.

सर्वर side पर लोड पड़ सकता है, इसलिए कृपया इसे धीरे-धीरे इस्तेमाल करें. ^^