ScrapeServ - किसी विशेष URL को स्क्रीनशॉट में बदलने वाला API सर्वर

• लोकल मशीन पर API सर्वर चलाकर URL भेजने पर साइट डेटा फ़ाइल के रूप में मिलता है, और साइट के कई हिस्सों के स्क्रीनशॉट भी साथ में बनाए जाते हैं
• पेज को स्क्रॉल करके कई सेक्शनों के स्क्रीनशॉट लेता है
• Docker कंटेनर के रूप में चलता है और Playwright का उपयोग करके Firefox ब्राउज़र चलाता है, इसलिए resource खपत थोड़ी अधिक है
• कार्य queue के माध्यम से प्रोसेस होते हैं, और HTTP headers, 302 redirects, तथा download links को सही तरीके से संभालता है
• blocking API

[xguru]

Hacker News टिप्पणी में इसके विकल्प के रूप में कई दिलचस्प चीज़ें दिख रही हैं।

• Chrome में command line से screenshot लेना:
  chrome --headless --screenshot="path/to/save/screenshot.png" --disable-gpu --window-size=1280,720 "https://www.example.com";
• Firefox version:
  firefox -screenshot file.png https://example.com --window-size=1280,720
• Firefox developer console में :screenshot --help टाइप करके कई तरह के options इस्तेमाल किए जा सकते हैं
• अगर maintenance जैसे काम पसंद नहीं हैं, तो नीचे दिए गए विकल्प इस्तेमाल करें
  • https://browserless.io - low-level browser control
  • https://scrapingbee.com - scraping पर फोकस
  • https://urlbox.com - scraping पर फोकस
  • https://scrapingfish.com
  • https://www.scraperapi.com
  • https://www.airtop.ai
• मिलते-जुलते project
  • https://github.com/sensepost/gowitness
  • https://github.com/SmilyOrg/website-image-proxy