• वेब क्रॉल किए गए डेटा को SQL से क्वेरी करना आसान बनाने वाला SQLite DB-आधारित फ़ाइल फ़ॉर्मैट
  • wget और WebRecorder आदि में उपयोग होने वाली मानक Web ARChive (.warc) फ़ाइलों को .warcdb में import किया जा सकता है
  • sqlite-utils कमांड को ज्यों का त्यों इस्तेमाल किया जा सकता है
wget --warc-file tselai "https://tselai.com";  
warcdb import archive.warcdb tselai.warc.gz  
  
// सभी response header लाएँ  
sqlite3 archive.warcdb <<SQL  
select  json_extract(h.value, '$.header') as header,   
        json_extract(h.value, '$.value') as value  
from response,  
     json_each(http_headers) h  
SQL  

अभी कोई टिप्पणी नहीं है.

अभी कोई टिप्पणी नहीं है.