Cloudflare सेवाओं में व्यापक outage

 (cloudflarestatus.com)
1 पॉइंट द्वारा GN⁺ 2025-06-13 | 1 टिप्पणियां | WhatsApp पर शेयर करें
  • 12 जून 2025 को Cloudflare में Access authentication failures और Zero Trust WARP connection समस्याएँ शुरू हुईं, जिसके बाद outage कई core services तक फैल गया, और 21:31 UTC पर resolve हुआ
  • एक प्रमुख dependency, third-party service outage, के कारण Workers KV offline हो गया; इससे उन products पर cascading impact पड़ा जो जानकारी store और distribute करने के लिए इसी पर निर्भर थे
  • प्रभाव का दायरा Access, WARP, Browser Isolation, Browser Rendering, Workers KV, Workers AI, Stream, Turnstile, AI Gateway, AutoRAG, Dashboard के कुछ हिस्सों आदि तक विस्तृत था
  • 20:32 UTC पर global services तेज़ी से recover हो रही थीं, और WARP और Turnstile operational थे, लेकिन कुछ residual impact बाकी था
  • 20:57 UTC पर सभी Cloudflare services fully operational स्थिति में लौट आईं, और Cloudflare platform metrics देखकर stability verification चरण में चला गया

Outage की प्रगति और recovery flow

  • 18:19 UTC पर Cloudflare engineering ने Access authentication failures की समस्या की जाँच शुरू की
    • Cloudflare Zero Trust WARP connections भी साथ में प्रभावित हुए
  • इसके बाद कई services में intermittent failures हुए, और Cloudflare ने service-wise impact scope का assessment करते हुए list update की
  • 19:12 UTC पर कुछ services recover होना शुरू हुईं, लेकिन retry processing और cache भरने की प्रक्रिया के कारण प्रभावित services में intermittent errors जारी रह सकते थे
  • 20:32 UTC पर दुनिया भर में service recovery तेज़ी से आगे बढ़ रही थी
    • WARP और Turnstile operational थे, लेकिन छोटे पैमाने का residual impact बाकी था
    • core Workers KV service recover होते ही dependent products फिर से online स्थिति में लौट आए
  • 20:57 UTC पर सभी Cloudflare services fully operational स्थिति में आ गईं, और ongoing stability verification के लिए monitoring पर switch किया गया
  • 21:31 UTC पर incident resolved स्थिति में बंद हुआ

प्रभावित services और कारण

  • Cloudflare की महत्वपूर्ण Workers KV service, core dependency रहे third-party service outage के कारण offline हो गई
  • KV service का उपयोग करके जानकारी store और distribute करने वाले कुछ Cloudflare products unavailable हो गए
    • Access
    • WARP
    • Browser Isolation
    • Browser Rendering
    • Durable Objects में SQLite-based Durable Objects
    • Workers KV
    • Realtime
    • Workers AI
    • Stream
    • Cloudflare Dashboard के कुछ हिस्से
    • Turnstile
    • AI Gateway
    • AutoRAG
  • प्रभावित services की list में Cloudflare Sites and Services के Access, Dashboard, Durable Objects, Realtime SFU, Realtime TURN Service, RealtimeKit, Stream, Waiting Room, Cloudflare One Client, Workers AI, Workers KV शामिल थे

संबंधित पढ़ाई

1 टिप्पणियां

 
GN⁺ 2025-06-13
Hacker News की राय
  • अगर Cloudflare की मुख्य सेवा Workers KV किसी अहम dependency यानी किसी third-party service में outage की वजह से डाउन हुई है, तो कुछ services असल में GCP पर निर्भर हैं
  • https://downdetector.com/ पर Google, Cloudflare, AWS जैसी कई बड़ी कंपनियों में outage दिख रहा है
    सड़क की अफवाहों के मुताबिक इन सबके पीछे कोई बड़ा BGP routing issue है
    • बात समझ में आती है। पहले जब ऐसी मिलती-जुलती घटना देखी थी, तो याद है कि BGP की वजह से traffic ईरान या चीन की तरफ route हो गया था
    • Internet Health Report में दिखाने के लिए कोई data नहीं दिख रहा है
      [1] https://www.ihr.live/
    • Anthropic भी डाउन है या degraded performance में है। टहलने जाने का समय है
  • GCP भी डाउन है https://news.ycombinator.com/item?id=44260810
    • अजीब coincidence है। जानना चाहूंगा कि Cloudflare GCP इस्तेमाल करता है या नहीं
  • यह समस्या बनने वाली लगती है। इतने सारे services में फैला इतना व्यापक outage काफी समय से नहीं देखा
    • अब जब हर कोई अपने अंडे बस कुछ ही टोकरियों में रख रहा है, तो लगता है ऐसी चीज़ें काफी नियमित अंतराल पर होती रहती हैं
  • क्या किसी ने गलत BGP configuration deploy कर दिया?
    • इतना बड़ा और व्यापक outage हो तो लगभग वही मुख्य दोषी होना चाहिए
  • लगता है जल्द ही इंटरनेट को बचा लेने वाला एक विशाल blog post आएगा ;)
    अभी डाउन है, लेकिन reference link: https://blog.cloudflare.com/the-ddos-that-almost-broke-the-i...
  • लगता है असर सिर्फ Workers पर नहीं, बल्कि “Verify you are human” dialog box feature पर भी है
    • सही, KV भी खराब है। KV पर depend करने वाला हर Worker exception throw कर रहा है
      dashboard में जा पाया, लेकिन बहुत धीमा है। error rate UTC 18:00 के आसपास से काफी बढ़ना शुरू हुआ
      edit: CF status page ने भी मान लिया है कि कई services में फैला व्यापक outage है: https://www.cloudflarestatus.com/incidents/25r9t0vz99rp
    • सच में ऐसा है। एक और सवाल यह है कि ऐसे dialog box हमें शुरुआत से हमेशा Akamai नहीं, Cloudflare पर ही क्यों दिखते हैं
  • title बदलकर “Broad Cloudflare service outages” हो गया
  • क्या यह coincidence है कि Tokyo में UTC 18:00 पर scheduled maintenance चल रहा है, और problem UTC 18:19 पर शुरू हुई?
    • संबंधित नहीं है। Cloudflare की कुछ services डाउन हुए GCP पर depend करती हैं
      फिर भी Tokyo maintenance पर काम कर रहे लोगों के चेहरे यह सोचकर सफेद पड़ गए होंगे कि कहीं यह उनके कारण तो नहीं हुआ
    • postmortem में पता चलेगा। ऐसे outage का एकमात्र फायदा यह है कि अच्छी write-up के जरिए सीखने और मज़ा लेने को मिलता है
    • उस page पर हमेशा scheduled maintenance रहता है, इसलिए मेरे अनुभव में यह कोई खास signal नहीं है