30 अगस्त का CenturyLink/Level(3) इंटरनेट आउटेज विश्लेषण

• कल दोपहर हुए बड़े पैमाने के इंटरनेट आउटेज का विश्लेषण

• शुरुआत में इसे CloudFlare की समस्या माना गया था, लेकिन बाद में पता चला कि यह दुनिया के सबसे बड़े ISP में से एक CenturyLink की ओर से हुई गड़बड़ी थी

• गलत Flowspec अपडेट के कारण BGP (Border Gateway Protocol) में समस्या हुई

→ Flowspec, BGP का एक extension है जो firewall rules को तेज़ी से network में propagate करने का उपकरण है

(Cloudflare का कहना है कि उसने 7 साल पहले Flowspec की वजह से आउटेज झेला था, इसलिए अब वह इसका इस्तेमाल नहीं करता)

→ आमतौर पर 1.5~2MB के आसपास रहने वाला BGP अपडेट, उस Flowspec के शामिल होते ही अचानक 20MB से ऊपर चला गया और समस्या पैदा हुई

• रिकवरी में 4 घंटे लगने की वजह पर CloudFlare का अनुमान

→ Flowspec rule की वजह से बड़े आकार के BGP updates बने होंगे, जिससे router तक पहुँचना संभव नहीं रहा होगा

→ संभव है कि यह Flowspec rule CentryLink से नहीं बल्कि उसके किसी customer से आया हो, इसलिए root cause ढूँढना मुश्किल रहा होगा

→ घटना अमेरिका के समयानुसार रविवार सुबह हुई, और ऊपर से CenturyLink/Level(3) network बहुत बड़ा और जटिल है

• कल इस network outage की वजह से LoL, PSN, Xbox Live, Steam, WoW जैसे कई online games में कनेक्ट करना संभव नहीं था

[sduck4]

इससे संबंधित League of Legends की प्रो मैच बीच में रुक गई थी, इसलिए इसे टूर्नामेंट-समर्पित सर्वर के बजाय सामान्य सर्वर पर खेला गया था.

[LCK PO 2R] रुकी हुई Gen.G vs DRX, शेष सेट live server पर खेले गए - http://www.inven.co.kr/webzine/news/?news=243826&site=lol

[xguru]

उफ़, अगर यह मैच के दौरान हुआ होता तो बड़ी परेशानी होती।

[xguru]

क्या BGP सुरक्षित है? https://hi.news.hada.io/topic?id=1932