Tα δίκτυα των Παρόχων στην Ελλάδα και προς το Εξωτερικό

[SfH]

Το GR-IX, εάν χρησιμοποιεί ακόμα τον απαρχαιωμένο εξοπλισμό που είχε μέχρι πριν κάποια χρόνια, λογικό να συνέβαινε κάποια στιγμή. Όταν έχεις critical αποστολή, δεν παίζεις με default config και αν μή τι άλλο αγοράζεις καλό και -το κατά δύναμην- αξιόπιστο εξοπλισμό. Εκεί συμβαίνει το απίθανο, να έχουν οι πελάτες τους σημαντικά καλύτερο εξοπλισμό από τους ίδιους.

Νομίζω ήταν Juniper EX4500 , που προσωπικά, δεν το θεωρώ ιδιαίτερα κακό μηχάνημα για τέτοιο ρόλο, τουλάχιστον από άποψη αξιοπιστίας. Επίσης δε θεωρώ ότι παίζουν με default config. Όσοι μηχανικοί έχει τύχει να μιλήσω που ασχολούνται με τον GR-IX, μου έχουν αφήσει θετική εντύπωση. Εφόσον ισχύουν αυτά που ανακοίνωσαν στα μέλη, δε βλέπω να χειρίστηκαν κάτι λάθος στο συγκεκριμένο incident. Το τελευταίο που αναφέρεις, ισχύει στα περισσότερα IXP. Αν θυμάμαι καλά, σχετικά πρόσφατα, "φτηνό" LAN τεράστιου IXP γύρισε σε whitebox switches ( και - μέχρι τώρα τουλάχιστον - δουλεύει ).

[anderm]

Εάν είναι το συγκεκριμένο, δεν είναι κακή επιλογή. Επίσης δεν έχω καμία αμφιβολία για το ότι πρόκειται για εξαιρετικό προσωπικό. Αυτό που όμως δυσκολεύονται να κατανοήσουν είναι η σημαντικότητα του project που έχουν αναλάβει. Συζητάμε για όλο το εγχώριο traffic, το να μην μπορεί να αναδρομολογήσει τη κίνηση μέσω εφεδρίας και να έχει downtime είναι απόρροια κακού planning και τίποτα παραπάνω. Θα μπορούσαν να είχαν κάνει πολύ καλύτερες επιλογές στο switching τους.

[SfH]

Αυτό που όμως δυσκολεύονται να κατανοήσουν είναι η σημαντικότητα του project που έχουν αναλάβει. Συζητάμε για όλο το εγχώριο traffic, το να μην μπορεί να αναδρομολογήσει τη κίνηση μέσω εφεδρίας και να έχει downtime είναι απόρροια κακού planning και τίποτα παραπάνω. Θα μπορούσαν να είχαν κάνει πολύ καλύτερες επιλογές στο switching τους.

Ας το πιάσουμε από την αρχή. Ένα switch παρουσίασε πρόβλημα. Όσοι είναι σε αυτό το switch και όσοι προσπαθούν να δουν αυτούς, θα έχουν πρόβλημα. Αυτοί επηρεάστηκαν σίγουρα. Όσα μέλη θεωρούν ότι το criticality είναι μεγάλο, έχουν διασυνδέσεις σε πολλαπλά PoPs. Αυτοί ήταν ΟΚ όταν μιλάγανε με άλλους στο ίδιο PoP , δυνητικά να είχαν πρόβλημα με άλλους προς άλλο PoP, αν η κίνηση πέρναγε μέσα από το προβληματικό switch.

Το κύριο θέμα είναι η κίνηση μεταξύ των μελών. Αυτό το ελέγχουν τα ίδια τα μέλη. Το θέμα στη συγκεκριμένη περίπτωση είναι ότι το προβληματικό switch δεν σταμάτησε να λειτουργεί τελείως. Υπήρχε κάποιο packet loss με κυμαινόμενους ρυθμούς, το οποίο όμως δεν ήταν αρκετό για να το πάρει χαμπάρι το BGP των μελών στις περισσότερες περιπτώσεις. Το αν θα έπρεπε να είναι πιο ευαίσθητο αυτό, είναι μια μεγάλη συζήτηση με trade-offs από όλες τις μεριές που δε νομίζω να έχει νόημα εδώ. Αυτός ήταν και ο κύριος λόγος της καθυστέρησης υποθέτω και από το ίδιο το GR-IX ( να ερευνήσουν μια όχι τόσο straightforward βλάβη ) αλλά και από τα μέλη ( να προβούν σε χειροκίνητες εργασίες κάποιοι ).

[paravoid]

Το EX4500 είναι πλέον EOL (το last order date είναι... πρακτικά σήμερα αλλά δεν ήταν ποτέ και κανένα πολύ σοβαρό switch. Τα μεγάλα exchanges έχουν fancy redundancies τύπου photonic switches, αλλά δεν χρειάζεται να φτάσουμε μέχρι εκεί, έχουμε πολλά περισσότερα low hanging fruits

Αλλά το ότι το GR-IX είναι ψιλοερασιτεχνικό operation είναι προφανές νομίζω, και όχι από την επιλογή του εξοπλισμού. Το GR-IX παραμένει ακόμα προϊόν του ΕΔΕΤ, και ούτε μόνιμο προσωπικό έχει (πλην ενός, που δεν ξέρω καν αν το κάνει full-time, αλλά όσο σκληρά και να εργάζεται, ένας είναι...). Το NOC που το υποστηρίζει -μεταξύ πολλών άλλων αρμοδιοτήτων- δεν είναι καν 24/7, ούτε καν standby δεν έχει. Η εν λόγω εργασία που προκάλεσε το πρόβλημα έγινε μέρα μεσημέρι, και όχι σε παράθυρο στις 3 το πρωί, επειδή δεν υπάρχουν βραδινές βάρδιες.

Γενικότερα, αν χαλάσει κάτι 10 το βράδυ, το πιθανότερο είναι ότι θα το δει κάποιος το επόμενο πρωί στις 9. Αν, δε, χαλάσει Παρασκευή 9 το βράδυ, βασιζόμαστε στο μεράκι και την εργατικότητα των μηχανικών του ΕΔΕΤ να δουλέψουν (απλήρωτοι) το ΣΚ τους.

Οπότε ναι, συμφωνώ εν μέρει με τον anderm. Οι μηχανικοί μπορεί να είναι εξαιρετικοί. Η εταιρία που τους πληρώνει και η διοίκηση της όμως, δυστυχώς αδυνατεί εδώ και χρόνια να καταλάβει το ρόλο της και την κρισιμότητα των ευθυνών της.

[SfH]

Το EX4500 είναι πλέον EOL (το last order date είναι... πρακτικά σήμερα αλλά δεν ήταν ποτέ και κανένα πολύ σοβαρό switch.

Για το EOL σύμφωνοι, αν και θα μου έκανε φοβερή εντύπωση να μην τα έχουν αλλάξει πριν λήξει το support. Για τους buffers, είναι λίγο διχασμένες οι γνώμες. Δεδομένων άλλων περιορισμών, όσο η πλειοψηφία συνδέεται με n*10g , προσωπικά δε θεωρώ ότι χρειάζονται ιδιαίτερο μέγεθος. Αν στο μέλλον δούμε μεγαλύτερη ποικιλία, θεωρώ ότι έχει περισσότερο νόημα, αν και υπάρχουν IXP που διαφωνούν με αυτό.

Τα μεγάλα exchanges έχουν fancy redundancies τύπου photonic switches, αλλά δεν χρειάζεται να φτάσουμε μέχρι εκεί, έχουμε πολλά περισσότερα low hanging fruits

Ωραία τα photonic switches του AMS-IX αλλά ακριβά ( και νομίζω ότι συγκρίνουμε μήλα με αχλάδια). Στην αντίθετη όχθη έχουμε το LON2 του LINX με αρκετά χαμηλό budget ( edgecore switches ) και κόστος. Προσωπικά θεωρώ ότι το ιδανικό είναι κάπου ανάμεσα.

Για τα διοικητικά του ΕΔΕΤ δε γνωρίζω όποτε δε θα σχολιάσω.

[spiderman]

Το EX4500 είναι πλέον EOL (το last order date είναι... πρακτικά σήμερα

Αν το last order είναι σήμερα, τότε το EOL είναι κάποια χρόνια μετά.

[paravoid]

Αν το last order είναι σήμερα, τότε το EOL είναι κάποια χρόνια μετά.

Το EOL είναι η ημερομηνία της ανακοίνωσης. Αυτό στο οποίο αναφέρεσαι μάλλον είναι το EOS (S = Support), το οποίο είναι πράγματι 5 χρόνια μετά μετά το last order date. (Τα λέει στο link).

Ωστόσο έκανα λάθος σε κάτι άλλο: 30/6/2019 είναι το last order του EX4550 και του *rack mount kit* του EX4500. Το EX4500 είχε last order 01/05/2016, το end of support είναι 01/05/2021 (είμαστε ήδη capped σε next day, αλλά φαντάζομαι το GR-IX έχει spares ούτως ή άλλως και δεν θα βασίζεται σε same day).

[spiderman]

Το EOL είναι η ημερομηνία της ανακοίνωσης. Αυτό στο οποίο αναφέρεσαι μάλλον είναι το EOS (S = Support), το οποίο είναι πράγματι 5 χρόνια μετά μετά το last order date. (Τα λέει στο link).

Γιατί έχω την εντύπωση πως η ημέρα της ανακοίνωσης του EOL είναι το EOL Announcement/Notification/κοκ και όχι απλά το EOL;
Στο μυαλό μου είναι το λεκτικό "βγήκε EOL για το προϊόν" και όχι "βγήκε EOL το προϊόν".
Και το ότι έχει βγει EOL για κάποιο προϊόν σημαίνει ότι απλά θα πρέπει σιγά-σιγά να σχεδιάζεις την αντικατάστασή του. Όχι ότι έχεις ήδη "ληγμένο" προϊόν.

[paravoid]

Γιατί έχω την εντύπωση πως η ημέρα της ανακοίνωσης του EOL είναι το EOL Announcement/Notification/κοκ και όχι απλά το EOL;
Στο μυαλό μου είναι το λεκτικό "βγήκε EOL για το προϊόν" και όχι "βγήκε EOL το προϊόν".
Και το ότι έχει βγει EOL για κάποιο προϊόν σημαίνει ότι απλά θα πρέπει σιγά-σιγά να σχεδιάζεις την αντικατάστασή του. Όχι ότι έχεις ήδη "ληγμένο" προϊόν.

Μικρή σημασία έχουν όλα αυτά, αλλά EOL date "σκέτο" δεν υπάρχει στη Juniper. Υπάρχει το EOL Announcement date, και μετά αρχίζει σταδιακά η διακοπή της πώλησης και η μερική υποστήριξη μέχρι του τελικού milestone που είναι η ημερομηνία του EOS. Με μια πρόχειρη αναζήτηση, αυτό εξηγεί πώς δουλεύει ακριβώς: https://support.juniper.net/support/pdf/eol/990833.pdf

Για το EX4500, σύμφωνα με το announcement παρ' όλο που δεν έχουμε φτάσει στο τελικό milestone, έχουμε ήδη παρέλθει το "End of Software Engineering support date" που σημαίνει "EOSE is the date after which Juniper is no longer committed to furnish Software Engineering level supportfor the operating system software licensed for the affected hardware. Thismeans that no furtherReleases (e.g. service or maintenance releases or patches) will be created for the support of the affectedhardware product. JTAC support will generally be limited to investigation and troubleshooting in an attempt toprovide solutions, configuration guidelines and workarounds" καθώς και το "End of Hardware Engineering support date" που σημαίνει "After EOHE Juniper has no commitment to perform hardware engineering level support(including hardware modifications and hardware failure analysis) for hardware defects".

Το πόσο γρήγορα σημαίνει ότι πρέπει να το αντικαταστήσεις... εξαρτάται από τις διαθέσεις του καθενός (Εγώ μια φορά τα πέταξα όλα τον τελευταίο χρόνο)

[patrickdrd]

παλι προβληματα;
3 sites επεσαν με την μια με bad gateway, γραφει για cloudflare

- - - Updated - - -

μεσα επεσα, αντε παλι τα ιδια...
https://www.cloudflarestatus.com/incidents/tx4pgxs6zxdr

[SfH]

παλι προβληματα;
3 sites επεσαν με την μια με bad gateway, γραφει για cloudflare

Κάτι έχει πάθει η cloudflare.

[patrickdrd]

κανει και τιποτα αλλο;;;

[SfH]

Είναι ΟΚ τώρα. Από ότι βλέπω, δεν επηρέασε και πολλά σημεία :

Spoiler:

This incident affects: Oceania (Auckland, New Zealand - (AKL), Brisbane, QLD, Australia - (BNE), Melbourne, VIC, Australia - (MEL), Perth, WA, Australia - (PER), Sydney, NSW, Australia - (SYD)), Asia (Bangkok, Thailand - (BKK), Cebu, Philippines - (CEB), Chengdu, China - (CTU), Chennai, India - (MAA), Colombo, Sri Lanka - (CMB), Dongguan, China - (SZX), Foshan, China - (FUO), Fuzhou, China - (FOC), Guangzhou, China - (CAN), Hangzhou, China - (HGH), Hanoi, Vietnam - (HAN), Hengyang, China - (HNY), Ho Chi Minh City, Vietnam - (SGN), Hong Kong - (HKG), Hyderabad, India - (HYD), Islamabad, Pakistan - (ISB), Jinan, China - (TNA), Karachi, Pakistan - (KHI), Kathmandu, Nepal - (KTM), Kuala Lumpur, Malaysia - (KUL), Lahore, Pakistan - (LHE), Langfang, China - (NAY), Luoyang, China - (LYA), Macau - (MFM), Manila, Philippines - (MNL), Mumbai, India - (BOM), Nanning, China - (NNG), New Delhi, India - (DEL), Osaka, Japan - (KIX), Phnom Penh, Cambodia - (PNH), Qingdao, China - (TAO), Seoul, South Korea - (ICN), Shanghai, China - (SHA), Shenyang, China - (SHE), Shijiazhuang, China - (SJW), Singapore, Singapore - (SIN), Suzhou, China - (SZV), Taipei - (TPE), Tianjin, China - (TSN), Tokyo, Japan - (NRT), Ulaanbaatar, Mongolia - (ULN), Wuhan, China - (WUH), Wuxi, China - (WUX), Xi'an, China - (XIY), Yerevan, Armenia - (EVN), Zhengzhou, China - (CGO), Zuzhou, China - (CSX)), Latin America & the Caribbean (Asunción, Paraguay - (ASU), Bogotá, Colombia - (BOG), Buenos Aires, Argentina - (EZE), Curitiba, Brazil - (CWB), Fortaleza, Brazil - (FOR), Lima, Peru - (LIM), Medellín, Colombia - (MDE), Mexico City, Mexico - (MEX), Panama City, Panama - (PTY), Porto Alegre, Brazil - (POA), Quito, Ecuador - (UIO), Rio de Janeiro, Brazil - (GIG), São Paulo, Brazil - (GRU), Santiago, Chile - (SCL), Willemstad, Curaçao - (CUR)), Europe (Amsterdam, Netherlands - (AMS), Athens, Greece - (ATH), Barcelona, Spain - (BCN), Belgrade, Serbia - (BEG), Berlin, Germany - (TXL), Brussels, Belgium - (BRU), Bucharest, Romania - (OTP), Budapest, Hungary - (BUD), Chișinău, Moldova - (KIV), Copenhagen, Denmark - (CPH), Dublin, Ireland - (DUB), Düsseldorf, Germany - (DUS), Edinburgh, United Kingdom - (EDI), Frankfurt, Germany - (FRA), Geneva, Switzerland - (GVA), Gothenburg, Sweden - (GOT), Hamburg, Germany - (HAM), Helsinki, Finland - (HEL), Istanbul, Turkey - (IST), Kyiv, Ukraine - (KBP), Lisbon, Portugal - (LIS), London, United Kingdom - (LHR), Luxembourg City, Luxembourg - (LUX), Madrid, Spain - (MAD), Manchester, United Kingdom - (MAN), Marseille, France - (MRS), Milan, Italy - (MXP), Moscow, Russia - (DME), Munich, Germany - (MUC), Nicosia, Cyprus - (LCA), Oslo, Norway - (OSL), Paris, France - (CDG), Prague, Czech Republic - (PRG), Reykjavík, Iceland - (KEF), Riga, Latvia - (RIX), Rome, Italy - (FCO), Saint Petersburg, Russia - (LED), Sofia, Bulgaria - (SOF), Stockholm, Sweden - (ARN), Tallinn, Estonia - (TLL), Thessaloniki, Greece - (SKG), Vienna, Austria - (VIE), Vilnius, Lithuania - (VNO), Warsaw, Poland - (WAW), Zagreb, Croatia - (ZAG), Zürich, Switzerland - (ZRH)), Africa (Cairo, Egypt - (CAI), Casablanca, Morocco - (CMN), Cape Town, South Africa - (CPT), Dar Es Salaam, Tanzania - (DAR), Djibouti City, Djibouti - (JIB), Durban, South Africa - (DUR), Johannesburg, South Africa - (JNB), Lagos, Nigeria - (LOS), Luanda, Angola - (LAD), Maputo, MZ - (MPM), Mombasa, Kenya - (MBA), Port Louis, Mauritius - (MRU), Réunion, France - (RUN), Kigali, Rwanda - (KGL)), Middle East (Amman, Jordan - (AMM), Baghdad, Iraq - (BGW), Baku, Azerbaijan - (GYD), Beirut, Lebanon - (BEY), Doha, Qatar - (DOH), Dubai, United Arab Emirates - (DXB), Kuwait City, Kuwait - (KWI), Manama, Bahrain - (BAH), Muscat, Oman - (MCT), Ramallah - (ZDM), Riyadh, Saudi Arabia - (RUH), Tel Aviv, Israel - (TLV)), and North America (Ashburn, VA, United States - (IAD), Atlanta, GA, United States - (ATL), Boston, MA, United States - (BOS), Buffalo, NY, United States - (BUF), Calgary, AB, Canada - (YYC), Charlotte, NC, United States - (CLT), Chicago, IL, United States - (ORD), Columbus, OH, United States - (CMH), Dallas, TX, United States - (DFW), Denver, CO, United States - (DEN), Detroit, MI, United States - (DTW), Houston, TX, United States - (IAH), Indianapolis, IN, United States - (IND), Jacksonville, FL, United States - (JAX), Kansas City, MO, United States - (MCI), Las Vegas, NV, United States - (LAS), Los Angeles, CA, United States - (LAX), McAllen, TX, United States - (MFE), Memphis, TN, United States - (MEM), Miami, FL, United States - (MIA), Minneapolis, MN, United States - (MSP), Montgomery, AL, United States - (MGM), Montréal, QC, Canada - (YUL), Nashville, TN, United States - (BNA), Newark, NJ, United States - (EWR), Norfolk, VA, United States - (ORF), Omaha, NE, United States - (OMA), Phoenix, AZ, United States - (PHX), Pittsburgh, PA, United States - (PIT), Portland, OR, United States - (PDX), Queretaro, MX, Mexico - (QRO), Richmond, Virginia - (RIC), Sacramento, CA, United States - (SMF), Salt Lake City, UT, United States - (SLC), San Diego, CA, United States - (SAN), San Jose, CA, United States - (SJC), Saskatoon, SK, Canada - (YXE), Seattle, WA, United States - (SEA), St. Louis, MO, United States - (STL), Tampa, FL, United States - (TPA), Toronto, ON, Canada - (YYZ), Vancouver, BC, Canada - (YVR), Tallahassee, FL, United States - (TLH), Winnipeg, MB, Canada - (YWG)).

Αν και για να είμαστε δίκαιοι, μόνο το συγκεκριμένο ήταν ( μάλλον ) δικής τους υπαιτιότητας, από όλα τα πρόσφατα που έχουμε δει.

[zeronero]

Τώρα από Cloudflare Status: ATH και SKG Re-routed.

[deniSun]

Τώρα από Cloudflare Status: ATH και SKG Re-routed.

Operational μου δείχνει.