Tα δίκτυα των Παρόχων στην Ελλάδα και προς το Εξωτερικό

[SfH]

Και στου εξωτερικού τις σελίδες επίσης σερνόταν πριν λίγο.

Πέρα από εγχώριους παρόχους, στον GRIX συνδέονται η cloudflare και η microsoft Εκτός αυτού, υπάρχει περίπτωση τα links κάποιος πάροχος να γύρισε την κίνηση από κυκλώματα εξωτερικού για να μετριάσει το πρόβλημα και κάποια να έχουν πλέον συμφόρηση.

[CyberCr33p]

Γύρισαν το CloudFlare σε LINX (Αγγλία):

traceroute to 1.1.1.1 (1.1.1.1), 64 hops max, 52 byte packets
1 fritz.box (192.168.2.1) 4.028 ms 1.748 ms 1.073 ms
2 80.106.125.100 (80.106.125.100) 28.851 ms 28.722 ms 27.947 ms
3 thes7609a-thes7609d-net.otenet.net (79.128.250.0) 28.598 ms 27.956 ms
79.128.250.128 (79.128.250.128) 28.781 ms
4 nyma-asr99b-athe-asr99b.backbone.otenet.net (79.128.224.62) 29.895 ms
62.75.3.117 (62.75.3.117) 29.059 ms 28.685 ms
5 nyma-asr99a-athe-asr99a.backbone.otenet.net (79.128.224.30) 28.771 ms 29.311 ms
62.75.6.98 (62.75.6.98) 69.757 ms
6 linx-lon1.as13335.net (195.66.225.179) 76.234 ms
62.75.3.117 (62.75.3.117) 29.428 ms
linx-lon1.as13335.net (195.66.225.179) 71.289 ms
7 62.75.6.102 (62.75.6.102) 76.160 ms
62.75.6.98 (62.75.6.98) 70.289 ms
one.one.one.one (1.1.1.1) 81.109 ms

- - - Updated - - -

Από status page του CloudFlare:

Monitoring - A fix has been implemented and we are monitoring the results.
Jun 26, 11:22 UTC
Identified - The issue has been identified and a fix is being implemented.
Jun 26, 11:22 UTC
Investigating - Cloudflare is observing network performance issues in Athens, Greece.

We are working to mitigate impact to Internet users in this region.
Jun 26, 11:20 UTC

[matelas]

Ναι επειδή το πρόβλημα είναι στο GR-IX μάλλον δεν πρόκειται να ανακοινώσουν κάτι (εάν το έχουν πάρει κιόλας χαμπάρι).

Σε περίπτωση που χρησιμοποιείτε το CloudFlare (μιας και έχει peering στο GR-IX) και δεν ανοίγει η ιστοσελίδα σας ή καθυστερεί να φορτώσει μπορείτε να κάνετε pause το CloudFlare μέσα από το πίνακα διαχείρισης του.

Έκαναν reroute στις 13:25 για πολύ λίγο και ξαναγύρισαν μέσω grix. Τώρα εδώ και 10 λεπτά περίπου έκαναν πάλι reroute.

Προσπαθήσαμε να κάνουμε pause αλλά δεν φόρτωνε τίποτα.

Σε ένα trace που έκανα στο στοιχιμαν που χρησιμοποιεί cloudflare πήρα αυτό:

Tracing route to www.stoiximan.gr [104.17.129.100]
over a maximum of 30 hops:

1 <1 ms <1 ms <1 ms 192.168.0.1
2 17 ms 16 ms 16 ms 80.106.125.100
3 16 ms 16 ms 16 ms 79.128.231.92
4 18 ms 68 ms 39 ms patr-asr99a-agri-asr9ka.backbone.otenet.net [79.128.229.9]
5 * * * Request timed out.
6 * * 20 ms kolasr01-hu-0-5-0-0.ath.oteglobe.gr [62.75.3.13]
7 21 ms 20 ms 20 ms cloudflare.gr-ix.gr [176.126.38.5]
8 21 ms 20 ms 21 ms 104.17.129.100

Πρώτη φορά βλέπω να περνάω από oteglobe για να φτάσω στο grix.

[SfH]

Έκαναν reroute στις 13:25 για πολύ λίγο και ξαναγύρισαν μέσω grix. Τώρα εδώ και 10 λεπτά περίπου έκαναν πάλι reroute.

Προσπαθήσαμε να κάνουμε pause αλλά δεν φόρτωνε τίποτα.

Σε ένα trace που έκανα στο στοιχιμαν που χρησιμοποιεί cloudflare πήρα αυτό:

Tracing route to www.stoiximan.gr [104.17.129.100]
over a maximum of 30 hops:

1 <1 ms <1 ms <1 ms 192.168.0.1
2 17 ms 16 ms 16 ms 80.106.125.100
3 16 ms 16 ms 16 ms 79.128.231.92
4 18 ms 68 ms 39 ms patr-asr99a-agri-asr9ka.backbone.otenet.net [79.128.229.9]
5 * * * Request timed out.
6 * * 20 ms kolasr01-hu-0-5-0-0.ath.oteglobe.gr [62.75.3.13]
7 21 ms 20 ms 20 ms cloudflare.gr-ix.gr [176.126.38.5]
8 21 ms 20 ms 21 ms 104.17.129.100

Πρώτη φορά βλέπω να περνάω από oteglobe για να φτάσω στο grix.

Μάλλον έκανες το trace ενώ γύριζε το routing

Γενικά δείχνει να έφτιαξε η υποδομή αυτή τη στιγμή. Απλά δεν ξέρω αν έχουν ανοίξει πάλι τα peering τους όσοι πάροχοι τα είχαν κλείσει.

[Andreaslar]

Tracing route to one.one.one.one [1.1.1.1]
over a maximum of 30 hops:

  1    <1 ms    <1 ms    <1 ms  x.x.x.x
  2     1 ms     1 ms    <1 ms  x.x.x.x
  3     1 ms     1 ms     1 ms  x.x.x.x
  4     *        *        *     Request timed out.
  5     1 ms    <1 ms     1 ms  x.x.x.x
  6     1 ms    <1 ms    <1 ms  x.x.x.x
  7   256 ms     1 ms    <1 ms  x.x.x.x
  8     2 ms     1 ms     1 ms  syze-inte-6504a-vlan10.sec.syzefxis-hosting.gr [
84.205.239.3]
  9     2 ms     2 ms     2 ms  syze-inte-6807a-po21.otenet.net [79.128.224.250]

 10     3 ms     3 ms     2 ms  kolasr01-hu-0-0-0-0.ath.OTEGlobe.gr [62.75.3.9]

 11   109 ms    51 ms    51 ms  62.75.6.98
 12    52 ms    52 ms    50 ms  linx-lon1.as13335.net [195.66.225.179]
 13    43 ms    43 ms    43 ms  one.one.one.one [1.1.1.1]

Trace complete.

[wintech2003]

Για την ώρα βλέπω πως ακόμα IPv4 & IPv6 traffic πάει μέσω LINX.
Το GR-IX peer τους επίσης δείχνει +35ms latency σε σχέση με το κανονικό.

[Hik]

Είμασταν από τους πρώτους που ενημερώσαμε τη Cloudflare, μας έδωσαν την απάντηση που υπάρχει παραπάνω για το ATH03 (Telecom Italia Sparkle Greece) PoP. Προφανώς και αυτοί ενημερώθηκαν από το μήνυμα που έστειλε το GR-IX. Προς το παρόν ευτυχώς δρομολογούνε όλη τη κίνησή τους σε άλλα POPs.

Φαίνεται και στα γράφηματα του GR-IX έχει πέσει ένα 30% το traffic τις τελευταίες 2 ώρες.

Οπότε μάλλον πρέπει να υπάρχει σοβαρό θέμα στη Μεταμόρφωση.

[SfH]

Για την ώρα βλέπω πως ακόμα IPv4 & IPv6 traffic πάει μέσω LINX.
Το GR-IX peer τους επίσης δείχνει +35ms latency σε σχέση με το κανονικό.

Της cloudflare πιθανότατα. Αρκετοί πάροχοι όμως έχουν γυρίσει στο GRIX και παίζουν κανονικά. Λ.Χ. , από ΟΤΕ :

Tracing route to ns1.forthnet.gr [194.219.227.1]
over a maximum of 30 hops:

  1    <1 ms    <1 ms    <1 ms  x.x.x.x
  2    15 ms    15 ms    15 ms  80.106.108.174
  3    15 ms    15 ms    15 ms  nyma7609a-bras-nym6-e320.backbone.otenet.net [79
.128.245.41]
  4    15 ms    16 ms    16 ms  nyma-asr99b-nyma7609a.backbone.otenet.net [79.12
8.241.185]
  5    16 ms    16 ms    15 ms  athe-asr99b-nyma-asr99b.backbone.otenet.net [79.
128.224.61]
  6    16 ms    15 ms    15 ms  79.128.251.102
  7    16 ms    16 ms    15 ms  79.128.251.101
  8    16 ms    16 ms    16 ms  athe-asr99b-athe7609k2.backbone.otenet.net [79.1
28.227.145]
  9    16 ms    16 ms    16 ms  athe-asr99a-athe-asr99b.backbone.otenet.net [79.
128.224.65]
 10    16 ms    16 ms    16 ms  forthnet.gr-ix.gr [176.126.38.3]
 11    16 ms    16 ms    16 ms  be32.distr-kln-03.forthnet.gr [62.1.110.153]
 12    16 ms    16 ms    17 ms  gi1-24.serv-kln-01.forthnet.gr [213.16.247.125]

 13    16 ms    16 ms    17 ms  ns1.forthnet.gr [194.219.227.1]

[patrickdrd]

φτιαχτηκε λενε:

Incident resolved
We see no further issues since disabling this IX and we are marking this incident as resolved.

[wintech2003]

Της cloudflare πιθανότατα. Αρκετοί πάροχοι όμως έχουν γυρίσει στο GRIX και παίζουν κανονικά. Λ.Χ. , από ΟΤΕ :

Ναι, στην Cloudflare συγεκριμένα αναφέρομαι. Απο OTE -> Forthnet πχ πάω κανονικά over GR-IX.

btw η Cloudflare στο ΑΤΗ02 δεν ειναι; Πως την επηρέασε το outage στο switch του ΑΤΗ03;

[GregoirX23]

Το πρόβλημα αφορά σε όλους τους παρόχους αν δεν κάνω λάθος..σωστά; (μιας και το gr-ix είναι κοινό σημείο)..
Παρατηρώ ολίγον αυξημένο ping προς εξωτερικό απ'ότι συνήθως.., δεν είναι τραγικά τα πράγματα πάντως..

Spoiler:

Από γραμμή wind αυτό..

Microsoft Windows [Έκδοση 6.1.7601]
Πνευματικά δικαιώματα (c) 2009 Microsoft Corporation. Με επιφύλαξη κάθε νόμιμου
δικαιώματος.

C:\Users\LENOVO>tracert arcor.de

Παρακολούθηση της διαδρομής προς: arcor.de [84.17.165.106]
με μέγιστο πλήθος αναπηδήσεων 30:

1 6 ms 3 ms 3 ms netfaster.modem [192.168.2.1]
2 20 ms 17 ms 18 ms 62.169.255.45
3 32 ms 21 ms 17 ms 62.169.249.189
4 21 ms 20 ms 20 ms 62.169.252.234
5 20 ms 18 ms 19 ms tengig-0-1-0-7.br02.ath01.pccwbtn.net [63.218.173.157]
6 63 ms 60 ms 62 ms TenGE0-1-0-12.br01.frf08.pccwbtn.net [63.223.13.138]
7 68 ms 68 ms 66 ms 63-222-0-66.static.pccwglobal.net [63.222.0.66]
8 63 ms 60 ms 60 ms ae8.mpr1.fra3.de.zip.zayo.com [64.125.26.233]
9 67 ms 66 ms 82 ms ae27.cs1.fra6.de.eth.zayo.com [64.125.31.216]
10 68 ms 66 ms 66 ms ae2.cs1.ams17.nl.eth.zayo.com [64.125.29.59]
11 70 ms 66 ms 75 ms ae1.mcs1.ams17.nl.eth.zayo.com [64.125.29.79]
12 70 ms 68 ms 68 ms ae4.mpr2.ams12.nl.zip.zayo.com [64.125.27.185]
13 72 ms 66 ms 67 ms 94.31.24.194.IPYX-069855-001-ZYO.above.net [94.31.24.194]
14 74 ms 74 ms 75 ms 185.79.168.165
15 75 ms 74 ms 73 ms 185.79.169.166
16 76 ms 124 ms 74 ms 84.17.163.142
17 67 ms 70 ms 67 ms 84.17.160.228
18 88 ms 92 ms 82 ms arcor.de [84.17.165.106]

Η παρακολούθηση ολοκληρώθηκε.

C:\Users\LENOVO>tracert 1.1.1.1

Παρακολούθηση της διαδρομής προς: one.one.one.one [1.1.1.1]
με μέγιστο πλήθος αναπηδήσεων 30:

1 5 ms 4 ms 3 ms netfaster.modem [192.168.2.1]
2 22 ms 23 ms 18 ms 62.169.255.45
3 20 ms 18 ms 17 ms 62.169.245.193
4 19 ms 19 ms 17 ms 62.169.252.230
5 30 ms 18 ms 31 ms 195.22.193.41
6 21 ms 20 ms 18 ms 195.22.193.57
7 20 ms 19 ms 18 ms one.one.one.one [1.1.1.1]

Η παρακολούθηση ολοκληρώθηκε.

C:\Users\LENOVO>tracert www.stoiximan.gr

Παρακολούθηση της διαδρομής προς: www.stoiximan.gr [104.16.130.81]
με μέγιστο πλήθος αναπηδήσεων 30:

1 9 ms 3 ms 5 ms netfaster.modem [192.168.2.1]
2 19 ms 20 ms 19 ms 62.169.255.45
3 20 ms 20 ms 18 ms 62.169.245.193
4 22 ms 19 ms 23 ms 62.169.252.230
5 25 ms 19 ms 18 ms 79.140.91.28
6 20 ms 19 ms 20 ms 195.22.193.57
7 20 ms 19 ms 20 ms 104.16.130.81

Η παρακολούθηση ολοκληρώθηκε.

C:\Users\LENOVO>

[SfH]

Ναι, στην Cloudflare συγεκριμένα αναφέρομαι. Απο OTE -> Forthnet πχ πάω κανονικά over GR-IX.

btw η Cloudflare στο ΑΤΗ02 δεν ειναι; Πως την επηρέασε το outage στο switch του ΑΤΗ03;

Σωστά, η Cloudflare είναι στο ATH02. Από εκεί όμως μιλάει με παρόχους που δυνητικά είναι στο ATH03, οπότε πάλι επηρεάζεται. Το συγκεκριμένο πρόβλημα μάλιστα δεν ήταν καθαρό outage για να γυρίσει η δρομολόγηση από μόνη της. Απλά το switch αποφάσισε να κάνει drop κάποιο ποσοστό από τα συνολικά πακέτα. Σε αρκετές περιπτώσεις αυτό δεν ήταν αρκετό για να πέσει το BGP με default configuration. Όσοι χρησιμοποιούν και BFD παράλληλα, απλά flapάρανε ( ανάλογα με τους timers και τις ρυθμίσεις του dampening αν είχαν ) , αλλά πάλι είναι σχετικό κατά πόσο αυτό το αποτέλεσμα ήταν ιδανικό για αυτό τον τύπο βλάβης.

[patrickdrd]

Cloudflare: Αδυναμία δικτύου σε όλη την Ελλάδα. Τι συνέβη;

[SfH]

Cloudflare: Αδυναμία δικτύου σε όλη την Ελλάδα. Τι συνέβη;

Ουδεμία σχέση με το hijacking της Δευτέρας, με τα θέματα του ΟΤΕ ή τα θέματα που κάνουν link.

[galotzas]

Και εδω ενα trace απο Cyta-Vodafone

traceroute to 1.1.1.1 (1.1.1.1), 30 hops max, 60 byte packets
 1  _gateway (192.168.88.1)  0.510 ms  0.494 ms  0.478 ms
 2  b3.met.cyta.gr (46.103.127.3)  18.232 ms  19.324 ms  20.898 ms
 3  178-103-86.brsl3.cyta.gr (178.59.103.86)  22.642 ms  23.754 ms  24.436 ms
 4  46-126-3.adsl.cyta.gr (46.103.126.3)  26.193 ms  30.146 ms  30.122 ms
 5  62.38.36.45 (62.38.36.45)  29.576 ms  30.484 ms  31.252 ms
 6  ae3-100-ucr1.atm.cw.net (195.89.103.89)  32.970 ms  33.109 ms  34.607 ms
 7  195.2.21.57 (195.2.21.57)  47.223 ms  29.778 ms  29.591 ms
 8  centurylink-gw.sof.cw.net (195.2.6.6)  31.540 ms  32.160 ms  33.924 ms
 9  ae-3-3202.bar2.Budapest1.Level3.net (4.69.201.162)  72.332 ms  73.568 ms  74.773 ms
10  ae-3-3202.bar2.Budapest1.Level3.net (4.69.201.162)  75.751 ms  76.936 ms  78.424 ms
11  dialup-212.162.26.70.frankfurt1.mik.net (212.162.26.70)  66.926 ms  67.993 ms  69.235 ms
12  one.one.one.one (1.1.1.1)  69.510 ms  59.528 ms  61.129 ms