Παγκόσμιο Downtime για το Facebook

[PiXel]

Το άρθρο ενημερώθηκε με νέες πληροφορίες

Φαίνεται πως μετά το Twitter ήρθε και η σειρά του γνωστού site κοινωνικής δικτύωσης Facebook, που χθες και για πάνω από δύο ώρες βρισκόταν "κάτω" καθώς η πρόσβαση στο www.facebook.com επέστρεφε το error: "Service Unavailable - DNS Failure".



Το site μετά από πολλές αναφορές για προβλήματα σύνδεσης, διορθώθηκε και ανέβηκε και πάλι online. Ωστόσο, το πρόβλημα δε φαίνεται να ήταν "εσωτερικό", καθώς, παρά τους πολλούς χρήστες που αδυνατούσαν να μπουν στην υπηρεσία, υπήρχαν κι αυτοί που έμπαιναν αλλά με εξαιρετικά μικρή ταχύτητα αλλά κι αυτοί που έμπαιναν χωρίς κανένα πρόβλημα.

Αρχικά, η ανακοίνωση μέσω των New York Times που αναρτήθηκε τα ξημερώματα Παρασκευής, ανέφερε πως το πρόβλημα ήταν στα APIs του site. Πιο συγκεκριμένα, τα APIs (ήτοι, Aplication Programming Interfaces) είναι ο τρόπος επικοινωνίας (κατά μία έννοια) που χρησιμοποιούν οι προγραμματιστές και διάφορα sites ώστε να δανείζονται εφαρμογές και λειτουργίες του Facebook (όπως το Like Button, φερ' ειπείν) στις δικές τους σελίδες.

Παρόλα αυτά, μια δεύτερη ανακοίνωση του Facebook απ' τον Director of Software Engineering, Robert Johnson, εμφανίστηκε αργότερα που ανέφερε πως το πρόβλημα ήταν τελικά σε ένα αυτοματοποιημένο σύστημα που είχε αναπτυχθεί απ' το Facebook για να ελέγχει μη έγκυρες τιμές ρυθμίσεων στο cache του. Αυτό το αυτοματοποιημένο σύστημα, για κακή τους τύχη, "εκπυρσοκρότησε" σε σημείο που η μόνη λύση ήταν να κατέβει το site, ώστε να διορθωθεί το ζήτημα.

Η ανακοίνωση έλεγε:

"Σήμερα [χθες] κάναμε μια αλλαγή σε ένα αντίγραφο μιας τιμής ρύθμισης που ερμηνευόταν ως άκυρη. Αυτό σημαίνει πως κάθε client έβλεπε την άκυρη τιμή και προσπαθούσε να την επιδιορθώσει. Επειδή, όμως, η επιδιόρθωση περιλαμβάνει τη δημιουργία μιας ερώτησης σε ένα cluster των βάσεων δεδομένων, αυτό το cluster γρήγορα γέμιζε από εκατοντάδες χιλιάδες ερωτήσεις το δευτερόλεπτο.

Για να γίνουν τα πράγματα χειρότερα, κάθε φορά που ένας client έπαιρνε ένα σφάλμα προσπαθώντας να κάνει μια ερώτηση σε μια απ' τις βάσεις δεδομένων, ερμηνευόταν ως άκυρη τιμή και διέγραφε το αντίστοιχο κλειδί της cache. Αυτό σημαίνει πως ακόμα κι όταν το αρχικό πρόβλημα διορθώθηκε, η ροή των ερωτήσεων συνέχιζε. Ενόσω κάποιες απ' τις βάσεις δεδομένων αποτύγχαναν να εξυπηρετήσουν κάποιες απ' τις ερωτήσεις, προκαλούσαν ακόμα περισσότερες ερωτήσεις στις ίδιες τις βάσεις. Είχαμε μπει σε ένα βρόγχο ανατροφοδότησης που δεν άφηνε τις βάσεις δεδομένων να ανακτηθούν.

Ο μόνος τρόπος για να σταματήσουμε αυτό το ατέρμονο loop ήταν αρκετά οδυνηρός - έπρεπε να σταματήσουμε όλη την κίνηση σ' αυτό το cluster των βάσεων δεδομένων, δηλαδή να κατεβάσουμε το site. Μόλις οι βάσεις δεδομένων ανακτούνταν και το πρόβλημα επιδιορθωνόταν, επιτρέπαμε σιγά - σιγά σε περισσότερα άτομα να μπουν στο site."

Το χθεσινό, ήταν ένα απ' τα μεγαλύτερα downtimes του Facebook τα τελευταία 4 χρόνια και σίγουρα, το γεγονός πως εκατομμύρια χρήστες αδυνατούσαν να μπουν στους λογαριασμούς τους, άφησε πολύ κόσμο δυσαρεστημένο. Τελικά, το πρόβλημα διορθώθηκε και το site ήταν και πάλι online - πλήρως λειτουργικό - στις 00:10 (ώρα Ελλάδος).

Πηγή: techcrunch.com

[EvilHawk]

September 23, 2010, 4:09 pm
Facebook Says It Is Working on Technical Troubles
By THE NEW YORK TIMES

Facebook users have been seeing the site go online and offline on Thursday. The company issued a statement but gave no explanation as to the cause of the problem:

We’re currently experiencing some site issues causing Facebook to be slow or unavailable for some users. We are working to resolve this issue as quickly as possible.

The downtime also affected the many sites that incorporate Facebook’s “Like” buttons and the Facebook Connect service. Many Web sites bore empty white boxes or error messages where Facebook’s content should be.

Facebook’s developer Web site remained up and noted that the company was experiencing problems with its application programming interface, which outside programmers and sites use to interact with Facebook. A statement on the site said:

Current Status: API Latency Issues

We are currently experiencing latency issues with the API, and we are actively investigating. We will provide an update when either the issue is resolved or we have an ETA for resolution.

[PiXel]

September 23, 2010, 4:09 pm
Facebook Says It Is Working on Technical Troubles
By THE NEW YORK TIMES

Facebook users have been seeing the site go online and offline on Thursday. The company issued a statement but gave no explanation as to the cause of the problem:

We’re currently experiencing some site issues causing Facebook to be slow or unavailable for some users. We are working to resolve this issue as quickly as possible.

The downtime also affected the many sites that incorporate Facebook’s “Like” buttons and the Facebook Connect service. Many Web sites bore empty white boxes or error messages where Facebook’s content should be.

Facebook’s developer Web site remained up and noted that the company was experiencing problems with its application programming interface, which outside programmers and sites use to interact with Facebook. A statement on the site said:

Current Status: API Latency Issues

We are currently experiencing latency issues with the API, and we are actively investigating. We will provide an update when either the issue is resolved or we have an ETA for resolution.

για την ανακοίνωση!

[Boton]

Μπράβο στο forum για την τάχιστη ενημέρωση...Άντε να δούμε τί θα γίνει...

[arial]

Ανοιγει κανονικα πλεον η σελιδα.

[tzelen]

Άντε μπράβο, γιατί μείναμε χωρίς FB τόση ώρα και μας έπιασε σύγκρυο /sarcasm mode off

[Hetfield]

Ακομα προβληματα εχει παντως. Απελπιστικα αργο και αργει να ανοιξει. Κι αυτο συμβαινει ωρες πριν το downtime.

[ntelisas]

τα καλα νέα είναι πως πλέον το fb έγινε mirror σε akamai.net !!!!

φορτώνουν όλα σφαίραααα! !!!

>tracert www.facebook.com

Tracing route to a1030.g.akamai.net [193.92.121.200]
over a maximum of 30 hops:

1 30 ms 99 ms 99 ms 192.168.1.254
2 6 ms 5 ms 5 ms bbras-llu-kln-13L0.forthnet.gr [194.219.231.36]

3 6 ms 6 ms 5 ms core-kln-01-Gi6-0-0.forthnet.gr [62.1.37.129]
4 7 ms 6 ms 6 ms core-kln-05.forthnet.gr [62.1.37.66]
5 6 ms 5 ms 5 ms 193.92.121.200

Trace complete.

>ping www.facebook.com

Pinging a1030.g.akamai.net [193.92.121.207] with 32 bytes of data:
Reply from 193.92.121.207: bytes=32 time=6ms TTL=60
Reply from 193.92.121.207: bytes=32 time=4ms TTL=60
Reply from 193.92.121.207: bytes=32 time=5ms TTL=60
Reply from 193.92.121.207: bytes=32 time=5ms TTL=60

Ping statistics for 193.92.121.207:
Packets: Sent = 4, Received = 4, Lost = 0 (0% loss),
Approximate round trip times in milli-seconds:
Minimum = 4ms, Maximum = 6ms, Average = 5ms


Mήπως για αυτό ήταν down???

[Caret]

Για 1 ώρα και κάτι η Γη σταμάτησε να κινείται.

[Andreaslar]

τα καλα νέα είναι πως πλέον το fb έγινε mirror σε akamai.net !!!!

φορτώνουν όλα σφαίραααα! !!!

>tracert www.facebook.com

Tracing route to a1030.g.akamai.net [193.92.121.200]
over a maximum of 30 hops:

1 30 ms 99 ms 99 ms 192.168.1.254
2 6 ms 5 ms 5 ms bbras-llu-kln-13L0.forthnet.gr [194.219.231.36]
3 6 ms 6 ms 5 ms core-kln-01-Gi6-0-0.forthnet.gr [62.1.37.129]
4 7 ms 6 ms 6 ms core-kln-05.forthnet.gr [62.1.37.66]
5 6 ms 5 ms 5 ms 193.92.121.200

Trace complete.

Ποιους DNS έχεις?
Εγώ με

193.92.3.11
193.92.150.3

Έχω το παρακάτω

Παρακολούθηση της διαδρομής προς: www.facebook.com [69.63.190.14]
με μέγιστο πλήθος αναπηδήσεων 30:

1 64 ms 100 ms 99 ms 192.168.1.254
2 18 ms 38 ms 38 ms bbras-llu-kln-13L0.forthnet.gr [194.219.231.36]
3 50 ms 17 ms 49 ms core-kln-01-Gi6-0-0.forthnet.gr [62.1.37.129]
4 73 ms 80 ms 74 ms 195.16.161.97
5 84 ms 143 ms 75 ms vlan99.csw4.Frankfurt1.Level3.net [4.68.23.254]
6 97 ms 75 ms 98 ms ae-92-92.ebr2.Frankfurt1.Level3.net [4.69.140.29]
7 176 ms 194 ms 189 ms ae-43-43.ebr2.Washington1.Level3.net [4.69.137.58]
8 191 ms 164 ms 195 ms ae-82-82.csw3.Washington1.Level3.net [4.69.134.154]
9 165 ms 211 ms 201 ms ae-3-89.edge3.Washington4.Level3.net [4.68.17.149]
10 162 ms 198 ms 209 ms FACEBOOK-IN.edge3.Washington4.Level3.net [4.53.116.6]
11 163 ms 184 ms 205 ms ae2.bb01.iad2.tfbnw.net [204.15.20.88]
12 209 ms 215 ms 202 ms ae0.dr03.ash2.tfbnw.net [204.15.20.35]
13 166 ms 166 ms 161 ms po1019.csw02a.ash2.tfbnw.net.77.119.74.in-addr.arpa [74.119.77.45]
14 163 ms 162 ms 161 ms www-11-02-ash2.facebook.com [69.63.190.14]

Η παρακολούθηση ολοκληρώθηκε.

[button]

καλα να παθει !!

[Yonah]

καλα να παθει !!

Πω πω μίσος. Ούτε το λάστιχο να σου έσκαγε

Εγώ πάντως δεν παρατήρισα κάποια διαφορά στην ταχύτητα, πέρα απο μια δυο φορές που προσπάθησα να μπώ και ήταν down.

[Zus]

τα καλα νέα είναι πως πλέον το fb έγινε mirror σε akamai.net !!!!

φορτώνουν όλα σφαίραααα! !!!

>tracert www.facebook.com

Tracing route to a1030.g.akamai.net [193.92.121.200]
over a maximum of 30 hops:

1 30 ms 99 ms 99 ms 192.168.1.254
2 6 ms 5 ms 5 ms bbras-llu-kln-13L0.forthnet.gr [194.219.231.36]

3 6 ms 6 ms 5 ms core-kln-01-Gi6-0-0.forthnet.gr [62.1.37.129]
4 7 ms 6 ms 6 ms core-kln-05.forthnet.gr [62.1.37.66]
5 6 ms 5 ms 5 ms 193.92.121.200

Trace complete.

>ping www.facebook.com

Pinging a1030.g.akamai.net [193.92.121.207] with 32 bytes of data:
Reply from 193.92.121.207: bytes=32 time=6ms TTL=60
Reply from 193.92.121.207: bytes=32 time=4ms TTL=60
Reply from 193.92.121.207: bytes=32 time=5ms TTL=60
Reply from 193.92.121.207: bytes=32 time=5ms TTL=60

Ping statistics for 193.92.121.207:
Packets: Sent = 4, Received = 4, Lost = 0 (0% loss),
Approximate round trip times in milli-seconds:
Minimum = 4ms, Maximum = 6ms, Average = 5ms


Mήπως για αυτό ήταν down???

Εδώ ακόμα ~180

[sapnade]

Για δείτε λίγο εδώ == > http://geotool.flagfox.net/?ip=212.2...w.facebook.com

Ειναι στην Γερμανία με πάροχο τον ΟΤΕ (DT μάλλον) !!!

[aiolos.01]

Κρίμα, δεν ήταν μόνιμο το downtime...