[grnog] vodafone

[Faidon Liambotis]

Δημήτρη κ.α.,

* Η κουλτούρα του "blameless postmortem" δεν προϋποθέτει ή απαιτεί και
  δημοσιοποίηση αυτού στο κοινό. Δεν ξέρω τι κουλτούρα έχουν οι
  μηχανικοί στη Vodafone, αλλά ας μην υποθέτουμε ότι δεν έχουν κάνει τα
  follow ups τους εσωτερικά.

* Τα δημόσια postmortems σε μεγάλους οργανισμούς (και δη εισηγμένων
  πολυεθνικών οργανισμούς με valuation δισεκατομμυρίων) είναι πρακτικά
  ανήκουστα. Υπάρχουν πολλές παράμετροι που μπορεί να εμποδίζουν κάτι
  τέτοιο. Αυτά μπορεί να είναι τόσο πρακτικοί λόγοι (= για να καταλάβεις
  το postmortem πρέπει να μπορείς να καταλάβεις την αρχιτεκτονική) όσο
  και λόγοι πολιτικής (ρυθμιστικά, ασφαλείας, προσωπικών δεδομένων,
  κτλ.).
  
  Δουλεύω σε μη κερδοσκοπικό οργανισμό τάξεις μεγέθους μικρότερο από τη
  Vodafone, με το "transparency" στα core values και δημόσιο
  documentation, και ακόμη και σε εμάς είναι μερικές φορές δύσκολο να
  δώσουμε πλήρη στοιχεία για όλα μας τα incidents.
  
* Τα περί «πολιτισμικών» και «Ελλάδας» (διάβαζε: Ελλαδίτσας) νομίζω
  είναι άστοχα. Δεν έχω δει κανέναν άλλο ISP τέτοιου μεγέθους να κάνει
  δημόσιο postmortem για outage στο IP δίκτυο τους σε καμία χώρα στον
  κόσμο. Η ίδια η Vodafone κάνει operate σε 25 χώρες, και αμφιβάλλω ότι
  το branch της Ελλάδας είναι η εξαίρεση.

* Τέλος, ένα σχόλιο όσον αφορά τον ανθρώπινο παράγοντα: κάποιοι
  συνάδελφοι μας, πιθανώς παρόντες και σε αυτή εδώ τη λίστα, πέρναγαν
  δύσκολα τις τελευταίες ημέρες. Χωρίς να έχω εσωτερική πληροφόρηση,
  φαντάζομαι ημέρες με πίεση, άγχος, υπερωρίες και πιθανώς ξενύχτια.
  
  Το να εμφανιζόμαστε από αυτήν εδώ τη λίστα, γράφοντας από τον καναπέ
  του σπιτιού μας, κάνοντας υψηλή κριτική και αναφέροντας φράσεις όπως
  «επικό αρχιτεκτονικό λάθος» την ίδια ώρα που αυτοί οι άνθρωποι
  τρέχουν, είναι αντισυναδελφικό και ανάλγητο.
  
  Το όλο νοήμα του GRNOG είναι να είμαστε μια κοινότητα, να μαθαίνουμε ο
  ένας από τον άλλο, να βοηθάμε και είμαστε εδώ ο ένας για τον άλλο.  Με
  όλο το σεβασμό, αλλά κατά την άποψη μου τέτοια μηνύματα δεν έχουν θέση
  εδώ, και δη την ώρα του συμβάντος ή σε περιόδους κρίσης.

Φ.

On Wed, Feb 05, 2020 at 03:30:19PM +0000, Lasithiotakis, Myron wrote:
> Κάλησπερα,
> 
> Νομίζω το πήγες ενα βήμα μπροστά :)
> 
> Σε πρώτη φάση πρέπει η πληροφορία να αρχίσει να μοιράζεται εντός της εταιρείας/παρόχου 
> και μετά να συζητήσουμε για τη δημοσιοποίησή της.
> 
> H blameless κουλτούρα συνήθως εφαρμόζεται σε επίπεδο μηχανικών (από τη δική μου πείρα), 
> αλλά νομίζω δεν υφίσταται μεταξύ managers.
> 
> Μύρωνας
> 
> ________________________________________
> From: Dimitris Kalogeras <D.Kalogeras at noc.ntua.gr>
> Sent: 05 February 2020 12:46
> To: Nikos Leontsinis
> Cc: Lasithiotakis, Myron; Andreas Polyrakis; members at grnog.gr
> Subject: Re: [grnog] vodafone
> 
> Καλημέρα σε όλους,,
> 
> με αφορμή αυτό το περιστατικό, το οποίο δεν ξέρουμε ακόμη που οφείλεται,
> θα ήθελα να θίξω κάποια,
> ας το πούμε πολιτισμικά, θέματα αντιμετώπισης περιστατικών βλαβών και να
> τα συγκρίνουμε με αυτά που
> βλέπουμε /μαθαινουμε από τα αντίστοιχα στο εξωτερικό.
> 
> Πολλές φορές στην Ελλάδα ΓΙΑ ΟΛΟΥΣ τους παρόχους (ΕΜΠΟΡΙΚΟΥΣ και ΜΗ)οταν
> συμβαίνει ένα αντίστοιχο περιστατικό :
> 
> α) δεν δίνεται μια ρεαλιστική εξήγηση για το τι έγινε
> β) ανάγεται στην κακή στιγμή/τύχη ( και όχι π.χ. σε SPOF, επικό
> αρχιτεκτονικό λάθος)
> γ) δεν γίνεται ένα είδος αποτίμησης του σχεδίου λειτουργίας, ώστε εάν
> ξανασυμβεί
> το ΙΔΙΟ γεγονός να μην έχει τις ίδιες επιπτώσεις
> 
> Είναι αντιληπτό οτι όταν δημοσιοποιούνται τα παραπάνω κάθε μηχανικός
> λειτουργίας
> (SRE) μπορει να ελέγχει εάν εμπίπτει στα σενάρια ασφαλούς λειτουργίας
> της υποδομής που λειτουργεί και
>   εάν χρειάζεται προληπτικές διορθωτικές κινήσεις.. κάτι σαν μελέτη
> αντικτύπου( με όρους ΑΔΑΕ/ΑΠΔΠΧ)
>   που χρήζει επικαιροποίησης.
> 
> Χαιρετισμούς,
> Δημήτρης
> 
> 
> 
> Στις 2020-02-04 21:52, Nikos Leontsinis έγραψε:
> > Seems like an epic design failure…
> >
> > From: grnog-members <grnog-members-bounces at nogalliance.org> On Behalf
> > Of Lasithiotakis, Myron
> > Sent: Tuesday, February 4, 2020 6:52 PM
> > To: Andreas Polyrakis <apolyr at gmail.com>; members at grnog.gr
> > Subject: [EXTERNAL] Re: [grnog] vodafone
> >
> > Εντυπωσιακό αν σκεφτεί κάποιος ότι
> > πριν 15 χρόνια μια βλάβη στο IP core ενός
> > παρόχου επηρεάζε κατά βάση μερικές
> > χιλιάδες οικιακούς πελάτες - χρήστες
> > του ίντερνετ, ενώ σήμερα μπορεί να
> > προκαλέσει μαζικές διακοπές σε σχεδόν
> > όλες τις προσφερόμενες υπηρεσίες ενός
> > σύγχρονου παρόχου (σταθερή, κινητή,
> > internet, TV) σε οικιακούς και μεγάλους
> > επιχειρησιακους πελάτες.
> >
> > Sent from my Samsung Galaxy smartphone.
> >
> > -------- Original message --------
> >
> > From: Andreas Polyrakis <apolyr at gmail.com>
> >
> > Date: 04/02/2020 16:52 (GMT+02:00)
> >
> > To: members at grnog.gr
> >
> > Subject: [grnog] vodafone
> >
> > υπάρχει κάποιο γενικευμένο πρόβλημα
> > με τη vodafone? Σε διάφορες περιοχές
> > φαίνεται να μην παίζουν κινητά (και
> > σταθερά ίσως)... και το vodafone.gr
> > δεν απαντάει. Εχω την εντύπωση πως
> > υπάρχει και κάποιο θέμα στο IP αλλά
> > δεν είμαι σίγουρος. This email is from Equinix (EMEA)
> > B.V. or one of its associated companies in the territory from where
> > this email has been sent. This email, and any files transmitted with
> > it, contains information which is confidential, is solely for the use
> > of the intended recipient and may be legally privileged. If you have
> > received this email in error, please notify the sender and delete this
> > email immediately. Equinix (EMEA) B.V.. Registered Office: Amstelplein
> > 1, 1096 HA Amsterdam, The Netherlands. Registered in The Netherlands
> > No. 57577889.
> 
> --
> Χαιρετισμούς,
> 
> Δημήτρης Καλογεράς
> Ερευνητής Β' ΕΠΙΣΕΥ
> 
> --
> Dimitrios K. Kalogeras
> 
> Electrical Engineer Ph.D.
> Network Engineer
> NTUA/ICCS
>   _____________________________________
>   skype: aweboy
>   voice: +30-210-772 1863
>   fax: +30-210-772 1866
>