Datum a čas: 2018-12-18 01:40 CET
Očekavaná délka: 30 minut
Oznámení se týká serverů: node14.prg
Typ výpadku: reset
Důvod: Kernel panic
Výpadek řeší: Pavel Šnajdr, Richard Marko
ENGLISH:
Date and time: 2018-12-18 01:40 CET
Expected duration: 30 minutes
Affected systems: node14.prg
Outage type: reset
Reason: Kernel panic
Handled by: Pavel Šnajdr, Richard Marko
-----BEGIN BASE64 ENCODED PARSEABLE JSON-----
eyJpZCI6NDg1LCJwbGFubmVkIjpmYWxzZSwiYmVnaW5zX2F0IjoiMjAxOC0x
Mi0xOFQwMTo0MDowMCswMTowMCIsImR1cmF0aW9uIjozMCwidHlwZSI6InJl
c2V0IiwiZW50aXRpZXMiOlt7Im5hbWUiOiJOb2RlIiwiaWQiOjExNSwibGFi
ZWwiOiJub2RlMTQucHJnIn1dLCJoYW5kbGVycyI6WyJQYXZlbCDFoG5hamRy
IiwiUmljaGFyZCBNYXJrbyJdLCJ0cmFuc2xhdGlvbnMiOnsiZW4iOnsic3Vt
bWFyeSI6Iktlcm5lbCBwYW5pYyIsImRlc2NyaXB0aW9uIjpudWxsfSwiY3Mi
Onsic3VtbWFyeSI6Iktlcm5lbCBwYW5pYyIsImRlc2NyaXB0aW9uIjpudWxs
fX19
-----END BASE64 ENCODED PARSEABLE JSON-----
Datum a čas: 2018-11-30 04:00 CET
Očekavaná délka: 120 minut
Oznámení se týká serverů: vpsadmin.prg, node2.prg, node3.prg, node4.prg, node5.prg, node6.prg, node7.prg, node8.prg, node9.prg, node10.prg, node11.prg, node12.prg, node13.prg, node14.prg, node15.prg, node16.prg, node17.prg, node18.prg, backuper.prg, nasbox.prg, node1.pgnd, node2.pgnd
Typ výpadku: network
Důvod: Sitovani nedostupne: problem na L2
Výpadek řeší: Pavel Šnajdr, Richard Marko
V Praze se rozlamala interakce 4 switchu proti sobe, vypada to na cosi s LLDP; museli jsme jako drasticke prozatimni reseni shodit pulku patere, aby se slo pres jednu cestu na jisto, misto dvou volitelnych (kde ani jedna se nevybrala a nefungovala).
Dneska v noci to budu bliz zkoumat; je docela mozne, ze prehodime na BGP/10GE i ne-vpsAdminOS produkci, tohle se neda takhle nechavat, kdyby to melo blbnout dal...
ENGLISH:
Date and time: 2018-11-30 04:00 CET
Expected duration: 120 minutes
Affected systems: vpsadmin.prg, node2.prg, node3.prg, node4.prg, node5.prg, node6.prg, node7.prg, node8.prg, node9.prg, node10.prg, node11.prg, node12.prg, node13.prg, node14.prg, node15.prg, node16.prg, node17.prg, node18.prg, backuper.prg, nasbox.prg, node1.pgnd, node2.pgnd
Outage type: network
Reason: Network downtime: L2 issues
Handled by: Pavel Šnajdr, Richard Marko
We've experienced issues with L2 networking, most likely it was some unexpected Cisco "magic".
Currently we're running with half of the gigabit switches down to prevent further LLDP mess; going to investigate further tonight.
-----BEGIN BASE64 ENCODED PARSEABLE JSON-----
eyJpZCI6NDgzLCJwbGFubmVkIjpmYWxzZSwiYmVnaW5zX2F0IjoiMjAxOC0x
MS0zMFQwNDowMDowMCswMTowMCIsImR1cmF0aW9uIjoxMjAsInR5cGUiOiJu
ZXR3b3JrIiwiZW50aXRpZXMiOlt7Im5hbWUiOiJOb2RlIiwiaWQiOjUsImxh
YmVsIjoidnBzYWRtaW4ucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjoxMDIs
ImxhYmVsIjoibm9kZTIucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjoxMDMs
ImxhYmVsIjoibm9kZTMucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjoxMDQs
ImxhYmVsIjoibm9kZTQucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjoxMDUs
ImxhYmVsIjoibm9kZTUucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjoxMDYs
ImxhYmVsIjoibm9kZTYucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjoxMDgs
ImxhYmVsIjoibm9kZTcucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjoxMDks
ImxhYmVsIjoibm9kZTgucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjoxMTAs
ImxhYmVsIjoibm9kZTkucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjoxMTEs
ImxhYmVsIjoibm9kZTEwLnByZyJ9LHsibmFtZSI6Ik5vZGUiLCJpZCI6MTEy
LCJsYWJlbCI6Im5vZGUxMS5wcmcifSx7Im5hbWUiOiJOb2RlIiwiaWQiOjEx
MywibGFiZWwiOiJub2RlMTIucHJnIn0seyJuYW1lIjoiTm9kZSIsImlkIjox
MTQsImxhYmVsIjoibm9kZTEzLnByZyJ9LHsibmFtZSI6Ik5vZGUiLCJpZCI6
MTE1LCJsYWJlbCI6Im5vZGUxNC5wcmcifSx7Im5hbWUiOiJOb2RlIiwiaWQi
OjExNiwibGFiZWwiOiJub2RlMTUucHJnIn0seyJuYW1lIjoiTm9kZSIsImlk
IjoxMTcsImxhYmVsIjoibm9kZTE2LnByZyJ9LHsibmFtZSI6Ik5vZGUiLCJp
ZCI6MTE4LCJsYWJlbCI6Im5vZGUxNy5wcmcifSx7Im5hbWUiOiJOb2RlIiwi
aWQiOjExOSwibGFiZWwiOiJub2RlMTgucHJnIn0seyJuYW1lIjoiTm9kZSIs
ImlkIjoxNjAsImxhYmVsIjoiYmFja3VwZXIucHJnIn0seyJuYW1lIjoiTm9k
ZSIsImlkIjoxNzAsImxhYmVsIjoibmFzYm94LnByZyJ9LHsibmFtZSI6Ik5v
ZGUiLCJpZCI6MzAwLCJsYWJlbCI6Im5vZGUxLnBnbmQifSx7Im5hbWUiOiJO
b2RlIiwiaWQiOjMwMSwibGFiZWwiOiJub2RlMi5wZ25kIn1dLCJoYW5kbGVy
cyI6WyJQYXZlbCDFoG5hamRyIiwiUmljaGFyZCBNYXJrbyJdLCJ0cmFuc2xh
dGlvbnMiOnsiZW4iOnsic3VtbWFyeSI6Ik5ldHdvcmsgZG93bnRpbWU6IEwy
IGlzc3VlcyIsImRlc2NyaXB0aW9uIjoiV2UndmUgZXhwZXJpZW5jZWQgaXNz
dWVzIHdpdGggTDIgbmV0d29ya2luZywgbW9zdCBsaWtlbHkgaXQgd2FzIHNv
bWUgdW5leHBlY3RlZCBDaXNjbyBcIm1hZ2ljXCIuXHJcblxyXG5DdXJyZW50
bHkgd2UncmUgcnVubmluZyB3aXRoIGhhbGYgb2YgdGhlIGdpZ2FiaXQgc3dp
dGNoZXMgZG93biB0byBwcmV2ZW50IGZ1cnRoZXIgTExEUCBtZXNzOyBnb2lu
ZyB0byBpbnZlc3RpZ2F0ZSBmdXJ0aGVyIHRvbmlnaHQuIn0sImNzIjp7InN1
bW1hcnkiOiJTaXRvdmFuaSBuZWRvc3R1cG5lOiBwcm9ibGVtIG5hIEwyIiwi
ZGVzY3JpcHRpb24iOiJWIFByYXplIHNlIHJvemxhbWFsYSBpbnRlcmFrY2Ug
NCBzd2l0Y2h1IHByb3RpIHNvYmUsIHZ5cGFkYSB0byBuYSBjb3NpIHMgTExE
UDsgbXVzZWxpIGpzbWUgamFrbyBkcmFzdGlja2UgcHJvemF0aW1uaSByZXNl
bmkgc2hvZGl0IHB1bGt1IHBhdGVyZSwgYWJ5IHNlIHNsbyBwcmVzIGplZG51
IGNlc3R1IG5hIGppc3RvLCBtaXN0byBkdm91IHZvbGl0ZWxueWNoIChrZGUg
YW5pIGplZG5hIHNlIG5ldnlicmFsYSBhIG5lZnVuZ292YWxhKS5cclxuXHJc
bkRuZXNrYSB2IG5vY2kgdG8gYnVkdSBibGl6IHprb3VtYXQ7IGplIGRvY2Vs
YSBtb3puZSwgemUgcHJlaG9kaW1lIG5hIEJHUC8xMEdFIGkgbmUtdnBzQWRt
aW5PUyBwcm9kdWtjaSwgdG9obGUgc2UgbmVkYSB0YWtobGUgbmVjaGF2YXQs
IGtkeWJ5IHRvIG1lbG8gYmxibm91dCBkYWwuLi4ifX19
-----END BASE64 ENCODED PARSEABLE JSON-----
