Datum a čas: 2020-07-24 12:23 CEST
Očekavaná délka: 45 minut
Oznámení se týká serverů: node1.pgnd
Typ výpadku: restart
Důvod: Update jadra
Výpadek řeší: Pavel Šnajdr
Na verzi 5.7.10
ENGLISH:
Date and time: 2020-07-24 12:23 CEST
Expected duration: 45 minutes
Affected systems: node1.pgnd
Outage type: restart
Reason: Kernel update
Handled by: Pavel Šnajdr
Update to 5.7.10
-----BEGIN BASE64 ENCODED PARSEABLE JSON-----
eyJpZCI6NjczLCJwbGFubmVkIjpmYWxzZSwiYmVnaW5zX2F0IjoiMjAyMC0w
Ny0yNFQxMjoyMzowMCswMjowMCIsImR1cmF0aW9uIjo0NSwidHlwZSI6InJl
c3RhcnQiLCJlbnRpdGllcyI6W3sibmFtZSI6Ik5vZGUiLCJpZCI6MzAwLCJs
YWJlbCI6Im5vZGUxLnBnbmQifV0sImhhbmRsZXJzIjpbIlBhdmVsIMWgbmFq
ZHIiXSwidHJhbnNsYXRpb25zIjp7ImVuIjp7InN1bW1hcnkiOiJLZXJuZWwg
dXBkYXRlIiwiZGVzY3JpcHRpb24iOiJVcGRhdGUgdG8gNS43LjEwXHJcbiJ9
LCJjcyI6eyJzdW1tYXJ5IjoiVXBkYXRlIGphZHJhIiwiZGVzY3JpcHRpb24i
OiJOYSB2ZXJ6aSA1LjcuMTAifX19
-----END BASE64 ENCODED PARSEABLE JSON-----
Datum a čas: 2020-07-23 19:05 CEST
Očekavaná délka: 45 minut
Oznámení se týká serverů: node2.stg
Typ výpadku: restart
Důvod: Update jadra
Výpadek řeší: Pavel Šnajdr
https://github.com/vpsfreecz/linux/commit/a480eb15dc1a94acf3ccab8687c1dacb1…
ZFS zatim nepodporuje splice, overlayfs to spatne detekovalo.
ENGLISH:
Date and time: 2020-07-23 19:05 CEST
Expected duration: 45 minutes
Affected systems: node2.stg
Outage type: restart
Reason: Kernel update
Handled by: Pavel Šnajdr
https://github.com/vpsfreecz/linux/commit/a480eb15dc1a94acf3ccab8687c1dacb1…
ZFS doesn't support splice yet, ovl is being a bit insensitive to that.
-----BEGIN BASE64 ENCODED PARSEABLE JSON-----
eyJpZCI6NjcyLCJwbGFubmVkIjpmYWxzZSwiYmVnaW5zX2F0IjoiMjAyMC0w
Ny0yM1QxOTowNTowMCswMjowMCIsImR1cmF0aW9uIjo0NSwidHlwZSI6InJl
c3RhcnQiLCJlbnRpdGllcyI6W3sibmFtZSI6Ik5vZGUiLCJpZCI6NDAxLCJs
YWJlbCI6Im5vZGUyLnN0ZyJ9XSwiaGFuZGxlcnMiOlsiUGF2ZWwgxaBuYWpk
ciJdLCJ0cmFuc2xhdGlvbnMiOnsiZW4iOnsic3VtbWFyeSI6Iktlcm5lbCB1
cGRhdGUiLCJkZXNjcmlwdGlvbiI6Imh0dHBzOi8vZ2l0aHViLmNvbS92cHNm
cmVlY3ovbGludXgvY29tbWl0L2E0ODBlYjE1ZGMxYTk0YWNmM2NjYWI4Njg3
YzFkYWNiMWJlOWRhMWRcclxuXHJcblpGUyBkb2Vzbid0IHN1cHBvcnQgc3Bs
aWNlIHlldCwgb3ZsIGlzIGJlaW5nIGEgYml0IGluc2Vuc2l0aXZlIHRvIHRo
YXQuIn0sImNzIjp7InN1bW1hcnkiOiJVcGRhdGUgamFkcmEiLCJkZXNjcmlw
dGlvbiI6Imh0dHBzOi8vZ2l0aHViLmNvbS92cHNmcmVlY3ovbGludXgvY29t
bWl0L2E0ODBlYjE1ZGMxYTk0YWNmM2NjYWI4Njg3YzFkYWNiMWJlOWRhMWRc
clxuXHJcblpGUyB6YXRpbSBuZXBvZHBvcnVqZSBzcGxpY2UsIG92ZXJsYXlm
cyB0byBzcGF0bmUgZGV0ZWtvdmFsby4ifX19
-----END BASE64 ENCODED PARSEABLE JSON-----
Datum a čas: 2020-07-22 20:45 CEST
Očekavaná délka: 0 minut
Oznámení se týká serverů: Praha
Typ výpadku: network
Důvod: nedostupnost Prahy kvůli ddou
Výpadek řeší: Pavel Šnajdr
Krátce před 21h došlo k útoku na členskou vps v praze která způsobovala výpadky ve dvouhodinovém okně. Nastavením RTBH jsme obnovili běžný provoz na síti. S DC v tuto chvíli řešíme nefunkční RTBH (které způsobilo delší okno výpadku).
ENGLISH:
Date and time: 2020-07-22 20:45 CEST
Expected duration: 0 minutes
Affected systems: Praha
Outage type: network
Reason: unavailability of prague due to ddos
Handled by: Pavel Šnajdr
Shortly before 9 pm happened an attack on a member's VPS in Prague, which caused outage in a two-hour window. By setting up RTBH, we have resumed regular traffic flow. We are currently working out with DC on a non-functional RTBH (which was the main reason for longer outage window).
-----BEGIN BASE64 ENCODED PARSEABLE JSON-----
eyJpZCI6NjcxLCJwbGFubmVkIjpmYWxzZSwiYmVnaW5zX2F0IjoiMjAyMC0w
Ny0yMlQyMDo0NTowMCswMjowMCIsImR1cmF0aW9uIjowLCJ0eXBlIjoibmV0
d29yayIsImVudGl0aWVzIjpbeyJuYW1lIjoiTG9jYXRpb24iLCJpZCI6Mywi
bGFiZWwiOiJQcmFoYSJ9XSwiaGFuZGxlcnMiOlsiUGF2ZWwgxaBuYWpkciJd
LCJ0cmFuc2xhdGlvbnMiOnsiZW4iOnsic3VtbWFyeSI6InVuYXZhaWxhYmls
aXR5IG9mIHByYWd1ZSBkdWUgdG8gZGRvcyIsImRlc2NyaXB0aW9uIjoiU2hv
cnRseSBiZWZvcmUgOSBwbSBoYXBwZW5lZCBhbiBhdHRhY2sgb24gYSBtZW1i
ZXIncyBWUFMgaW4gUHJhZ3VlLCB3aGljaCBjYXVzZWQgb3V0YWdlIGluIGEg
dHdvLWhvdXIgd2luZG93LiBCeSBzZXR0aW5nIHVwIFJUQkgsIHdlIGhhdmUg
cmVzdW1lZCByZWd1bGFyIHRyYWZmaWMgZmxvdy4gV2UgYXJlIGN1cnJlbnRs
eSB3b3JraW5nIG91dCB3aXRoIERDIG9uIGEgbm9uLWZ1bmN0aW9uYWwgUlRC
SCAod2hpY2ggd2FzIHRoZSBtYWluIHJlYXNvbiBmb3IgbG9uZ2VyIG91dGFn
ZSB3aW5kb3cpLiJ9LCJjcyI6eyJzdW1tYXJ5IjoibmVkb3N0dXBub3N0IFBy
YWh5IGt2xa9saSBkZG91IiwiZGVzY3JpcHRpb24iOiJLcsOhdGNlIHDFmWVk
IDIxaCBkb8WhbG8gayDDunRva3UgbmEgxI1sZW5za291IHZwcyB2IHByYXpl
IGt0ZXLDoSB6cMWvc29ib3ZhbGEgdsO9cGFka3kgdmUgZHZvdWhvZGlub3bD
qW0gb2tuxJsuIE5hc3RhdmVuw61tIFJUQkgganNtZSBvYm5vdmlsaSBixJvF
vm7DvSBwcm92b3ogbmEgc8OtdGkuIFMgREMgdiB0dXRvIGNodsOtbGkgxZll
xaHDrW1lIG5lZnVua8SNbsOtIFJUQkggKGt0ZXLDqSB6cMWvc29iaWxvIGRl
bMWhw60gb2tubyB2w71wYWRrdSkuIn19fQ==
-----END BASE64 ENCODED PARSEABLE JSON-----
Datum a čas: 2020-07-22 18:58 CEST
Očekavaná délka: 45 minut
Oznámení se týká serverů: node2.stg
Typ výpadku: restart
Důvod: Test noveho jadra
Výpadek řeší: Pavel Šnajdr
Linux 5.7.10 + ZFS s novym nastavovanim velikosti ARC od Delphixu
ENGLISH:
Date and time: 2020-07-22 18:58 CEST
Expected duration: 45 minutes
Affected systems: node2.stg
Outage type: restart
Reason: Testing new kernel
Handled by: Pavel Šnajdr
Linux 5.7.10 + ZFS with ARC shrinker changes from Delphix
-----BEGIN BASE64 ENCODED PARSEABLE JSON-----
eyJpZCI6NjcwLCJwbGFubmVkIjpmYWxzZSwiYmVnaW5zX2F0IjoiMjAyMC0w
Ny0yMlQxODo1ODowMCswMjowMCIsImR1cmF0aW9uIjo0NSwidHlwZSI6InJl
c3RhcnQiLCJlbnRpdGllcyI6W3sibmFtZSI6Ik5vZGUiLCJpZCI6NDAxLCJs
YWJlbCI6Im5vZGUyLnN0ZyJ9XSwiaGFuZGxlcnMiOlsiUGF2ZWwgxaBuYWpk
ciJdLCJ0cmFuc2xhdGlvbnMiOnsiZW4iOnsic3VtbWFyeSI6IlRlc3Rpbmcg
bmV3IGtlcm5lbCIsImRlc2NyaXB0aW9uIjoiTGludXggNS43LjEwICsgWkZT
IHdpdGggQVJDIHNocmlua2VyIGNoYW5nZXMgZnJvbSBEZWxwaGl4In0sImNz
Ijp7InN1bW1hcnkiOiJUZXN0IG5vdmVobyBqYWRyYSIsImRlc2NyaXB0aW9u
IjoiTGludXggNS43LjEwICsgWkZTIHMgbm92eW0gbmFzdGF2b3ZhbmltIHZl
bGlrb3N0aSBBUkMgb2QgRGVscGhpeHUifX19
-----END BASE64 ENCODED PARSEABLE JSON-----
Datum a čas: 2020-07-18 01:05 CEST
Očekavaná délka: 40 minut
Oznámení se týká serverů: node18.prg
Typ výpadku: maintenance
Důvod: výměna RAM
Výpadek řeší: Martin Myška
rychlá výměna poškozené RAM paměti
ENGLISH:
Date and time: 2020-07-18 01:05 CEST
Expected duration: 40 minutes
Affected systems: node18.prg
Outage type: maintenance
Reason: swap of RAM module
Handled by: Martin Myška
short maintenance due to failure of memory module
-----BEGIN BASE64 ENCODED PARSEABLE JSON-----
eyJpZCI6NjY5LCJwbGFubmVkIjpmYWxzZSwiYmVnaW5zX2F0IjoiMjAyMC0w
Ny0xOFQwMTowNTowMCswMjowMCIsImR1cmF0aW9uIjo0MCwidHlwZSI6Im1h
aW50ZW5hbmNlIiwiZW50aXRpZXMiOlt7Im5hbWUiOiJOb2RlIiwiaWQiOjEx
OSwibGFiZWwiOiJub2RlMTgucHJnIn1dLCJoYW5kbGVycyI6WyJNYXJ0aW4g
TXnFoWthIl0sInRyYW5zbGF0aW9ucyI6eyJlbiI6eyJzdW1tYXJ5Ijoic3dh
cCBvZiBSQU0gbW9kdWxlIiwiZGVzY3JpcHRpb24iOiJzaG9ydCBtYWludGVu
YW5jZSBkdWUgdG8gZmFpbHVyZSBvZiBtZW1vcnkgbW9kdWxlIn0sImNzIjp7
InN1bW1hcnkiOiJ2w71txJtuYSBSQU0iLCJkZXNjcmlwdGlvbiI6InJ5Y2hs
w6EgdsO9bcSbbmEgcG/FoWtvemVuw6kgUkFNIHBhbcSbdGkifX19
-----END BASE64 ENCODED PARSEABLE JSON-----