Outage-list August 2016

outage-list@lists.vpsfree.cz

3 participants
5 discussions

Neplanovany vypadek / Unplanned outage - node3.brq - 2016-08-26 03:58
by podpora＠vpsFree.cz 26 Aug '16

26 Aug '16

Čas a datum výpadku: 2016-08-26 03:58 Očekavaná délka: 40 minut Výpadek se týká serverů: node3.brq Důvod: Kernel lock up Detailnější popis: Soft CPU lockup Výpadek vykonává: ENGLISH: Date and time: 2016-08-26 03:58 Estimated duration: 40 minutes What's affected: node3.brq Reason: Kernel lock up Performed by: -----BEGIN BASE64 ENCODED PARSEABLE JSON----- eyJ0eXBlX2NzIjoiTmVwbGFub3ZhbnkiLCJ0eXBlX2VuIjoiVW5wbGFubmVkIiwiZGF0ZSI6IjIw MTYtMDgtMjYgMDM6NTgiLCJkdXJhdGlvbiI6IjQwIiwic2VydmVycyI6WyJub2RlMy5icnEiXSwi cmVhc29uX2NzIjoiS2VybmVsIGxvY2sgdXAiLCJkZXNjcmlwdGlvbl9jcyI6IlNvZnQgQ1BVIGxv Y2t1cCIsInJlYXNvbl9lbiI6Iktlcm5lbCBsb2NrIHVwIiwicGVyZm9ybWVkX2J5IjoiIiwicHJv Z3Jlc3NfdXBkYXRlcyI6IiJ9 -----END BASE64 ENCODED PARSEABLE JSON-----

1 0

NAS read-only, poskozeny filesystem
by Pavel Snajdr 12 Aug '16

12 Aug '16

Ahojte, na NASu doslo k poskozeni jednoho z raid-z VDEVu na ZFS poolu s daty. Stalo se to pri obnovovani toho vdevu (neco jako sub-raid-pole) po umrti jednoho disku, kdy dalsi disk ze stejneho vdevu zacal hlasit chyby pri cteni. Evidentne od posledniho scrubu (cca mesic zpatky) na nem vznikly neopravitelne oblasti, ktere nejdou precist. Zatim vime o 58 neobnovitelnych souborech, je to ve stavu, kdy ten disk dava nejaka data, cili to nevypada ze by bylo po datech, ale vic se dozvime, jakmile dobehne sync z nasboxu na backuper. Prepnul jsem nasbox do readonly rezimu, aby se predeslo dalsimu poskozovani dat a mezi tim se data syncuji na backuper (aktualne to jede okolo 150MB/s a je to 22TB dat). Potom, co se data dosyncuji, znovu vyrobim pool na nasboxu s bezpecnejsi konfiguraci, aby se podobne situaci predeslo a pool vydrzel umrti vic disku ve vsech pripadech. Tem, co se jich poskozena data tykaji, napiseme behem dne mail se seznamem poskozenych souboru. Budu dal updatovat o prubehu, jakmile bude dalsi progress. /snajpa

2 9

Neplanovany vypadek / Unplanned outage - node7.prg, node10.prg - 2016-08-09 05:14
by podpora＠vpsFree.cz 09 Aug '16

09 Aug '16

Čas a datum výpadku: 2016-08-09 05:14 Očekavaná délka: 40 minut Výpadek se týká serverů: node7.prg, node10.prg Důvod: Oprava ZFS Detailnější popis: Nasadil jsem verzi, ktera by nemela spoustet konstantni reclaim pameti => nemela by se vylivat ARC. Výpadek vykonává: Pavel Snajdr ENGLISH: Date and time: 2016-08-09 05:14 Estimated duration: 40 minutes What's affected: node7.prg, node10.prg Reason: ZFS fix Performed by: Pavel Snajdr -----BEGIN BASE64 ENCODED PARSEABLE JSON----- eyJ0eXBlX2NzIjoiTmVwbGFub3ZhbnkiLCJ0eXBlX2VuIjoiVW5wbGFubmVkIiwiZGF0ZSI6IjIw MTYtMDgtMDkgMDU6MTQiLCJkdXJhdGlvbiI6IjQwIiwic2VydmVycyI6WyJub2RlNy5wcmciLCJu b2RlMTAucHJnIl0sInJlYXNvbl9jcyI6Ik9wcmF2YSBaRlMiLCJkZXNjcmlwdGlvbl9jcyI6Ik5h c2FkaWwganNlbSB2ZXJ6aSwga3RlcmEgYnkgbmVtZWxhIHNwb3VzdGV0IGtvbnN0YW50bmkgcmVj bGFpbSBwYW1ldGkgPT4gbmVtZWxhIGJ5IHNlIHZ5bGl2YXQgQVJDLiIsInJlYXNvbl9lbiI6IlpG UyBmaXgiLCJwZXJmb3JtZWRfYnkiOiJQYXZlbCBTbmFqZHIiLCJwcm9ncmVzc191cGRhdGVzIjoi In0= -----END BASE64 ENCODED PARSEABLE JSON-----

1 0

Neplanovany vypadek / Unplanned outage - node7.prg - 2016-08-08 21:02
by podpora＠vpsFree.cz 08 Aug '16

08 Aug '16

Čas a datum výpadku: 2016-08-08 21:02 Očekavaná délka: 30 minut Výpadek se týká serverů: node7.prg Důvod: Kernel lockup Detailnější popis: Výpadek vykonává: Pavel Snajdr ENGLISH: Date and time: 2016-08-08 21:02 Estimated duration: 30 minutes What's affected: node7.prg Reason: Kernel lockup Performed by: Pavel Snajdr -----BEGIN BASE64 ENCODED PARSEABLE JSON----- eyJ0eXBlX2NzIjoiTmVwbGFub3ZhbnkiLCJ0eXBlX2VuIjoiVW5wbGFubmVkIiwiZGF0ZSI6IjIw MTYtMDgtMDggMjE6MDIiLCJkdXJhdGlvbiI6IjMwIiwic2VydmVycyI6WyJub2RlNy5wcmciXSwi cmVhc29uX2NzIjoiS2VybmVsIGxvY2t1cCIsImRlc2NyaXB0aW9uX2NzIjoiIiwicmVhc29uX2Vu IjoiS2VybmVsIGxvY2t1cCIsInBlcmZvcm1lZF9ieSI6IlBhdmVsIFNuYWpkciIsInByb2dyZXNz X3VwZGF0ZXMiOiIifQ== -----END BASE64 ENCODED PARSEABLE JSON-----

1 0

Neplanovany vypadek / Unplanned outage - node6.prg - 2016-08-01 21:12
by podpora＠vpsFree.cz 01 Aug '16

01 Aug '16

Čas a datum výpadku: 2016-08-01 21:12 Očekavaná délka: 30 minut Výpadek se týká serverů: node6.prg Důvod: Kernel lockup Detailnější popis: Výpadek vykonává: Pavel Snajdr, Richard Marko ENGLISH: Date and time: 2016-08-01 21:12 Estimated duration: 30 minutes What's affected: node6.prg Reason: Kernel lockup Performed by: Pavel Snajdr, Richard Marko -----BEGIN BASE64 ENCODED PARSEABLE JSON----- eyJ0eXBlX2NzIjoiTmVwbGFub3ZhbnkiLCJ0eXBlX2VuIjoiVW5wbGFubmVkIiwiZGF0ZSI6IjIw MTYtMDgtMDEgMjE6MTIiLCJkdXJhdGlvbiI6IjMwIiwic2VydmVycyI6WyJub2RlNi5wcmciXSwi cmVhc29uX2NzIjoiS2VybmVsIGxvY2t1cCIsImRlc2NyaXB0aW9uX2NzIjoiIiwicmVhc29uX2Vu IjoiS2VybmVsIGxvY2t1cCIsInBlcmZvcm1lZF9ieSI6IlBhdmVsIFNuYWpkciwgUmljaGFyZCBN YXJrbyIsInByb2dyZXNzX3VwZGF0ZXMiOiIifQ== -----END BASE64 ENCODED PARSEABLE JSON-----

1 0

2025

2024

2023

2022

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

Outage-list August 2016