-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Caute, na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem. Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci). Node8 potom poradne prozkousim a hlavne preinstaluju od nuly. - -- S pozdravem Pavel Snajdr +421 948 816 186 | +420 720 107 791 | 110-010-956 CTO of Relbit | Predseda vpsFree.cz, o.s. | RHCE http://relbit.com | http://vpsfree.cz | https://www.redhat.com -----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJCiEMACgkQMBKdi9lkZ6qy4gD+M3FleVSWTGHomuD6fxHSkg7y 9gG6uHFoPX30MObBCgQA/iuKYO+VBzKgsqMNaJ91tNEGi0OHT4EPS8HbXvZBKqj/ =cLhz -----END PGP SIGNATURE-----
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD. No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji. /snajp On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJCjhcACgkQMBKdi9lkZ6o9jQEAlG+QLHgsDz6a7egETu+LzAgx TfDw5Ur3rsNDojClMlgA/jBX4jgvOchSexyLYAeI6Mvo7SYx9yW8DK6bquX66KYl =OhuR -----END PGP SIGNATURE-----
Jo, tohle je bohuzel znamy a i zdokumentovany chovani. Proto i pro sw zrcadleni dvou disku pouzivam RAID10. Navic RAID1 oproti RAID10 nedokaze pri sekvencnim cteni cist z obou disku naraz, coz RAID10 umi. -- Stanislav Petr On 25/09/13 09:17, Pavel Snajdr wrote:
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/
iF4EAREIAAYFAlJCjhcACgkQMBKdi9lkZ6o9jQEAlG+QLHgsDz6a7egETu+LzAgx TfDw5Ur3rsNDojClMlgA/jBX4jgvOchSexyLYAeI6Mvo7SYx9yW8DK6bquX66KYl =OhuR -----END PGP SIGNATURE----- _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 I by mi to prislo vtipny, ale spis je to smutny... to to sakra nemuzou udelat poradne? ... /snajpa On 09/25/2013 10:26 AM, Stanislav Petr wrote:
Jo, tohle je bohuzel znamy a i zdokumentovany chovani. Proto i pro sw zrcadleni dvou disku pouzivam RAID10. Navic RAID1 oproti RAID10 nedokaze pri sekvencnim cteni cist z obou disku naraz, coz RAID10 umi.
-- Stanislav Petr
On 25/09/13 09:17, Pavel Snajdr wrote: Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list -----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/
iF4EAREIAAYFAlJCqt8ACgkQMBKdi9lkZ6p+vgD/UboQRM6CHWcJHGxYK0axm5wo Ahsy+vxCidy1XCQiJQMA/1FMTwymQd+1rSY7Xokr/Lw18hhcW17xYijDLBG1Hc0W =9Iab -----END PGP SIGNATURE-----
K tomu ZFS: Ještě tak někdy před dvěma třema týdny (pardon, už si to nepamatuju) node6 zadrhávalo tak, že se mi PHP aplikace nemohla připojit k databázi a málem jsem se ani nenalogoval. Naštěstí to po čase přešlo. Nevím, jestli za to mohlo to ZFS nebo nějaký zblázněný virtuál, a jestli je to identifikovaný a už vyřešený problém (žádná zpráva o výpadku ten den nepřišla), ale doufám, že už se to nebude opakovat. Málem jsem už chtěl poprosit o přestěhování zpět na původní server - problémy (skoro) každý týden mi už přišly jako trochu moc... Pavel
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Kratka odpoved: vim, vyreseno workaroundem. Dlouha odpoved: Za urcity konstelace hvezd nam deadlockoval spl_system_task. Zaseknul se na tom, ze nemuze naalokovat pamet - tedy projevuje se to na serverech pod memory pressure. No a pak to vedlo k procesum, cekajicim na IO, protoze ty spl_system_tasky jsou tam v necem jako thread poolu, kam se prace rozdeluje round-robinem a kdyz dosla rada zrovna na ten deadlocknuty (pri vyssi zatezi, kdyz se nestihalo, coz se delo bezne, viz dalsi text), proste ta IO operace zustala viset. Jedinou pomoci byl reboot (nekdy dokonce jenom reset) toho serveru. Konkretne pri pokusu o serializaci dat a zfs send | ssh remote_node zfs receive se to stavalo celkem bezne. Takhle jsme chteli zalohovat, ze by se proste na nodu udelal snapshot VPS a data toho snapshotu se cele, jak jsou, vezmou a prenesou na zalohovaci server (backuper.prg). Takze jsme send/recv prestali delat a vratili jsme se k zalohovani rsyncem, dokud tuhle chybu neopravi. Jinak node6 ma na sobe aktualne asi vsechny VPS, ktere nejakym zpusobem delaji IO. Je totalne nejvytizenejsi ze vsech masin, co mame. Zkouska ohnem - az na takovou uroven, ze to ty disky misty nestihaji. Po tom, co doinstaluju node5 to trochu rozbalancuju. Na playground nody, ktere se ted nezalohuji, pujde ZFS v plny konfiguraci se zalohovanim pres send/recv, abychom vedeli o momentu, kdy to fixnou. Tam nevadi casty restart - nejsou stejne urcene na produkcni provoz. Jinak lidi, shanime do Relbitu (mozna napul s vpsFree) nekoho na vyvoj ZFS, jestli vite o nekom, kdo umi C a neboji se uspinit kernel kodem, posleteho mym smerem. /snajpa On 09/25/2013 12:06 PM, Pavel Vondřička wrote:
K tomu ZFS: Ještě tak někdy před dvěma třema týdny (pardon, už si to nepamatuju) node6 zadrhávalo tak, že se mi PHP aplikace nemohla připojit k databázi a málem jsem se ani nenalogoval. Naštěstí to po čase přešlo. Nevím, jestli za to mohlo to ZFS nebo nějaký zblázněný virtuál, a jestli je to identifikovaný a už vyřešený problém (žádná zpráva o výpadku ten den nepřišla), ale doufám, že už se to nebude opakovat. Málem jsem už chtěl poprosit o přestěhování zpět na původní server - problémy (skoro) každý týden mi už přišly jako trochu moc...
Pavel
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJCu4kACgkQMBKdi9lkZ6q+NAEA06DSNK3crkj0Jc0HU/nIEuOb vgW18tk6ZBpoQ1xaBKIA/3AjMo1aVz9fZaTsCApNZcSZBrZ2gFrhL7s7U1wo6w5c =O8Fh -----END PGP SIGNATURE-----
Taky se přidávám ke stížnosti na node6... bylo to opravdu snad každý týden, nekolikrat info o deadlocku bylo, ale minimálně 2x bez zprávy na outage. Spravci o tom ani nevěděli. Pevně doufám, že je to už vyřešeno. Honza Dne 25. září 2013 12:06 Pavel Vondřička <Pavel.Vondricka@ff.cuni.cz>napsal(a):
K tomu ZFS: Ještě tak někdy před dvěma třema týdny (pardon, už si to nepamatuju) node6 zadrhávalo tak, že se mi PHP aplikace nemohla připojit k databázi a málem jsem se ani nenalogoval. Naštěstí to po čase přešlo. Nevím, jestli za to mohlo to ZFS nebo nějaký zblázněný virtuál, a jestli je to identifikovaný a už vyřešený problém (žádná zpráva o výpadku ten den nepřišla), ale doufám, že už se to nebude opakovat. Málem jsem už chtěl poprosit o přestěhování zpět na původní server - problémy (skoro) každý týden mi už přišly jako trochu moc...
Pavel
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Ale vedeli a to pokazdy, jenom nekdy reakce zabrala dyl (kdyz jsem v autobuse a podobne), protoze reseni veci se ZFS jsem si vzal exkluzivne ja, abych o nem mel presne prehled. A zprava na outage nedosla, protoze je to ted dementne nastavene... long story. /snajpa On 09/25/2013 12:37 PM, Jan Munclinger wrote:
Taky se přidávám ke stížnosti na node6... bylo to opravdu snad každý týden, nekolikrat info o deadlocku bylo, ale minimálně 2x bez zprávy na outage. Spravci o tom ani nevěděli. Pevně doufám, že je to už vyřešeno.
Honza
Dne 25. září 2013 12:06 Pavel Vondřička <Pavel.Vondricka@ff.cuni.cz <mailto:Pavel.Vondricka@ff.cuni.cz>> napsal(a):
K tomu ZFS: Ještě tak někdy před dvěma třema týdny (pardon, už si to nepamatuju) node6 zadrhávalo tak, že se mi PHP aplikace nemohla připojit k databázi a málem jsem se ani nenalogoval. Naštěstí to po čase přešlo. Nevím, jestli za to mohlo to ZFS nebo nějaký zblázněný virtuál, a jestli je to identifikovaný a už vyřešený problém (žádná zpráva o výpadku ten den nepřišla), ale doufám, že už se to nebude opakovat. Málem jsem už chtěl poprosit o přestěhování zpět na původní server - problémy (skoro) každý týden mi už přišly jako trochu moc...
Pavel
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJCvZkACgkQMBKdi9lkZ6qBFAEAxYLhK3fWC21OgSuW6gfJeEZo 6nGlnRRjkT07zmABjbcA/1BV2LNHGMM5VE2Jp/qGjkenxeqmM51UoEHVR92vJ+L4 =crc+ -----END PGP SIGNATURE-----
Není pravda. Konkrétně 3.9.2013 jsem Ti psal na jabber, jestli bude info o výpadku na node6 a napal jsi mi, žes nic nezaznamenal, že na grafech nic nevidis a že je to asi moje VPS. Po chvilce sis toho prece jenom vsiml a nasledoval restart. Obdobně to probíhalo 15.9., kdy to řešil kolega. Honza Dne 25. září 2013 12:40 Pavel Snajdr <snajpa@snajpa.net> napsal(a):
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256
Ale vedeli a to pokazdy, jenom nekdy reakce zabrala dyl (kdyz jsem v autobuse a podobne), protoze reseni veci se ZFS jsem si vzal exkluzivne ja, abych o nem mel presne prehled.
A zprava na outage nedosla, protoze je to ted dementne nastavene... long story.
/snajpa On 09/25/2013 12:37 PM, Jan Munclinger wrote:
Taky se přidávám ke stížnosti na node6... bylo to opravdu snad každý týden, nekolikrat info o deadlocku bylo, ale minimálně 2x bez zprávy na outage. Spravci o tom ani nevěděli. Pevně doufám, že je to už vyřešeno.
Honza
Dne 25. září 2013 12:06 Pavel Vondřička <Pavel.Vondricka@ff.cuni.cz <mailto:Pavel.Vondricka@ff.cuni.cz>> napsal(a):
K tomu ZFS: Ještě tak někdy před dvěma třema týdny (pardon, už si to nepamatuju) node6 zadrhávalo tak, že se mi PHP aplikace nemohla připojit k databázi a málem jsem se ani nenalogoval. Naštěstí to po čase přešlo. Nevím, jestli za to mohlo to ZFS nebo nějaký zblázněný virtuál, a jestli je to identifikovaný a už vyřešený problém (žádná zpráva o výpadku ten den nepřišla), ale doufám, že už se to nebude opakovat. Málem jsem už chtěl poprosit o přestěhování zpět na původní server - problémy (skoro) každý týden mi už přišly jako trochu moc...
Pavel
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/
iF4EAREIAAYFAlJCvZkACgkQMBKdi9lkZ6qBFAEAxYLhK3fWC21OgSuW6gfJeEZo 6nGlnRRjkT07zmABjbcA/1BV2LNHGMM5VE2Jp/qGjkenxeqmM51UoEHVR92vJ+L4 =crc+ -----END PGP SIGNATURE----- _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Aha, takhle jsi to myslel - no, ano, vedel jsem o tom, az kdyz mi prestala odpovidat VPS nebo se mi nekdo ozval, ze se mu stalo podobne. Protoze se to blbe monitoruje, jelikoz monitoring to nezachyti spolehlive, kdyz se to tyka jenom nekterych procesu. Ja te pochopil tak, ze jsi byl v dojmu, ze jsme to proste neresili a nechali byt, na to jsem reagoval. /snajpa On 09/25/2013 12:50 PM, Jan Munclinger wrote:
Není pravda. Konkrétně 3.9.2013 jsem Ti psal na jabber, jestli bude info o výpadku na node6 a napal jsi mi, žes nic nezaznamenal, že na grafech nic nevidis a že je to asi moje VPS. Po chvilce sis toho prece jenom vsiml a nasledoval restart. Obdobně to probíhalo 15.9., kdy to řešil kolega.
Honza
Dne 25. září 2013 12:40 Pavel Snajdr <snajpa@snajpa.net <mailto:snajpa@snajpa.net>> napsal(a):
Ale vedeli a to pokazdy, jenom nekdy reakce zabrala dyl (kdyz jsem v autobuse a podobne), protoze reseni veci se ZFS jsem si vzal exkluzivne ja, abych o nem mel presne prehled.
A zprava na outage nedosla, protoze je to ted dementne nastavene... long story.
/snajpa On 09/25/2013 12:37 PM, Jan Munclinger wrote:
Taky se přidávám ke stížnosti na node6... bylo to opravdu snad každý týden, nekolikrat info o deadlocku bylo, ale minimálně 2x bez zprávy na outage. Spravci o tom ani nevěděli. Pevně doufám, že je to už vyřešeno.
Honza
Dne 25. září 2013 12:06 Pavel Vondřička <Pavel.Vondricka@ff.cuni.cz <mailto:Pavel.Vondricka@ff.cuni.cz> <mailto:Pavel.Vondricka@ff.cuni.cz <mailto:Pavel.Vondricka@ff.cuni.cz>>> napsal(a):
K tomu ZFS: Ještě tak někdy před dvěma třema týdny (pardon, už si to nepamatuju) node6 zadrhávalo tak, že se mi PHP aplikace nemohla připojit k databázi a málem jsem se ani nenalogoval. Naštěstí to po čase přešlo. Nevím, jestli za to mohlo to ZFS nebo nějaký zblázněný virtuál, a jestli je to identifikovaný a už vyřešený problém (žádná zpráva o výpadku ten den nepřišla), ale doufám, že už se to nebude opakovat. Málem jsem už chtěl poprosit o přestěhování zpět na původní server - problémy (skoro) každý týden mi už přišly jako trochu moc...
Pavel
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> <mailto:Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz>> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> <mailto:Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz>> http://lists.vpsfree.cz/listinfo/community-list _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> <mailto:Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz>> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJCwXUACgkQMBKdi9lkZ6p5VQD/Vtg/Q/q2Jl7FxiyJCSD1iYGH I8z+t5/Un4t2prrIRxsA/0xUSId+i0AnxWt+XbUNdYNLrZQ0spPi3WJ8Ys1R1tZw =C++K -----END PGP SIGNATURE-----
Nene, to vubec ne. Tak hlavne jestli se to podařilo vyřešit :-) Dne 25. září 2013 12:56 Pavel Snajdr <snajpa@snajpa.net> napsal(a):
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256
Aha, takhle jsi to myslel - no, ano, vedel jsem o tom, az kdyz mi prestala odpovidat VPS nebo se mi nekdo ozval, ze se mu stalo podobne. Protoze se to blbe monitoruje, jelikoz monitoring to nezachyti spolehlive, kdyz se to tyka jenom nekterych procesu.
Ja te pochopil tak, ze jsi byl v dojmu, ze jsme to proste neresili a nechali byt, na to jsem reagoval.
/snajpa
On 09/25/2013 12:50 PM, Jan Munclinger wrote:
Není pravda. Konkrétně 3.9.2013 jsem Ti psal na jabber, jestli bude info o výpadku na node6 a napal jsi mi, žes nic nezaznamenal, že na grafech nic nevidis a že je to asi moje VPS. Po chvilce sis toho prece jenom vsiml a nasledoval restart. Obdobně to probíhalo 15.9., kdy to řešil kolega.
Honza
Dne 25. září 2013 12:40 Pavel Snajdr <snajpa@snajpa.net <mailto:snajpa@snajpa.net>> napsal(a):
Ale vedeli a to pokazdy, jenom nekdy reakce zabrala dyl (kdyz jsem v autobuse a podobne), protoze reseni veci se ZFS jsem si vzal exkluzivne ja, abych o nem mel presne prehled.
A zprava na outage nedosla, protoze je to ted dementne nastavene... long story.
/snajpa On 09/25/2013 12:37 PM, Jan Munclinger wrote:
Taky se přidávám ke stížnosti na node6... bylo to opravdu snad každý týden, nekolikrat info o deadlocku bylo, ale minimálně 2x bez zprávy na outage. Spravci o tom ani nevěděli. Pevně doufám, že je to už vyřešeno.
Honza
Dne 25. září 2013 12:06 Pavel Vondřička <Pavel.Vondricka@ff.cuni.cz <mailto:Pavel.Vondricka@ff.cuni.cz> <mailto:Pavel.Vondricka@ff.cuni.cz <mailto:Pavel.Vondricka@ff.cuni.cz>>> napsal(a):
K tomu ZFS: Ještě tak někdy před dvěma třema týdny (pardon, už si to nepamatuju) node6 zadrhávalo tak, že se mi PHP aplikace nemohla připojit k databázi a málem jsem se ani nenalogoval. Naštěstí to po čase přešlo. Nevím, jestli za to mohlo to ZFS nebo nějaký zblázněný virtuál, a jestli je to identifikovaný a už vyřešený problém (žádná zpráva o výpadku ten den nepřišla), ale doufám, že už se to nebude opakovat. Málem jsem už chtěl poprosit o přestěhování zpět na původní server - problémy (skoro) každý týden mi už přišly jako trochu moc...
Pavel
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> <mailto:Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz>> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> <mailto:Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz>> http://lists.vpsfree.cz/listinfo/community-list _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> <mailto:Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz>> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz <mailto:Community-list@lists.vpsfree.cz> http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/
iF4EAREIAAYFAlJCwXUACgkQMBKdi9lkZ6p5VQD/Vtg/Q/q2Jl7FxiyJCSD1iYGH I8z+t5/Un4t2prrIRxsA/0xUSId+i0AnxWt+XbUNdYNLrZQ0spPi3WJ8Ys1R1tZw =C++K -----END PGP SIGNATURE----- _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre Muzu se zeptat na snapshotech blbne? Momentalne mam 6000+ snapshotu a problem zadny. Narazil jsem jen na tuhnuti se zpool 28 a zfs 5 pri vetsim I/O a to se snapshotama i bez. Verze 23+4 netuhne (pokud teda nedojde pamet :) ).
Petr On 09/25/2013 09:17 AM, Pavel Snajdr wrote:
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Jsi si jisty, ze se bavime o ZFS on Linux a vubec nejake novejsi verzi ZFS? Verzovani zpoolu totiz opustili uz pred nejakym patkem :) /snajpa On 09/26/2013 12:38 AM, Petr Boháč wrote:
pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre Muzu se zeptat na snapshotech blbne? Momentalne mam 6000+ snapshotu a problem zadny. Narazil jsem jen na tuhnuti se zpool 28 a zfs 5 pri vetsim I/O a to se snapshotama i bez. Verze 23+4 netuhne (pokud teda nedojde pamet :) ).
Petr
On 09/25/2013 09:17 AM, Pavel Snajdr wrote:
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJDeIoACgkQMBKdi9lkZ6qb6wD/a5dlQ8z8n+BxLYHOUkZzDJeT 9UOZYi71rrDSiK/IjfsA/15TkdQXLnCk0+kKdrY+z9lWdVlbbAqtK6fJukVesLxf =9edT -----END PGP SIGNATURE-----
no jo, pravda zpool: data1 version 23 local data2 version 23 local data3 version - default zfs: data1 version 4 - data2 version 4 - data3 version 5 - Je to spl/zfs 0.6.2 tedy aktualni verze a jadro 3.10.9-100.fc18.x86_64. Pooly data1 a data2 jsou vytvoreny na FreeBSD a momentalne provozany na Linuxu (stejny stroj jako data3). Pouzivam create/destroy/mount/send/recive. Kratce sem pouzival i ZFS-FUSE, taky bez problemu. Jak presne se to projevuje? Jestli hrozi pad FS tak me to docela zajima :) Petr On 09/26/2013 01:58 AM, Pavel Snajdr wrote:
Jsi si jisty, ze se bavime o ZFS on Linux a vubec nejake novejsi verzi ZFS? Verzovani zpoolu totiz opustili uz pred nejakym patkem :)
/snajpa
On 09/26/2013 12:38 AM, Petr Boháč wrote:
pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre Muzu se zeptat na snapshotech blbne? Momentalne mam 6000+ snapshotu a problem zadny. Narazil jsem jen na tuhnuti se zpool 28 a zfs 5 pri vetsim I/O a to se snapshotama i bez. Verze 23+4 netuhne (pokud teda nedojde pamet :) ).
Petr
On 09/25/2013 09:17 AM, Pavel Snajdr wrote:
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Well, nedeje se to kazdymu. Musis splnit nasledujici (ale nejsem si uplne jistej tema interakcema, proste akorat vypisu podminky, za kterejch se to deje nam): 1. pracovat se snapshoty nekolika datasetu najednou 2. mit ten stroj pod memory pressure (tzn. malo uplne volny pameti) 3. musi na nem bejt rozumna IO zatez tak, aby to ne vzdycky disky stihaly odbavit bez pridany latence (tzn. aby pozadavky musely obcas viset ve fronte) 4. delat do toho send/receive No a pak se ti stane presne to, co popisuju tady: https://github.com/zfsonlinux/zfs/issues/1638 /snajpa On 09/26/2013 02:38 AM, Petr Boháč wrote:
no jo, pravda
zpool: data1 version 23 local data2 version 23 local data3 version - default zfs: data1 version 4 - data2 version 4 - data3 version 5 -
Je to spl/zfs 0.6.2 tedy aktualni verze a jadro 3.10.9-100.fc18.x86_64. Pooly data1 a data2 jsou vytvoreny na FreeBSD a momentalne provozany na Linuxu (stejny stroj jako data3). Pouzivam create/destroy/mount/send/recive. Kratce sem pouzival i ZFS-FUSE, taky bez problemu.
Jak presne se to projevuje? Jestli hrozi pad FS tak me to docela zajima :)
Petr
On 09/26/2013 01:58 AM, Pavel Snajdr wrote:
Jsi si jisty, ze se bavime o ZFS on Linux a vubec nejake novejsi verzi ZFS? Verzovani zpoolu totiz opustili uz pred nejakym patkem :)
/snajpa
On 09/26/2013 12:38 AM, Petr Boháč wrote:
pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre Muzu se zeptat na snapshotech blbne? Momentalne mam 6000+ snapshotu a problem zadny. Narazil jsem jen na tuhnuti se zpool 28 a zfs 5 pri vetsim I/O a to se snapshotama i bez. Verze 23+4 netuhne (pokud teda nedojde pamet :) ).
Petr
On 09/25/2013 09:17 AM, Pavel Snajdr wrote:
Tak jeste lepsi zprava (jakoze fakt, protoze aspon vim presne, co tomu je) - milej zlatej posranej linuxovej sofware raid1 (prosim prosim, nepouzivejte ho nikde, raid10 a podobne jsou fajn, ale raid1 je SRACKA vylozene) si nevsim ze mu pomalu odchazi SSD pod nim... Nahodne zdrzoval read IO requesty, ktere mohl odbavit ctenim ze zdraveho SSD.
No nic lidicky, ZFS uz mam vychytane (pokud se nepouzivaji snapshoty na zfs on linux, tak to chodi 100% dobre - coz nevadi, protoze zalohujeme pres rsync), takze node5+ZFS, premigruju tam veci z node8 a postupne na ZFS prejdeme vsude. To takovyhle veci nedela a funguje rychleji.
/snajp
On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJD5k0ACgkQMBKdi9lkZ6pEGAD/ZUYkxQdftjokKrf8kDGO3Nkv NeMwR/IQ6GSbEVtuf1EBAMUa/xBqKKV6RqKb3cjheUxhyYncoxIk4xG0BlwLEc+C =afbc -----END PGP SIGNATURE-----
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Vsem na node8: postupne migruju vsechny VPS na node5, omluvte prosim vypadek, ale nechci to nechavat vzdycky az na noc, protoze nechci cekat, kdy se ty SSDcka sesypou uplne. /snajpa On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJEBfsACgkQMBKdi9lkZ6rFrwEAoPa6pp3cELhDhL+oPffKP+K0 Zph1lXSrO4CdDHIayGMA+wbjvBLMbYsdXKFBVnojeYy3IREGxrxv9jrKPh5ZXniP =k2Pl -----END PGP SIGNATURE-----
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Vsem co se vas ta migrace tyka, tzn vy co jste na node8: Jelikoz na ZFS nodech jsou data VPS na vnorenejsi ceste (obchazime neschopnost vzctl, nepovedlo se nam vymyslet nic, co by akceptovali do upstreamu zatim), musime zahazovat zalohy a zacit zalohovat s cistym stitem od nuly. Ty zalohy ale nemazeme, jenom je odsouvame mimo, aby nezpusobovaly problemy (protoze by to rozbilo funkce vpsAdminu, hlavne restore from backup a download); jestli z tech zaloh neco budete potrebovat, napiste nam na podporu - idealne prilozte z jakeho data a jakou cestu potrebujete a my vam to odtamtud vytahneme. Chapu, ze je to major PITA (= pain in the ass), ale je to asi nejlepsi reseni, s kterym aktualne muzeme prijit. Diky za pochopeni. /snajpa On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJEceYACgkQMBKdi9lkZ6qdngD/YxcscLfx3J0I03gNDHDQyqFg s6V69WEWXN9HBoqvafIBAMoU90NcnHlN9ztfzRLkjtPYokNA9hZ0tKgMdA3u7NZQ =/3bp -----END PGP SIGNATURE-----
-----BEGIN PGP SIGNED MESSAGE----- Hash: SHA256 Cau vsem vespolek, tak dneska dopoledne jsem domigroval posledni VPSky, uz je hotovo :) V node8 se vymeni SSDcka, reinstaluje se taky se ZFS a pujdou na nej novi clenove (migrovat zpatky uz se nebude). S pozdravem Pavel Snajdr +421 948 816 186 | +420 720 107 791 | 110-010-956 CTO of Relbit | Predseda vpsFree.cz, o.s. | RHCE http://relbit.com | http://vpsfree.cz | https://www.redhat.com On 09/25/2013 08:52 AM, Pavel Snajdr wrote:
Caute,
na node8 vypada, ze delal problem kernel, ale nemuzu si byt 100% jisty, ze to neni hardwarem.
Dneska nainstaluju node5 a v noci zahajim presun vsech VPS z node8 na noed5, tak mejte prosim trpelivost s dalsim - uz mensim - vypadkem (restart pri migraci).
Node8 potom poradne prozkousim a hlavne preinstaluju od nuly.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
-----BEGIN PGP SIGNATURE----- Version: GnuPG v1.4.12 (GNU/Linux) Comment: Using GnuPG with Icedove - http://www.enigmail.net/ iF4EAREIAAYFAlJFxUoACgkQMBKdi9lkZ6oS9AD/TxDGV7RQK/m3M27z4ypmTPdS bTlhshz1NMdFZ6P15MwBAIaGtZq9UKCOkdYMNcLRrffSdH/SUCvdCOrqUbkrEldd =rfpy -----END PGP SIGNATURE-----
participants (5)
-
Jan Munclinger -
Pavel Snajdr -
Pavel Vondřička -
Petr Boháč -
Stanislav Petr