Re: [vpsFree.cz: community-list] Jak vyřešit high availability na VPS
Zkouším se na to podívat jinak. Problém může nastat kdekoliv. V datacentru (např. OVH), na úrovni domény a DNS záznamů (např.: Subreg/Gransy) a nebo prostě selžou klíčové uzly jak se to stalo Google. Máte nějaké best practice jak být na to připraven nebo jak postupovat? Máte nějaký disaster plan pro tyto situace? On Wed, Sep 22, 2021 at 9:37 AM Ondra Flidr <me@ondrejflidr.cz> wrote:
Na rovinu - co ta vec umi navic pred haproxy nebo nginxem? Samotny balancer musi byt taky v HA a jsme tam, kde jsme byli - bud prepinana IP v ramci jednoho DC nebo anycast a tedy vlastni AS.
Ondra Flidr
Odesláno z mého zařízení Galaxy
-------- Původní zpráva -------- Od: Jirka Knapek <jirka@kapi.cz> Datum: 22.09.21 6:46 (GMT+01:00) Komu: "vpsFree.cz Community list" <community-list@lists.vpsfree.cz> Předmět: Re: [vpsFree.cz: community-list] Jak vyřešit high availability na VPS
Ahoj Martine,
jde to udělat i pomocí load balanceru, používám na to v práci Kemp LoadMaster, který dokáže směrovat DNS kam je potřeba. Máme to nasazené v Brně a US jen to je celá VM, pak dokážeš směrovat uživatele na základě dotazu DNS.
Mají i řešení pro malé projekty, které je zadarmo - https://freeloadbalancer.com/ který by GSLB měl také dokázat. Jen s tím časem tam může být trošku problém podle nastavení TTL u DNS. Já to musel nastavit na hodinu, když to bylo moc krátké tak ve scenáriu, kdy já používám obě DC jako aktivní a uživatelé jdou do bližšího, tak docházelo k problémům, protože jim to dávalo různé cílové adresy. Pro záložní případ by to asi nedělalo neplechu.
kapi
*From: *Martin Mohler <martin@mohler.it> *Sent: *Monday, September 20, 2021 9:40 PM *To: *community-list@lists.vpsfree.cz *Subject: *[vpsFree.cz: community-list] Jak vyřešit high availability na VPS
Ahoj,
dneska se mi stala zajímavá věc. Spravuji VPS pro klienta u jedné nejmenované společnosti. Jsem s nimi velmi a dlouhodobě spokojen. Mám u nich více VPS s různými projekty klientů a až na pár maličkostí jsem maximálně spokojen. Zejména oproti zkušenostem s jinými společnostmi, kde projekty původně běželi.
Dnes u nich ale došlo k HW problému a měli výpadek, který ale do hodinky vyřešili migrací VPS na jiný node. Dle zákonů schválnosti se tak stane, když klientovi společnost doporučíte.
Začal jsem uvažovat jak tomu předcházet. Řešením by byl load balancer, ale pokud budu mít VPSky ve dvou servrovnách, tak balancer na úrovni DNS neudělám, nebo nevím jak či u jakého poskytovatele bych to mohl nastavit. Další možnost je přidat VPS s nginx, ale pokud tato z jakéhokoliv důvodu vypadne, tak je to úplně jedno, že jsou VPS zrcadlené. Nemáte nějaký nápad, který momentálně nevidím jak vyřešit aby v případě problému s jedním poskytovatelem VPS přepnout v co nejkratším čase na jinou VPS v případě závažného problému? Další věcí je synchronizace MySQL databáze, ale ta může být ze zálohy.
Mockrát díky za tipy a postřehy.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
Nejpopulárnější disaster recovery plan je: 1. Disaster 2. Recovery 3. Plan On Wed, Sep 22, 2021, 09:53 Martin Mohler <martin@mohler.it> wrote:
Zkouším se na to podívat jinak. Problém může nastat kdekoliv. V datacentru (např. OVH), na úrovni domény a DNS záznamů (např.: Subreg/Gransy) a nebo prostě selžou klíčové uzly jak se to stalo Google. Máte nějaké best practice jak být na to připraven nebo jak postupovat? Máte nějaký disaster plan pro tyto situace?
On Wed, Sep 22, 2021 at 9:37 AM Ondra Flidr <me@ondrejflidr.cz> wrote:
Na rovinu - co ta vec umi navic pred haproxy nebo nginxem? Samotny balancer musi byt taky v HA a jsme tam, kde jsme byli - bud prepinana IP v ramci jednoho DC nebo anycast a tedy vlastni AS.
Ondra Flidr
Odesláno z mého zařízení Galaxy
-------- Původní zpráva -------- Od: Jirka Knapek <jirka@kapi.cz> Datum: 22.09.21 6:46 (GMT+01:00) Komu: "vpsFree.cz Community list" <community-list@lists.vpsfree.cz> Předmět: Re: [vpsFree.cz: community-list] Jak vyřešit high availability na VPS
Ahoj Martine,
jde to udělat i pomocí load balanceru, používám na to v práci Kemp LoadMaster, který dokáže směrovat DNS kam je potřeba. Máme to nasazené v Brně a US jen to je celá VM, pak dokážeš směrovat uživatele na základě dotazu DNS.
Mají i řešení pro malé projekty, které je zadarmo - https://freeloadbalancer.com/ který by GSLB měl také dokázat. Jen s tím časem tam může být trošku problém podle nastavení TTL u DNS. Já to musel nastavit na hodinu, když to bylo moc krátké tak ve scenáriu, kdy já používám obě DC jako aktivní a uživatelé jdou do bližšího, tak docházelo k problémům, protože jim to dávalo různé cílové adresy. Pro záložní případ by to asi nedělalo neplechu.
kapi
*From: *Martin Mohler <martin@mohler.it> *Sent: *Monday, September 20, 2021 9:40 PM *To: *community-list@lists.vpsfree.cz *Subject: *[vpsFree.cz: community-list] Jak vyřešit high availability na VPS
Ahoj,
dneska se mi stala zajímavá věc. Spravuji VPS pro klienta u jedné nejmenované společnosti. Jsem s nimi velmi a dlouhodobě spokojen. Mám u nich více VPS s různými projekty klientů a až na pár maličkostí jsem maximálně spokojen. Zejména oproti zkušenostem s jinými společnostmi, kde projekty původně běželi.
Dnes u nich ale došlo k HW problému a měli výpadek, který ale do hodinky vyřešili migrací VPS na jiný node. Dle zákonů schválnosti se tak stane, když klientovi společnost doporučíte.
Začal jsem uvažovat jak tomu předcházet. Řešením by byl load balancer, ale pokud budu mít VPSky ve dvou servrovnách, tak balancer na úrovni DNS neudělám, nebo nevím jak či u jakého poskytovatele bych to mohl nastavit. Další možnost je přidat VPS s nginx, ale pokud tato z jakéhokoliv důvodu vypadne, tak je to úplně jedno, že jsou VPS zrcadlené. Nemáte nějaký nápad, který momentálně nevidím jak vyřešit aby v případě problému s jedním poskytovatelem VPS přepnout v co nejkratším čase na jinou VPS v případě závažného problému? Další věcí je synchronizace MySQL databáze, ale ta může být ze zálohy.
Mockrát díky za tipy a postřehy.
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
_______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
Ano - nespoleham se na ne :-) Ale ted vazne - u vseho je potreba zvazit, kolik penez stoji obrana a kolik pripadny problem. Nema cenu investovat rocne milion dolaru do reseni, kdy vypadek s pravdepodobnosti 1x za tri roky stoji deset tisic.DNS je distribuovane by design. Sance, ze selze cela root domena nebo cely rozumny tld je minimalni, to je riziko, co prijimam. Pak uz je to na provozu vlastni DNS infrastruktury, mit minimalne 2 nody ve 2 ruznych sitich a za nimi hidden master node. Tim je docela slusna sance, ze to bude fungovat. Pouzivam powerdns jako hidden mastera a knot na zbytku. Samozrejme to nechrani pred uzivatelskou chybou, ale to zadna replikace.V samotny infra je potreba mit vsechno n-krat na dostatecnem mnozstvi hw. Je na nic mit 2 loadbalancery, kdyz sedi na stejnem hypervizoru. Spousta technologii umi primo replikaci, takze nasazeni je snadne. Vetsi problem je georeplikace - neni dobry napad delat synchronni repliku pres net. Pak se da sahnout po zfs snapshotech (znapzend) nebo primo async georeplikace, pokud ji technologie umi.Osobne mam primarni infra v coolhousingu s mirrorem dat a funkcionality (druhy dns, zalozni emaily, monitoring) do serverparku a do prazsky vpsfree. V planu je nekdy presunout vpsfree mirror do brna.Disaster recovery plany spocivaji v tom, ze mam data a mam ansible, ve kterem je vsechno, takze neni problem celkem rychle spustit klon infra kdekoliv jinde.Ondra FlidrOdesláno z mého zařízení Galaxy -------- Původní zpráva --------Od: Martin Mohler <martin@mohler.it> Datum: 22.09.21 9:53 (GMT+01:00) Komu: "vpsFree.cz Community list" <community-list@lists.vpsfree.cz> Předmět: Re: [vpsFree.cz: community-list] Jak vyřešit high availability na VPS Zkouším se na to podívat jinak. Problém může nastat kdekoliv. V datacentru (např. OVH), na úrovni domény a DNS záznamů (např.: Subreg/Gransy) a nebo prostě selžou klíčové uzly jak se to stalo Google. Máte nějaké best practice jak být na to připraven nebo jak postupovat? Máte nějaký disaster plan pro tyto situace? On Wed, Sep 22, 2021 at 9:37 AM Ondra Flidr <me@ondrejflidr.cz> wrote:Na rovinu - co ta vec umi navic pred haproxy nebo nginxem? Samotny balancer musi byt taky v HA a jsme tam, kde jsme byli - bud prepinana IP v ramci jednoho DC nebo anycast a tedy vlastni AS.Ondra FlidrOdesláno z mého zařízení Galaxy-------- Původní zpráva --------Od: Jirka Knapek <jirka@kapi.cz> Datum: 22.09.21 6:46 (GMT+01:00) Komu: "vpsFree.cz Community list" <community-list@lists.vpsfree.cz> Předmět: Re: [vpsFree.cz: community-list] Jak vyřešit high availability na VPS Ahoj Martine, jde to udělat i pomocí load balanceru, používám na to v práci Kemp LoadMaster, který dokáže směrovat DNS kam je potřeba. Máme to nasazené v Brně a US jen to je celá VM, pak dokážeš směrovat uživatele na základě dotazu DNS.Mají i řešení pro malé projekty, které je zadarmo - https://freeloadbalancer.com/ který by GSLB měl také dokázat. Jen s tím časem tam může být trošku problém podle nastavení TTL u DNS. Já to musel nastavit na hodinu, když to bylo moc krátké tak ve scenáriu, kdy já používám obě DC jako aktivní a uživatelé jdou do bližšího, tak docházelo k problémům, protože jim to dávalo různé cílové adresy. Pro záložní případ by to asi nedělalo neplechu. kapi From: Martin MohlerSent: Monday, September 20, 2021 9:40 PMTo: community-list@lists.vpsfree.czSubject: [vpsFree.cz: community-list] Jak vyřešit high availability na VPS Ahoj,dneska se mi stala zajímavá věc. Spravuji VPS pro klienta u jedné nejmenované společnosti. Jsem s nimi velmi a dlouhodobě spokojen. Mám u nich více VPS s různými projekty klientů a až na pár maličkostí jsem maximálně spokojen. Zejména oproti zkušenostem s jinými společnostmi, kde projekty původně běželi. Dnes u nich ale došlo k HW problému a měli výpadek, který ale do hodinky vyřešili migrací VPS na jiný node. Dle zákonů schválnosti se tak stane, když klientovi společnost doporučíte. Začal jsem uvažovat jak tomu předcházet. Řešením by byl load balancer, ale pokud budu mít VPSky ve dvou servrovnách, tak balancer na úrovni DNS neudělám, nebo nevím jak či u jakého poskytovatele bych to mohl nastavit. Další možnost je přidat VPS s nginx, ale pokud tato z jakéhokoliv důvodu vypadne, tak je to úplně jedno, že jsou VPS zrcadlené. Nemáte nějaký nápad, který momentálně nevidím jak vyřešit aby v případě problému s jedním poskytovatelem VPS přepnout v co nejkratším čase na jinou VPS v případě závažného problému? Další věcí je synchronizace MySQL databáze, ale ta může být ze zálohy. Mockrát díky za tipy a postřehy. _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
participants (3)
-
Alexander Zubkov -
Martin Mohler -
Ondra Flidr