Ked ti padne rabbitmq tak asi logy netecu, nie? Ja riesim podobny stack, akorat miesto logstash pouzivam nxlog kvoli vykonu, predsalen nxlog je v Ccku, logstash je JRuby. Navyse nxlog na aplikacnom serveri ti dokaze posielat periodicky spravy, podla ktorych vies nasledne zistit ked ti vypadne spojenie a pod. Dalej ak chce clovek riesit nejaku korelaciu logov, tak logstash funguje prakticky stateless, kazdy event prijde s cistym stitom, nxlog ma na toto dobre moduly a ak treba nejaky fakt mocny processing tak ma interface k perlu. A jednoducho sa daju nahodit buffre medzi klienta a logserver, medzi logserver a elasticsearch, atd. Co sa tyka bezpecnosti tak u nas sa to riesi tiez cez reverse proxy, autentifikaciu voci LDAPu a aliasy v Elasticsearch. On Feb 17, 2015 7:36 PM, "Ondrej.Flidr" Ondrej.Flidr@seznam.cz wrote:
Hoj, resim to asi pro 100 stroju ve dvou datacentrech pomoci rabbitmq, logstashe, elasticsearch a kibany. Syslogovy zpravy se posilaji primo do logstashe, aplikace loguje do rabbitmq, ze ktereho si to logstash cte (pokud umre logstash, logy zustanou v rabbitu). Logstash to potom uklada to elasticsearch a nad tim jako interface sedi Kibana.
Chce to trochu hacknout bezpecnost (mezi elastic a kibanu je potreba vrazit nejakou http proxy s authentizaci) ale funguje to luxusne. Tece mi v tom celkove kolem 10000 zprav / minutu a cokoliv muze spadnout aniz by to ohrozilo zbytek.
Ondra Flidr
---------- Původní zpráva ---------- Od: Jindřich Sadílek jindrich.sadilek@gmail.com Komu: community-list@lists.vpsfree.cz Datum: 17. 2. 2015 18:56:18 Předmět: [vpsFree.cz: community-list] Hromadné logování
Ahoj,
řešítě nějak logování z více serverů současně na jednom místě? Syslogy mívají tyhle funkce nativně, ale když bych tam chtěl mít i logy z webaplikací,... z více mašin. Ideálně něco rovnou s nástrojem na rozumné prohledávání / zobrazování / porovnávaní. Nic proti čistému textu :)
Díky, Jindra _______________________________________________ Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list
Community-list mailing list Community-list@lists.vpsfree.cz http://lists.vpsfree.cz/listinfo/community-list