Schlagwort-Archive: daten

ZABBIX Monitoring Network

Server und Application Monitoring mit Docker

Je nachdem in welchem Umfeld du unterwegs bist, sammelst du über die Zeit mehrere Server an. Ob diese nun virtualisiert sind oder nicht ist dabei nicht entscheidend. Die Frage die du dir stellen solltest: Wie kannst du den Überblick behalten?

Ich habe beispielsweise einen ganzen „echten“ Server nur zur Sicherung der Daten meiner anderen Server. Dies realisiere ich mittels der Open Source Software BackupPC (ich blogge hierzu gerne, wenn es interessant ist – einfach Kommentar hinterlassen). Auf dieses System greife ich natürlich nicht täglich zu, sondern nur im Notfall. Doch wie häufig prüfe ich, ob das System überhaupt läuft? Du ahnst es schon: Gar nicht! Ohne Witz, ich denke an diesen Backupserver nur genau einmal im Monat: Wenn die Rechnung kommt.

Und hier ist der Knackpunkt: Mit steigender Anzahl an Systemen, sinkt die Motivation, wirklich alle Systeme im Blick zu behalten. Bei meiner Cloud oder der Piwik-Instanz werde ich schon merken wenn die ausfällt, auch wenn es sicherlich einige Stunden dauert, aber bei Systemen die halt „einfach da sind“ kann es Tage oder Wochen dauern. Daher sollte ich hier nun endlich mal ein Monitoringsystem aufsetzen.

Definition von Monitoring

Im Monitoring (zumindest für mich) geht es mir darum, eine beliebig große Anzahl an Servern und auch Applikationen zu überwachen. Und zwar in einem Intervall, den ich selbst nicht leisten kann, sprich: „Alle X Sekunden“ oder „Alle X Minuten“. Die ermittelten Daten werden gespeichert und können rückwirkend ausgewertet werden.

Innerhalb dieser Intervalls werden dann verschieden viele Parameter abgefragt. Je nach Ergebnis der Abfrage und je nach Parameter sowie eben auch möglicher anderer Parameter können dann verschiedene Ereignisse ausgelöst werden sodass ich bspw. eine E-Mail erhalte, wenn ein Server abstürzt oder wenn der verfügbare Speicherplatz einer Festplatte nahezu aufgebraucht ist. Aber eben auch die Verfügbarkeitsprüfung von Applikationen ist wichtig, bei dem angesprochenen Backupsystem bspw. ist es zwar nett zu wissen, dass der Server läuft, aber dadurch weiß ich ja noch lange nicht, ob die Applikation auch verfügbar ist.

Na toll, dann musst du halt den ganzen Tag in dieses Monitoring-System glotzen oder was?“ Fragst du mich jetzt vielleicht…. nein 😉

Die oben erwähnten Ereignisse können genutzt werden um mich über gewisse Situationen informieren zu lassen. Bspw. währe ein wichtiges / kritisches Ereignis, wenn ein Server ausfällt. Und ich habe für mich entschieden, dass ich bei kritischen Ereignissen definitiv sofort benachrichtigt werden, bspw. in Form einer E-Mail.

So einfach geht’s: ZABBIX Monitoring Server einrichten

netcup.deIch habe mir bei netCup einen ganz kleinen Server geholt, der bei mir nun ausschließlich das Monitoring ausführen wird. Damit ich mich nicht um die Installation bzw. Migration der Monitoring-Anwendung kümmern muss, werde ich -wiedermal- Docker einsetzen.

Server-System vorbereiten

Dazu habe ich ein Debian Wheezy aufgesetzt (musst du nicht genau so machen), mit diesem Startpunkt ergibt sich erstmal die Installation von Docker und nginx auf dem Server:

Nun habe ich alle Pakete aktualisiert und nginx installiert (brauche ich später mal). In meinem Setup muss ich nun noch das kernel-update auf eine Version > 3.10 vornehmen.

Nachdem der neuere Kernel installiert ist, kann ich mit der Installation von Docker fortfahren. Hierzu muss ich erstmal die passenden Software-Repositoriys im System hinterlegen:

Unter Debian Wheezy muss ich in "/etc/apt/sources.list" nun noch die Zeile "deb-src [arch=amd64] https://download.docker.com/linux/debian wheezy stable" auskommentieren.

Nun kann ich den Paketmanager aktualisieren lassen und dann Docker in der Community Edition installieren:

ZABBIX Server als Docker-Container aufsetzen

Ich habe mich für ZABBIX als Monitoring-Server entschieden. Das System hatte ich vor einigen Jahren schon mal für einen Anwendungsfall im Einsatz und kenne zumindest noch einige Grundlagen. Außerdem habe ich damit später noch etwas vor (mehr dazu in den kommenden Beiträgen). ZABBIX benötigt eine Datenbank. Und im Sinne von Docker benötigen wir also zwei Container: Einmal der Monitoring-Server und einmal dann halt die Datenbank.

Zum Einsatz kommt hier ZABBIX Version 3.2.4 und eine MariaDB. Beide Images stammen vom monitoringartist. Die Container werden jeweils als „deamon“ (-d Parameter) gestartet, laufen also im Hintergrund und Docker wird außerdem angewiesen, die Container sofort neuzustarten, falls sie Abstürzen (--restart unless-stopped Parameter).

Damit die DB zwischen den Starts korrekt persistiert wird und backups gezogen werden können, werden zwei Ordner als Volumes gemounted. Außerdem wird localtime als Read-Only eingebunden. Ich habe mich hier überwiegend an die Anleitung gehalten.

Neben der DB brauche ich dann noch die eigentliche Server-Applikation. Hierzu nehme ich vom monitoringartist das ZABBIX XXL-Image. Hier geben wir ebenfalls localtime als Read-Only rein. Ansonsten gibt es keine weiteren Volumes, da der Server keine eigenen Daten persistiert (nur die DB). Ich verlinke dann noch die Datenbank und gebe zwei Ports frei damit von außen mit der Applikation kommuniziert werden kann (hier kommt später nginx zum Einsatz).

Damit Zugangsdaten und einige Konfigurationen passen, setze ich noch verschiedene Environment-Variablen.

Nun läuft der ZABBIX Server, bis das Web-Interface erreichbar ist, kann es wohl 60 Sekunden dauern, also nicht erschrecken. Du kannst darauf zugreifen, dazu benötigst du die IP / URL deines Server und hängst da den Port (in diesem Fall 8090) hinter, also bspw.: http://server-ip:8090

ZABBIX DashboardDie Standard-Login-Daten sind „admin“ als Benutzername und „zabbix“ als Passwort.

Tipp: Das Passwort solltest du sofort ändern.

Ersten Server ins Monitoring aufnehmen

Der erste Server der im Monitoring überwacht werden sollte, ist der Monitoring-Server. Zugegeben, das hört sich sinnfrei an, wenn der Monitoring-Server abstürzt kann er dich darüber schließlich nicht informieren. Ich mache es dennoch. Zum einen möchte ich genau jetzt wissen, ob Daten erfasst werden können, zum anderen möchte ich die Daten für rückwirkende Analysen erfassen.

Du gehst dazu über den Menüpunkt „Configuration > Hosts“ und dort siehst du den „Zabbix Server“. In rot steht „deactivated“ dort, wenn du darauf klickst, aktivierst du die Aufzeichnung.

Weitere Server ins Monitoring aufnehmen

Von hieran geht es unglaublich schnell, weitere Server ins Monitoring aufzunehmen. Ich habe inzwischen auf allen Servern Docker laufen da ich künftig jegliche Applikationen jeweils in einem Docker-Container betreiben möchte. Daher setze ich nun auch auf den zu überwachenden Servern einen Zabbix-Agent im Docker-Container ein. Mein Vorteil: Ich führe ein einziges Kommando aus und der Server ist im Monitoring.

Hierzu setze ich, ebenfalls vom monitoringartist, das Image dockbix-agent-xxl-limited in der neusten Version ein. Wichtig hierbei ist, dass der --net=host Parameter verwendet wird, sodass der Docker-Container im selben Netzwerk-Stack läuft wie der Host. Außerdem muss der Container mit dem --privileged Parameter gestartet werden, da er auf viele Systemeigenschaften zugreifen muss, die überwacht werden sollen. Das gesamte Filesystem muss gemountet werden, zusätzlich muss /var/run in den Container (auf selben Pfad) gelegt werden. Auf diese Weise kann der ZABBIX-Agent im Container alles überwachen.

Über die zwei Environment-Variablen ZA_Server und ZA_ServerActive wird die Verbindung zum Monitoring-Server festgelegt.

An diesem Punkt kam ich ins Grübeln: Keinerlei Autentifizierung findet hier statt. Keine Tokens, keine Zugangsdaten, nix… Was, wenn jemand meine ZABBIX-Url herausfindet und mich mit Daten überflutet? Nachdem ich den ersten Versuch startete merkte ich aber schnell, dass eine Authentifizierung hier nicht notwendig sein wird.

Der Agent startet und Fragt vom Angegebenen Monitoring-Server ab, was er alles überwachen soll (dies kann pro Server variieren). Der Monitoring-Server schaut anhand des Anfragenden Hostname in der Konfiguration. Solange ich also in ZABBIX einen Server nicht eintrage, bekommt dieser „nichts“ zurück. Denn ZABBIX möchte von diesem Server dann keine Daten haben.

Damit der Agent also irgendwas übermittelt, muss ich erstmal den Server anlegen und konfigurieren. Dies erfolgt über den Menüpunkt „Configuratino > Hosts“. Hier siehst du eine Liste aller Hosts und kannst auch einen neuen Host anlegen.

ZABBIX Host anlegenIn der ersten Ansicht gibst du den Host-Name (der Hostname des Server), den Visible-Name (mit diesem Namen zeigt ZABBIX dir den Server an) und die IP Adresse des Servers an.

Im Tab „Templates“ wählst du dann noch Templates, ich wähle hier überwiegend nur „Template OS Linux“. Über die Templates werden die verschiedenen Parameter definiert, die überwacht werden sollen (bspw. CPU Auslastung, Festplattenspeicher, …).

ZABBIX: GLIBC-Error beheben

Ich hatte beim Start des ZABBIX-Agent auf einigen Servern Probleme. GLIBC war wohl nicht in der korrekten Version vorhanden. Dies lässt sich fix beheben:

Danach unbedingt den eingefügten (letzten) deb-Eintrag auskommentieren. Jetzt noch den Docker-Container vom Zabbix Agent löschen und neu anlegen.