Observability mit VictoriaLogs und VictoriaMetrics
Metriken und Logs auf Kubernetes mit dem VictoriaMetrics Operator, Vector und Grafana
VictoriaMetrics ist eine quelloffene Zeitreihendatenbank unter der Apache-2.0-Lizenz. Sie versteht das Prometheus-Protokoll und PromQL, nimmt Metriken per Remote Write oder eigenem Scraping an und erweitert PromQL zu MetricsQL. VictoriaLogs ist die Log-Datenbank aus demselben Projekt, mit der Abfragesprache LogsQL.
Beide speichern ihre Daten auf lokalen Platten und brauchen keinen Object Storage. Für kleine und mittlere Umgebungen reicht jeweils ein einzelner Prozess, für größere Umgebungen gibt es eine Cluster-Variante mit getrennten Komponenten für Schreiben, Lesen und Speichern. Damit ist der Stack eine leichtgewichtige Alternative zum LGTM-Stack aus Loki, Grafana, Tempo und Mimir, mit weniger Komponenten und geringerem Ressourcenbedarf.
Die Schulung behandelt den Betrieb auf Kubernetes mit dem VictoriaMetrics Operator. Logs werden mit Vector gesammelt und aufbereitet, Grafana dient für Dashboards und Auswertungen.
Für den LGTM-Stack bieten wir eine eigene Schulung an: Observability mit dem LGTM-Stack
Die Grundlagen von Metriken, PromQL und Alertmanager vertieft die Prometheus Schulung.
Schulungsziel
Die Schulung versetzt Teilnehmer in die Lage, eine Observability-Plattform für Metriken und Logs mit VictoriaMetrics und VictoriaLogs auf Kubernetes aufzubauen und zu betreiben.
Teilnehmer installieren den VictoriaMetrics Operator, beschreiben Datenbanken, Agenten und Scrape-Ziele als Kubernetes-Ressourcen und sammeln Logs mit Vector. Darauf aufbauend werden Abfragen mit MetricsQL und LogsQL, Dashboards in Grafana, Alerting mit vmalert und Alertmanager sowie Zugriffsschutz und Mandanten behandelt.
Nach Abschluss der Schulung können Sie die Plattform für die eigenen Datenmengen dimensionieren und beurteilen, wann der einzelne Prozess reicht und wann sich die Cluster-Variante lohnt.
Zielgruppe
Systemadministratoren, DevOps- und Plattform-Teams, die Metriken und Logs auf Kubernetes zentral erfassen möchten oder eine schlankere Alternative zu Prometheus mit Loki oder zum LGTM-Stack suchen.
Vorkenntnisse |
Grundkenntnisse im Umgang mit Kubernetes und |
Dauer |
2 Tage |
Ort |
Inhouse bei Ihnen oder als offene Schulung |
Sprache |
Deutsch, Englisch auf Anfrage |
Anzahl Teilnehmer |
Empfohlen: Maximal 8 |
Themen
Folgende Themen werden in dieser Schulung behandelt:
-
Einführung
-
Metriken, Logs und Traces: was wofür
-
Komponenten: VictoriaMetrics, VictoriaLogs, vmagent, vmalert, vmauth
-
Single-Node und Cluster-Variante
-
Abgrenzung zu Prometheus, Loki und dem LGTM-Stack
-
-
Installation auf Kubernetes
-
VictoriaMetrics Operator und seine CRDs
-
Helm Chart
victoria-metrics-k8s-stack -
VMSingle und VMCluster
-
VLSingle und VLCluster für VictoriaLogs
-
Speicher, Retention und Ressourcen
-
-
Metriken erfassen
-
vmagent: Scraping, Relabeling und Remote Write
-
Scrape-Ziele als Ressourcen: VMServiceScrape, VMPodScrape, VMNodeScrape und VMProbe
-
Übernahme vorhandener ServiceMonitor- und PodMonitor-Ressourcen des Prometheus Operators
-
Kubernetes-Metriken: kube-state-metrics, node-exporter, kubelet und cAdvisor
-
Metriken aus eigenen Anwendungen, zum Beispiel Spring Boot mit Micrometer
-
OpenTelemetry Metriken annehmen
-
-
Abfragen mit MetricsQL
-
PromQL-Grundlagen: Selektoren, Rate, Aggregation
-
Erweiterungen von MetricsQL
-
Recording Rules
-
Kardinalität erkennen und begrenzen mit dem Cardinality Explorer
-
vmui für Ad-hoc-Abfragen
-
-
Logs erfassen mit Vector
-
Architektur: Sources, Transforms und Sinks
-
Vector als DaemonSet für Container-Logs
-
Logs parsen und anreichern mit VRL
-
Felder, Streams und Zeitstempel in VictoriaLogs
-
Weitere Eingänge: OpenTelemetry, Syslog, Loki- und Elasticsearch-kompatible APIs
-
-
Abfragen mit LogsQL
-
Filter, Wörter, Phrasen und Felder
-
Pipes: Extrahieren, Zählen, Gruppieren und Sortieren
-
Metriken aus Logs ableiten
-
Live Tailing
-
-
Grafana
-
Datenquellen für VictoriaMetrics und VictoriaLogs
-
Dashboards, Variablen und fertige Dashboards für Kubernetes
-
Explore: Metriken und Logs nebeneinander untersuchen
-
Dashboards und Datenquellen als Code
-
-
Alerting
-
vmalert: Alerting Rules mit MetricsQL und LogsQL
-
VMRule-Ressourcen
-
Alertmanager: Routing, Gruppierung, Stille und Benachrichtigungen
-
Sinnvolle Alerts statt Alarmflut
-
-
Betrieb
-
Zugriffsschutz und Routing mit vmauth und VMUser
-
Mandanten in der Cluster-Variante
-
Dimensionierung und Deduplizierung
-
Hochverfügbarkeit: Replikation in VictoriaMetrics, redundante Installationen für VictoriaLogs
-
Backup und Wiederherstellung mit vmbackup und vmrestore
-
Upgrades über den Operator
-
Den Stack selbst überwachen
-
-
Ausblick
-
Traces mit VictoriaTraces
-
Migration von Prometheus und Loki
-