M

MLOG

Čeština

Prozkoumejte sběr metrik s Prometheus a Grafana. Naučte se, jak efektivně monitorovat své aplikace a infrastrukturu pomocí těchto výkonných open-source nástrojů.

Sběr metrik: Komplexní průvodce s Prometheus a Grafana

V dnešním složitém IT prostředí je efektivní monitorování klíčové pro udržení zdraví a výkonu aplikací a infrastruktury. Sběr metrik poskytuje základ pro toto monitorování a umožňuje sledovat klíčové ukazatele výkonu (KPI), identifikovat potenciální problémy a optimalizovat využití zdrojů. Tento komplexní průvodce prozkoumá, jak využít Prometheus a Grafana, dva výkonné open-source nástroje, pro robustní sběr metrik a jejich vizualizaci.

Co je sběr metrik?

Sběr metrik zahrnuje shromažďování číselných dat, která v čase reprezentují stav a chování různých systémů, aplikací a komponent infrastruktury. Tyto metriky mohou zahrnovat využití CPU, spotřebu paměti, síťový provoz, doby odezvy, chybovost a mnoho dalších relevantních ukazatelů. Analýzou těchto metrik můžete získat cenné poznatky o výkonu a zdraví vašeho prostředí.

Proč je sběr metrik důležitý?

Představení Prometheus a Grafana

Prometheus je open-source sada nástrojů pro monitorování systémů a upozorňování, původně vyvinutá ve společnosti SoundCloud. Vyniká ve sběru a ukládání časových řadových dat, což jsou data indexovaná časovými značkami. Prometheus používá model založený na stahování (pull-based model) k získávání (scrape) metrik z cílů (např. serverů, aplikací) v pravidelných intervalech. Nabízí výkonný dotazovací jazyk (PromQL) pro analýzu shromážděných dat a definování pravidel pro upozorňování.

Grafana je open-source platforma pro vizualizaci dat a monitorování. Umožňuje vytvářet interaktivní dashboardy a grafy pro vizualizaci dat z různých zdrojů, včetně Prometheus. Grafana poskytuje bohatou sadu vizualizačních možností, včetně grafů, diagramů, tabulek a měřidel. Podporuje také upozorňování, což vám umožňuje přijímat oznámení, když jsou překročeny určité prahové hodnoty.

Společně tvoří Prometheus a Grafana výkonné a flexibilní monitorovací řešení, které lze přizpůsobit široké škále prostředí a případů použití. Jsou hojně využívány v DevOps a SRE (Site Reliability Engineering) praxi po celém světě.

Architektura a koncepty Prometheus

Porozumění klíčovým komponentám Prometheus je zásadní pro efektivní implementaci a využití:

Pracovní postup Prometheus

  1. Cíle (Aplikace, Servery atd.) vystavují metriky. Tyto metriky jsou obvykle vystaveny přes HTTP endpoint.
  2. Prometheus Server získává metriky z nakonfigurovaných cílů. Periodicky stahuje metriky z těchto endpointů.
  3. Prometheus ukládá získané metriky do své časové řadové databáze.
  4. Uživatelé se dotazují na metriky pomocí PromQL. To jim umožňuje analyzovat data a vytvářet grafy a dashboardy.
  5. Pravidla pro upozorňování jsou vyhodnocována na základě uložených metrik. Pokud je splněna podmínka pravidla, je spuštěno upozornění.
  6. Alertmanager zpracovává spuštěná upozornění. Deduplikuje, seskupuje a směruje je do příslušných notifikačních kanálů.

Architektura a koncepty Grafana

Grafana doplňuje Prometheus tím, že poskytuje uživatelsky přívětivé rozhraní pro vizualizaci a analýzu shromážděných metrik:

Pracovní postup Grafana

  1. Nakonfigurujte zdroje dat: Připojte Grafanu k vašemu Prometheus serveru.
  2. Vytvořte dashboardy: Navrhněte dashboardy pro vizualizaci vašich metrik.
  3. Přidejte panely do dashboardů: Přidejte panely pro zobrazení specifických datových bodů z Prometheus pomocí PromQL dotazů.
  4. Nakonfigurujte upozorňování (Volitelné): Nastavte pravidla upozornění v Grafaně, abyste dostávali oznámení na základě specifických prahových hodnot metrik.
  5. Sdílejte dashboardy: Sdílejte dashboardy se svým týmem pro spolupráci na monitorování a analýze.

Nastavení Prometheus a Grafana

Tato sekce poskytuje podrobný návod na nastavení Prometheus a Grafana.

Instalace Prometheus

1. Stáhněte Prometheus:

Stáhněte nejnovější verzi Prometheus z oficiálních stránek: https://prometheus.io/download/. Vyberte vhodný balíček pro váš operační systém (např. Linux, Windows, macOS).

2. Rozbalte archiv:

Rozbalte stažený archiv do adresáře dle vašeho výběru.

3. Nakonfigurujte Prometheus:

Vytvořte konfigurační soubor `prometheus.yml`. Tento soubor definuje cíle, které bude Prometheus získávat, a další konfigurační možnosti. Základní konfigurace může vypadat takto:


global:
  scrape_interval:     15s
  evaluation_interval: 15s

scrape_configs:
  - job_name: 'prometheus'
    static_configs:
      - targets: ['localhost:9090']

  - job_name: 'node_exporter'
    static_configs:
      - targets: ['localhost:9100']

Tato konfigurace definuje dvě úlohy pro získávání metrik (scrape jobs): jednu pro samotný Prometheus (získává vlastní metriky) a jednu pro node_exporter běžící na localhost portu 9100. `scrape_interval` specifikuje, jak často bude Prometheus získávat data z cílů.

4. Spusťte Prometheus:

Spusťte spustitelný soubor Prometheus z adresáře, kam jste archiv rozbalili:

./prometheus --config.file=prometheus.yml

Prometheus se spustí a ve výchozím nastavení bude naslouchat na portu 9090. Webové rozhraní Prometheus můžete otevřít v prohlížeči na adrese http://localhost:9090.

Instalace Grafana

1. Stáhněte Grafana:

Stáhněte nejnovější verzi Grafana z oficiálních stránek: https://grafana.com/grafana/download. Vyberte vhodný balíček pro váš operační systém.

2. Nainstalujte Grafana:

Postupujte podle instalačních pokynů pro váš operační systém. Například na Debian/Ubuntu:


sudo apt-get update
sudo apt-get install -y apt-transport-https
sudo apt-get install -y software-properties-common wget
wget -q -O - https://packages.grafana.com/gpg.key | sudo apt-key add -
echo "deb https://packages.grafana.com/oss/deb stable main" | sudo tee -a /etc/apt/sources.list.d/grafana.list
sudo apt-get update
sudo apt-get install grafana

3. Spusťte Grafana:

Spusťte službu Grafana:

sudo systemctl start grafana-server

4. Přístup ke Grafana:

Grafana se spustí a ve výchozím nastavení bude naslouchat na portu 3000. Webové rozhraní Grafana můžete otevřít v prohlížeči na adrese http://localhost:3000.

Výchozí uživatelské jméno a heslo je `admin` a `admin`. Při prvním přihlášení budete vyzváni ke změně hesla.

Připojení Grafana k Prometheus

Abyste mohli vizualizovat metriky z Prometheus v Grafaně, musíte Prometheus nakonfigurovat jako zdroj dat v Grafaně.

1. Přidat zdroj dat:

Ve webovém rozhraní Grafana přejděte na Configuration > Data Sources a klikněte na Add data source.

2. Vyberte Prometheus:

Zvolte Prometheus jako typ zdroje dat.

3. Nakonfigurujte připojení k Prometheus:

Zadejte URL vašeho Prometheus serveru (např. `http://localhost:9090`). Podle potřeby nakonfigurujte další možnosti (např. autentizaci).

4. Uložit a otestovat:

Klikněte na Save & Test pro ověření, že se Grafana může úspěšně připojit k Prometheus.

Vytváření dashboardů v Grafaně

Jakmile propojíte Grafanu s Prometheus, můžete vytvářet dashboardy pro vizualizaci vašich metrik.

1. Vytvořit nový dashboard:

Ve webovém rozhraní Grafana klikněte na ikonu + v postranním panelu a vyberte Dashboard.

2. Přidat panel:

Klikněte na Add an empty panel pro přidání nového panelu do dashboardu.

3. Nakonfigurovat panel:


rate(process_cpu_seconds_total{job="node_exporter"}[5m])

Tento dotaz vypočítá rychlost změny času CPU využitého procesy, shromážděného pomocí node_exporter, za 5minutový interval.

4. Uložit dashboard:

Klikněte na ikonu uložení pro uložení dashboardu.

PromQL: Dotazovací jazyk Prometheus

PromQL je výkonný dotazovací jazyk používaný k získávání a manipulaci s metrikami uloženými v Prometheus. Umožňuje provádět širokou škálu operací, včetně:

Příklady PromQL


rate(process_cpu_seconds_total{job="node_exporter"}[5m])


node_memory_MemTotal_bytes - node_memory_MemAvailable_bytes


(node_filesystem_size_bytes{mountpoint="/"} - node_filesystem_free_bytes{mountpoint="/"}) / node_filesystem_size_bytes{mountpoint="/"} * 100


rate(http_requests_total[5m])

Naučit se PromQL je zásadní pro efektivní používání Prometheus a Grafana. Pro komplexní průvodce jazykem se podívejte do dokumentace Prometheus.

Upozorňování (Alerting) s Prometheus a Alertmanager

Prometheus poskytuje robustní systém upozorňování, který vám umožňuje definovat pravidla na základě hodnot metrik. Když je splněna podmínka pravidla, je spuštěno upozornění a Alertmanager se postará o proces oznámení.

Definování pravidel pro upozorňování

Pravidla pro upozorňování jsou definována v konfiguračním souboru `prometheus.yml`. Zde je příklad pravidla, které se spustí, když využití CPU překročí 80%:


rule_files:
  - "rules.yml"

Poté do souboru s názvem `rules.yml` umístěte pravidla jako toto:


groups:
- name: example
  rules:
  - alert: HighCPUUsage
    expr: rate(process_cpu_seconds_total{job="node_exporter"}[5m]) > 0.8
    for: 1m
    labels:
      severity: critical
    annotations:
      summary: "High CPU usage detected"
      description: "CPU usage is above 80% on {{ $labels.instance }}"

Vysvětlení:

Konfigurace Alertmanageru

Alertmanager se stará o směrování a oznamování upozornění. Musíte nakonfigurovat Alertmanager, aby specifikoval, kam mají být upozornění odeslána (např. e-mail, Slack, PagerDuty). Podrobné pokyny ke konfiguraci naleznete v dokumentaci Alertmanageru.

Minimální konfigurace `alertmanager.yml` může vypadat takto:


global:
  resolve_timeout: 5m

route:
  group_by: ['alertname']
  group_wait: 30s
  group_interval: 5m
  repeat_interval: 12h
  receiver: 'web.hook'

receivers:
- name: 'web.hook'
  webhook_configs:
  - url: 'http://localhost:8080/'

Tato konfigurace odesílá upozornění na webhook na localhost portu 8080. Můžete si přizpůsobit sekci `receivers` a použít služby jako Slack nebo e-mail.

Praktické příklady a případy použití

Prometheus a Grafana lze použít k monitorování široké škály aplikací a komponent infrastruktury. Zde jsou některé praktické příklady:

Příklad: Monitorování architektury mikroslužeb

V architektuře mikroslužeb lze Prometheus a Grafana použít k monitorování zdraví a výkonu jednotlivých služeb i celého systému. Každá služba může vystavovat své vlastní metriky, jako jsou míry požadavků, doby odezvy a chybovost. Prometheus pak může tyto metriky získávat a Grafana je může vizualizovat. To vám umožní rychle identifikovat úzká místa ve výkonu nebo selhání v konkrétních službách.

Pokročilé techniky a osvědčené postupy

Abyste z Prometheus a Grafana vytěžili maximum, zvažte následující pokročilé techniky a osvědčené postupy:

Odstraňování běžných problémů

I při pečlivém plánování a implementaci se můžete při používání Prometheus a Grafana setkat s problémy. Zde jsou některé běžné problémy a jejich řešení:

Alternativní monitorovací řešení

Ačkoli jsou Prometheus a Grafana výkonné nástroje, nejsou jedinou možností pro sběr a vizualizaci metrik. Mezi další populární monitorovací řešení patří:

Nejlepší monitorovací řešení pro vaši organizaci bude záviset na vašich specifických požadavcích a rozpočtu.

Závěr

Sběr metrik je nezbytný pro udržení zdraví a výkonu aplikací a infrastruktury. Prometheus a Grafana poskytují výkonné a flexibilní open-source řešení pro sběr, ukládání a vizualizaci metrik. Porozuměním základním konceptům a dodržováním osvědčených postupů uvedených v tomto průvodci můžete využít Prometheus a Grafana k vybudování robustního monitorovacího systému, který splní potřeby vaší organizace.

Efektivní monitorování, spojené s proaktivním upozorňováním a rychlou reakcí na incidenty, je základním kamenem moderních IT operací. Přijetí nástrojů jako Prometheus a Grafana umožňuje organizacím poskytovat spolehlivé a výkonné služby svým uživatelům, bez ohledu na jejich polohu nebo odvětví.