安裝 Prometheus

1. Grafana - 視覺化工具，可以用圖形顯示監控的資料。（其實還可以做 distribute tracing, log 查詢）
2. Prometheus。
3. Prometheus Operator - 提供 Kubernetes CRD，讓我們透過 CRD 設定 Prometheus 的設定。
4. Prometheus Node Exporter - 蒐集 Kubernetes Worker Node 的資訊（Linux 提供的資訊）。
5. kube-state-metrics - 蒐集 Kubernetes 的資訊（Kubernetes API Server 提供的資訊）。
6. Prometheus Adapter for Kubernetes Metrics APIs.

安裝 kube-prometheus-stack

$ helm repo add prometheus-community https://prometheus-community.github.io/helm-charts

$ helm repo update

$ helm install kube-prometheus-stack prometheus-community/kube-prometheus-stack -n monitoring --create-namespace

檢視 Web UI

kubectl port-forward service/prometheus-kube-prometheus-prometheus 9090

kubectl port-forward svc/prometheus-kube-prometheus-alertmanager 9093

kubectl port-forward deployment/prometheus-grafana 3000

user: admin

pwd: prom-operator

PodMonitor, ServiceMonitor

prometheus.prometheusSpec.podMonitorSelectorNilUsesHelmValues

prometheus.prometheusSpec.serviceMonitorSelectorNilUsesHelmValues