Tengo grupos de 4 nodos:
- Centro de Monitoreo, alojamiento
- un Grafana, conectado a todas las instancias de Prometheus y Loki + AlertManager local
- un Prometheus raspando NodeExporter/AlertManager/Loki/Promtail local (un trabajo por objetivo), con reglas
- un Loki, un Promtail, un NodeExporter, un AlertManger configurado con Slack
- Producción/Puesta en escena/desarrollador, alojamiento
- nuestra aplicación
- un Redis, un PostGreSQL
- un Prometheus que raspa NodeExporter/AlertManager/Loki/Promtail/Redis/PostGreSQL local (un trabajo por objetivo), con reglas
- un Loki, un Promtail, un NodeExporter, un AlertManger configurado con Slack
- un Traefik para exponer a Prometeo/Loki
Me preguntaba que tener 1 Prometheus/Loki/AlertManager por nodo es la forma correcta de hacerlo, o si solo debería tener uno para toda la infraestructura, teniendo múltiples objetivos por trabajo de Prometheus.