Eu tenho clusters de 4 nós:
- Centro de Monitoramento, hospedagem
- um Grafana, conectado a todas as instâncias do Prometheus e Loki + AlertManager local
- um Prometheus raspando NodeExporter/AlertManager/Loki/Promtail local (um trabalho por destino), com regras
- um Loki, um Promtail, um NodeExporter, um AlertManger configurado com Slack
- Produção/Encenação/Desenvolvedor, hospedagem
- nosso aplicativo
- um Redis, um PostGreSQL
- um Prometheus raspando NodeExporter/AlertManager/Loki/Promtail/Redis/PostGreSQL local (um trabalho por destino), com regras
- um Loki, um Promtail, um NodeExporter, um AlertManger configurado com Slack
- um Traefik para expor Prometheus/Loki
Fiquei me perguntando se ter 1 Prometheus/Loki/AlertManager por nó é a maneira certa de fazer isso, ou se devo ter apenas um para toda a infraestrutura, tendo vários alvos por trabalho do Prometheus?