Monitoramento NOC — Observabilidade Própria
Painel único de observabilidade de servidores, filas e jobs, feito para rodar numa TV de operações.
0
filas monitoradas
0 s
intervalo de coleta
0
hosts no scrape
O problema
O monitoramento estava espalhado em três lugares e as telas do Grafana eram difíceis de ler para quem não é técnico. Fila travada, servidor sem disco ou deploy fora do ar costumavam ser descobertos pelo usuário, não pelo time.
A solução
Mantive o Prometheus como fonte da verdade e troquei só a apresentação — decisão registrada em ADR, sem migrar nenhum dado. Um BFF em Go traduz PromQL em respostas prontas para um front React + ECharts em modo kiosk, com a playlist de telas guardada na URL para a TV do NOC girar sozinha. Onde não havia métrica, eu criei: um exporter próprio para as filas RabbitMQ e um textfile collector que mostra se cada servidor está com o deploy íntegro.
Como os dados fluem
O que fez diferença
- 01
ADR: manter Prometheus + Alertmanager e substituir só a visualização — menos risco, zero migração
- 02
Exporter de filas RabbitMQ em Go só com a biblioteca padrão, com alerta e auto-rebuild exercitados em produção
- 03
Integridade de deploy em 10 servidores via textfile collector do node-exporter
- 04
Painel de defasagem com 45 datasets e tela de jobs do Oracle com os maiores ofensores
- 05
Alertas no Discord, com regras pensadas para acordar alguém só quando importa
Em números