Operação e Monitoramento
Acessar Serviço Operação e Monitoramento (abre em nova aba)Especificação de monitoramento do RabbitMQ
Ativo monitorado: Mensageria RabbitMQ
Esta especificação descreve como a Neture monitora clusters de mensageria RabbitMQ: quais métricas são coletadas, quais itens são descobertos automaticamente e quais alertas são gerados, com a criticidade de cada um.
O que esta especificação cobre#
Disponibilidade e versão dos nós, objetos do cluster (conexões, canais, filas e exchanges), fluxo de mensagens, recursos de disco, memória e processamento dos nós, descoberta automática de filas, exchanges, processos e verificações de saúde, e a matriz de alertas.
A matriz de alertas tem 12 alertas, por prioridade:
- Emergencial: 1
- Alta: 7
- Média: 2
- Baixa: 2
1. Disponibilidade e ciclo de vida#
Indicadores coletados continuamente para confirmar que os nós do cluster estão acessíveis, registrar versão e reinicializações e acompanhar limites de recursos do sistema operacional.
| Métrica Monitorada | Descrição e Objetivo Operacional |
|---|---|
| Disponibilidade da API | Verifica continuamente a disponibilidade e o tempo de resposta das portas de comunicação e da camada de gerenciamento. |
| Tempo de atividade (uptime) | Tempo contínuo de execução de cada nó do cluster, em segundos. Permite identificar reinicializações inesperadas ou falhas de processo. |
| Versão do RabbitMQ e do plugin de gerenciamento | Registra a versão do RabbitMQ e de seus componentes de gerenciamento, para controle de atualizações. |
| Descritores de arquivo e sockets | Uso de descritores de arquivo e de conexões de rede no sistema operacional, em valor absoluto e em relação ao limite, para evitar o esgotamento por excesso de conexões. |
2. Objetos do cluster#
Totais de conexões, canais, filas, consumidores e exchanges do cluster.
| Métrica Monitorada | Descrição e Objetivo Operacional |
|---|---|
| Total de conexões | Número de conexões TCP abertas simultaneamente pelas aplicações clientes no cluster. |
| Total de canais | Quantidade de canais (conexões lógicas) abertos dentro das conexões. Indica se as aplicações estão reaproveitando conexões. |
| Filas e consumidores | Total de filas criadas e de consumidores conectados, para identificar filas sem nenhum consumidor. |
| Total de exchanges | Quantidade de exchanges declaradas, responsáveis por rotear as mensagens para as filas. |
3. Fluxo de mensagens#
Taxas de publicação, entrega e confirmação das mensagens em todo o cluster.
| Métrica Monitorada | Descrição e Objetivo Operacional |
|---|---|
| Mensagens publicadas | Total e taxa por segundo de mensagens enviadas pelos produtores às exchanges. |
| Entregas (deliveries) | Ritmo de entrega de mensagens aos consumidores, incluindo leituras sob demanda (get) e entregas por assinatura (push). |
| Confirmações (acks e confirms) | Confirmações emitidas pelos consumidores e pelo broker, que garantem o ciclo completo de entrega da mensagem. |
| Mensagens reentregues (redelivered) | Mensagens reenviadas porque o primeiro processamento falhou. Valores altos indicam problemas nas aplicações consumidoras. |
| Mensagens sem rota (unroutable) | Mensagens devolvidas por não haver fila de destino, o que indica erros nas chaves de roteamento (routing keys). |
4. Recursos do nó: disco, memória e processamento#
Métricas da máquina virtual Erlang, que executa o RabbitMQ, ligadas ao uso de memória, ao armazenamento e à persistência das mensagens.
| Métrica Monitorada | Descrição e Objetivo Operacional |
|---|---|
| Espaço em disco disponível e limite | Espaço livre em disco e limite mínimo configurado. Quando o limite (disk_free_limit) é atingido, o broker bloqueia a entrada de novas mensagens para evitar corrupção. |
| Uso de memória e limite (marca d'água) | Memória consumida em relação ao limite configurado (mem_limit). Ao atingir o limite, o broker aplica bloqueios preventivos. |
| Fila de execução (run queue) | Quantidade média de processos Erlang aguardando CPU no escalonador. Valores altos indicam sobrecarga de processamento. |
5. Monitoramento dinâmico#
Itens descobertos automaticamente no cluster. Quando um novo item é encontrado, as métricas abaixo passam a ser coletadas para ele, sem cadastro manual.
A. Descoberta de filas#
Identifica a criação ou remoção de filas e coleta, para cada uma:
- Total de mensagens: mensagens aguardando consumo ou pendentes de confirmação.
- Mensagens prontas (ready): mensagens disponíveis para consumo imediato.
- Mensagens sem confirmação (unacknowledged): mensagens já entregues aos consumidores, mas ainda sem confirmação de processamento. Ajuda a identificar gargalos.
- Memória por fila: bytes de memória usados por cada fila (incluindo estruturas internas, stack e heap), para identificar filas com consumo anormal.
- Taxas por fila: publicações, entregas e confirmações por segundo.
B. Descoberta de exchanges#
Identifica as exchanges de cada vhost, por tipo, e coleta o tráfego de entrada e a distribuição de mensagens para as filas vinculadas.
C. Descoberta de processos#
Identifica os processos do RabbitMQ no sistema operacional e coleta uso percentual de CPU, memória física residente (RSS) e memória virtual.
D. Descoberta de verificações de saúde#
De acordo com a versão do RabbitMQ em execução, ativa automaticamente verificações de saúde (health checks) adicionais:
- Certificados TLS/SSL: verifica a validade e a data de expiração dos certificados configurados nas portas de escuta (listeners) e avisa antes do vencimento.
- Alta disponibilidade das filas: detecta filas replicadas (quorum queues e streams) operando abaixo do quórum mínimo e, no RabbitMQ 3.x, filas espelhadas clássicas (classic mirrored queues) sem réplicas sincronizadas, o que pode causar perda de dados em caso de falha de um nó. As filas espelhadas clássicas foram removidas no RabbitMQ 4.0; a partir dessa versão, só as filas de quórum e os streams são verificados.
- Alarmes do cluster: captura alarmes ativos em qualquer nó ou host virtual (vhost) do ambiente.
6. Matriz de alertas operacionais#
Quando uma das condições abaixo é atingida, a engenharia da Neture é notificada com a prioridade indicada. Os alertas estão ordenados da prioridade mais alta para a mais baixa. Para saber como os alertas são tratados e comunicados, consulte Alertas de monitoramento.
Condição técnica: o processo principal do RabbitMQ não foi encontrado em execução. O recebimento e a entrega de mensagens estão parados, afetando as integrações que dependem da mensageria.
Condição técnica: o espaço livre em disco do nó ficou abaixo do limite configurado. A publicação de mensagens foi bloqueada preventivamente para preservar a consistência dos dados.
Condição técnica: o consumo de memória ultrapassou a marca d'água configurada. Novas publicações ficam bloqueadas até a memória ser liberada.
Condição técnica: as verificações de saúde detectaram alarmes ativos no cluster ou nós inacessíveis.
Condição técnica: há filas de quórum ou streams abaixo do quórum mínimo ou, no RabbitMQ 3.x, filas espelhadas clássicas sem espelhos (mirrors) sincronizados. Existe risco de perda de mensagens se um nó for desligado.
Condição técnica: os nós do cluster estão sem comunicação entre si há mais de 5 minutos, com risco de divergência de dados entre eles.
Condição técnica: o tempo de resposta das conexões TCP ficou acima de 10 segundos de forma contínua durante 5 minutos.
Condição técnica: um certificado usado nas conexões criptografadas da mensageria vence no próximo mês e precisa ser renovado.
Condição técnica: a quantidade de mensagens retidas em uma fila ficou acima do limite padrão por mais de 5 minutos, o que sugere lentidão ou parada dos consumidores.
Condição técnica: os coletores estão sobrecarregados ou não há envio de dados de monitoramento do cluster por mais de 30 minutos.
Condição técnica: a versão do RabbitMQ mudou. Registrado para manter o histórico de atualizações.
Condição técnica: o tempo de atividade de um nó está abaixo de 10 minutos, indicando uma reinicialização recente, como ao fim de uma manutenção programada.
Especificação técnica de referência para ativos sob monitoramento da Neture.
Este artigo ajudou?
Obrigado pelo retorno!
Obrigado. Conte o que faltou neste artigo para [email protected]: usamos as sugestões para melhorar a documentação.