BullMQ Queue Monitoring: del límite a la fila verificada
Utilice BullMQ Queue Monitoring en un límite de aplicación controlado, mantenga el contrato de evento pequeño y verifique un resultado conocido antes de crear vistas agregadas.
- 1
Elige el resultado
Salud del trabajador de BullMQ
- 2
Definir el contrato
job_id, job_name, queue_name y estado
- 3
Instrumentar el límite
Utilice el ID de trabajo de BullMQ como ID lógico y registre los intentos por separado.
- 4
Verificar la evidencia
Exercise a known fixture, then inspect job_completed for one correctly typed terminal row.
Antes de empezar
Requisitos previos y límites
- Un TELEMETRY_API_KEY del lado del servidor
- Nombres de trabajos estables y nombres de colas
- Marcas de tiempo de trabajo conservadas en todos los reintentos
Configuración de entrega
Instalar e inicializar el lado del servidor
Importe telemetry-sh en código solo de servidor e inicialícelo una vez con Process.env.TELEMETRY_API_KEY. Mantenga las credenciales de ingesta fuera de los paquetes de navegador, las variables de entorno visibles para el cliente, el control de fuente, los registros y los mensajes de excepción.
Instalación npm
npm install telemetry-sh- 1Prepare un cliente de entrega del lado del servidor reutilizable con comportamiento de red limitado.
- 2Agregue el evento de resultado en el límite de éxito, error, reintento o tiempo de espera.
- 3Envíe accesorios controlados e inspeccione las filas almacenadas antes de habilitar una alerta.
Fragmento
Comience con un evento estructurado
Agregue esta forma donde el flujo de trabajo se completa, falla o se vuelve a intentar. Luego cree el panel a partir de campos reales.
Evento BullMQ Queue Monitoring
worker.on("completed", async (job, result) => {
await telemetry.log("job_completed", {
job_id: String(job.id),
job_name: job.name,
queue_name: worker.name,
status: "success",
attempt: job.attemptsMade + 1,
queue_wait_ms: job.processedOn - job.timestamp,
duration_ms: job.finishedOn - job.processedOn,
item_count: result?.itemCount,
});
});Contrato de evento
job_id, job_name, queue_name y estado
intento, queue_wait_ms, duration_ms y error_type
item_count, worker_name y versión
Puntos de control de implementación
Punto de control 1
Utilice el ID de trabajo de BullMQ como ID lógico y registre los intentos por separado.
Punto de control 2
Derive la espera en cola a partir del tiempo de puesta en cola original en lugar del tiempo de reintento.
Punto de control 3
Nunca registre job.data al por mayor porque a menudo contiene cargas útiles de clientes.
Verificación
Demuestra que el evento llegó
Ejecute esto después de ejercitar casos conocidos de éxito y fracaso. Reemplace el nombre de la tabla alternativa si su contrato de evento final difiere del fragmento.
Consulta de verificación BullMQ Queue Monitoring
SELECT *
FROM job_completed
ORDER BY timestamp_utc DESC
LIMIT 20;Referencias de implementación
Revise el contrato del evento, la guía de seguridad de los datos y la documentación primaria previa antes de habilitar una nueva ruta de producción.
Límite de producción
Mantenga el evento de resultado pequeño y recuperable
Este patrón proporciona
- Un resultado limitado y listo para SQL junto al flujo de trabajo ascendente.
- Campos estables para paneles, alertas y correlación entre eventos.
- Una ruta basada en dispositivos para validar el comportamiento de éxito, fracaso, reintento y tiempo de espera.
Este patrón no proporciona
- Un exportador de OTLP, un canal de recopilación automática o un reemplazo para seguimientos detallados y registros de diagnóstico.
- Entrega exactamente una vez simplemente porque la carga útil contiene un ID de evento.
- Permiso para recopilar cargas útiles sin procesar del proveedor, contenido de usuario, credenciales o datos regulados.
Puntos de partida del esquema de eventos
Contratos de eventos para este flujo de trabajo
Revise el detalle de la fila, el límite de emisión, los tipos requeridos, las clases de privacidad, la carga útil de ejemplo y la lista de verificación de validación antes de adaptar una consulta o fragmento a producción.
Función relacionada del producto
Continúe este flujo de trabajo en Alertas
Promueva la consulta de confiabilidad revisada a un umbral propio y un flujo de trabajo de respuesta.
Recetas SQL relacionadas
Responde la siguiente pregunta con SQL
Ejecute la consulta en los campos estructurados de este flujo de trabajo, inspeccione el resultado del ejemplo y convierta una respuesta útil en un panel o alerta.
Medir el reintento del trabajo en segundo plano y la tasa de fallas
¿Qué trabajos en segundo plano consumen más reintentos o aún fallan?
Receta abiertaMedir el tiempo de espera de la cola por trabajo
¿Qué trabajos esperan más tiempo antes de que un trabajador los inicie?
Receta abiertaMedir el crecimiento de la cola de mensajes fallidos
¿Qué colas agregan trabajos fallidos más rápido de lo que los resuelven?
Receta abiertaDetectar tormentas de reintentos de trabajos en segundo plano
¿Qué tipos de trabajos dedican más trabajo a los reintentos en este momento?
Receta abiertaExplorar por familia de implementación
Comparar patrones de integración relacionados
Plantillas para combinar con esta integración
Más integraciones
Cola RabbitMQ Telemetry
Realice un seguimiento de la confirmación de publicación, entrega, acuse de recibo, reenvío, espera en cola, reintentos y resultados de mensajes fallidos de RabbitMQ con eventos estructurados.
abrir guiaBus de servicio de Azure Telemetry
Realice un seguimiento de los envíos, recepciones, renovación de bloqueos, liquidación, reenvío, aplazamiento y resultados de mensajes fallidos de Azure Service Bus sin recopilar cuerpos de mensajes.
abrir guiaMonitoreo de eventos estructurados de Django y Apio
Conecte los resultados de las solicitudes de Django y los ciclos de vida de las tareas de Celery con identificadores seguros, latencia, reintentos y estado del terminal.
abrir guia