Alertando sobre nivel de servicio

Uno de los resultados prometidos al implementar el nivel de servicio es que podrá ajustar su política de alertas y reducir las notificaciones a aquellos problemas que realmente están dañando la experiencia de su cliente y representan un riesgo para su negocio.

Cuando estableces objetivos de nivel de servicio, puedes configurar alertasque te informará en caso de que se agote tu presupuesto de errores antes de que finalice el período de cumplimiento. Estas alertas le mostrarán cuando ocurran incidentes de alto impacto comercial. Cuando se activan, se les debe dar prioridad y usted debe involucrar a los equipos relevantes para comenzar a diagnosticar el origen del problema.

Alertas sobre la tasa de consumo de presupuesto por errores

La idea detrás de la alerta de tasa de grabación es que el presupuesto de error representa cuántos eventos malos puede permitirse durante el período de SLO; por definición, si gasta todo su presupuesto de errores a una tasa constante, su tasa de quema = 1. Entonces, cualquier tasa de quemado por encima de la tasa de quemado tolerable no sería sostenible porque habría quemado por completo el presupuesto de error antes de que finalice el período de SLO; por lo tanto, es posible que desee recibir una alerta si ese es el caso durante un período de tiempo continuo.

Crear alerta sobre la tasa de consumo de presupuesto de errores

Encontrará la opción de crear alertas en las páginas de resumen de nivel de servicio y condición de alerta.

Al hacer clic en él, se abrirá un panel lateral y verá la opción de alertar sobre la velocidad de grabación rápida en la parte superior de la lista y la de grabación lenta debajo de ella.

La alerta de combustión rápida sigue la recomendación de Google para los porcentajes de consumo de presupuesto de SLO, específicamente para alertas de combustión rápida. Estas alertas te avisarán de un cambio repentino y significativo en el consumo que, de no corregirse, agotará tu presupuesto de errores muy pronto. Estableceremos un consumo de presupuesto de SLO del 2 % en 1 hora, lo que significa que el servicio consumiría el presupuesto de error por completo en 50 horas si no se alcanza.

La alerta de combustión lenta sigue la recomendación de Google para los porcentajes de consumo del presupuesto de SLO, específicamente para alertas de combustión lenta. Estas alertas te avisarán de un cambio en el consumo que, de no modificarse, agotará tu presupuesto de errores antes de que finalice el periodo de cumplimiento. Estableceremos un consumo de presupuesto de SLO del 5 % en 6 horas, lo que significa que el servicio consumiría el presupuesto de error por completo en 5 días si no se alcanza.

Deberá seleccionar una política de alertas existente o crear una nueva para continuar.

Alternativamente, puede hacer clic en "Personalizar" y establecer su propio umbral.

Alertar sobre el consumo de presupuesto de error

Esta alerta le avisará una vez que haya consumido el 80% de su presupuesto de errores para el período.

Para configurarlo, haga clic en Alert en las páginas de resumen de nivel de servicio o condición de alerta y seleccione la opción Error budget consumption .

Deberá seleccionar una política de alertas existente o crear una nueva para continuar.

Si desea establecer un umbral diferente, haga clic en Customize y siga los pasos en la tarjeta de configuración de alerta.

Alertas sobre el cumplimiento de SLO

Si desea configurar una alerta para cuando su SLO esté por debajo de su objetivo durante un período prolongado, puede seleccionar la opción SLO compliance .

Si su SLI es volátil, este tipo de alerta podría tener baja precisión. Por lo tanto, debería utilizar una alerta de tasa de grabación para mitigarlo.

Configurar su propio umbral de tasa de consumo de presupuesto de errores

Si no desea seguir la recomendación de Google para la alerta de grabación rápida, puede configurar su propio umbral.

Establece tu umbral de condición

La tasa de quema del presupuesto de errores indica qué tan rápido el servicio consume el presupuesto de errores, teniendo en cuenta todo el período de SLO. Aquí tienes una fórmula para calcularlo:

critical burn rate = (tolerated budget consumption * SLO period [h]) / (evaluation period [h])

• Consumo de presupuesto tolerado: cuánto presupuesto tolera consumir en el período de evaluación.
• Período de SLO: ventana de tiempo de su SLO (generalmente, en horas).
• Período de evaluación: ventana de agregación que estamos tomando en consideración (puede usar 1 hora en la ventana de agregación de condición de alerta para simplificar).

Sin embargo, considerando que la tasa máxima de errores que puede ocurrir es del 100%, significa que también hay una tasa de quemado máxima y por lo tanto la tasa de quemado crítica debe estar en el rango de:

0 < critical burn rate < maximum burn rate

Donde el valor máximo de la tasa de combustión se calcula de la siguiente manera:

maximum burn rate = 1 / (1 - SLO target)

Finalmente, para definir su umbral de alerta, multiplicará la tasa de grabación crítica por hora por el presupuesto de error:

threshold = error budget * critical burn rate

Ejemplo

Veamos cómo funciona esto con un ejemplo para un SLO 28 day con un objetivo 99.9% .

Para un SLO de 28 días, Google recomienda alertar sobre un 2% consumo de presupuesto de SLO in the last hour. Eso significa que si sigue quemando el presupuesto al mismo ritmo, incumplirá su SLO en 50 horas (como resultado de 100% / 2%).

Entonces tenemos las siguientes variables:

• Objetivo SLO: 99.9%
• Período de SLO: 28 days (28 * 24 hours)
• Consumo presupuestario tolerado: 2% (0.02)
• Periodo de evaluacion: 1 hour

Por lo tanto:

critical burn rate per hour = (0.02 * 28 * 24) / 1 = 13.44

Donde el valor máximo posible de velocidad de grabación para el SLO es:

maximum burn rate = 1 / (1 - 0.999) = 1000

Y finalmente:

threshold = 0.1 * 13.44 = 1.344

Este sería un valor que usaría como umbral de condición de alerta: abra un incidente cuando la consulta devuelva un valor superior al umbral (en este ejemplo, 1,344), al menos una vez en el período de evaluación (en este ejemplo, 60 minutos). .

Ajustes

Es importante ajustar el parámetro adicional de esta condición de alerta.

Establezca la duración de la ventana en el período de evaluación. Siguiendo el ejemplo anterior, establecería 60 minutes, lo que significa que el sistema de alerta agregaría 60 minutos de datos.

Puedes usar una diapositiva 60 seconds por intervalo, para que cada minuto New Relic evalúe los 60 minutos de datos anteriores.

A continuación, conecte la condición a la política que determina cómo se gestionan las notificaciones.

Por último, puede elegir cuándo cerrar automáticamente cualquier incidente abierto.

Comprender la política de alertas predeterminada del nivel de servicio

Se introdujo la política de alertas predeterminada del nivel de servicio, a nivel de cuenta, para que el estado de salud del nivel de servicio se base en su presupuesto de error restante. Esto mejora su experiencia al utilizar otros productos New Relic, como New Relic Navigator y carga de trabajo.

Esta política de alertas no activará ninguna notificación y, en caso de que prefiera no tener el estado de la entidad en función de su consumo de presupuesto de errores, puede eliminar fácilmente esta política. Sin embargo, eliminar la política es permanente y afectará el nivel de servicio nuevo y existente para esa cuenta.