Создание SLO-алерта

На главной странице Monium слева выберите Алерты и SLO → Алерты.

Вверху справа нажмите Создать алерт → SLO.

Укажите основные параметры алерта:

• Название — произвольное название алерта.

• ID — уникальный идентификатор алерта с префиксом проекта. Если не задан, генерируется автоматически. После создания алерта изменить ID нельзя.

• Описание — назначение алерта или комментарий.

• Уровень алерта — уровень критичности алерта. Выбирайте уровень по влиянию события:

  • Unspecified — черновик или тест без выбранного уровня.
  • Disaster — недоступность сервиса или риск потери данных.
  • Critical — деградация сервиса или нехватка ресурсов.
  • Info — плановая операция или тестовый алерт.

В поле Тип выберите:

• Error Budget — контролирует остаток бюджета ошибок или его фактический расход за окно алерта.
• Burn Rate — контролирует скорость расхода бюджета ошибок. Подходит для дежурства и быстрого обнаружения инцидентов.

Подробнее о различиях проверок в разделе SLO-алерты.

В блоке Настройки алерта выберите проект, в котором находится SLO, и сам SLO. Проект SLO может отличаться от проекта алерта. Собственные запросы к метрикам задавать не нужно.

В блоке Условия срабатывания настройте параметры, при которых будет изменяться статус алерта.

Задайте хотя бы один порог: Warning или Alarm.

Для типа Error Budget в поле Метод расчета выберите один из методов:

• Остаток Error Budget — проверка среднего остатка бюджета за окно вычисления алерта. Укажите минимальный допустимый остаток в процентах. Например, задайте 20% для Warning и 10% для Alarm. Если заданы оба порога, значение Alarm должно быть меньше значения Warning.
• Скорость расхода Error Budget — проверка разности остатков бюджета в начале и конце окна. Задайте Окно вычисления и пороги допустимого расхода в процентах. Например, при окне 1h и пороге Alarm, равном 5%, алерт сработает, если за час потрачено больше 5% бюджета. Если заданы оба порога, значение Alarm должно быть больше значения Warning.

Для типа Burn Rate настройте окно вычисления и пороги:

1. Выберите длинное окно вычисления. Короткое окно определяется автоматически и составляет 1/12 длинного: например, 5m для длинного окна 1h.
2. Выберите способ задания порогов: коэффициент Burn Rate или процент расхода бюджета за окно алерта.
3. Укажите выбранные пороги в заданных единицах. Если заданы оба, значение Alarm должно быть больше значения Warning. Например, для SLO с окном 30 дней коэффициент 14.4 на окне 1h соответствует расходу 2% бюджета за час.

Алерт типа Burn Rate срабатывает, когда коэффициенты на длинном и коротком окнах превышают соответствующий порог. Подробнее об окнах проверки и способах задания порогов.

Настройте прореживание данных или оставьте значения по умолчанию.

Задайте политики обработки отсутствия данных. Чтобы отличать отсутствие данных от выполнения SLO, установите No data для отсутствия метрик и отсутствия точек в окне вычисления.

(Опционально) Укажите аннотации к алерту.

(Опционально) Для сортировки и поиска алертов добавьте лейблы в формате ключ=значение.

Разделяйте пары ключ=значение запятыми. Чтобы использовать лейблы в другом алерте или в строке поиска, нажмите кнопку Скопировать все лейблы.

(Опционально) В блоке Ссылки добавьте ссылки на связанные ресурсы.

Настройте уведомления. Если у вас нет канала уведомлений, создайте его.

Если для выбранного уровня алерта настроены способы уведомлений по умолчанию, они применяются и при пустой таблице уведомлений. Для настройки нажмите Редактировать. Проверьте значения параметров Статус срабатывания и Повторная отправка.

Чтобы не получать уведомление при каждой смене статуса, включите Подавление шума. Используйте настройку для SLO с низким трафиком, когда статус может кратковременно меняться из-за небольшого числа событий. Подробнее о подавлении шума в разделе Подавление шума.

Проверьте результат вычисления алерта.

Вверху справа нажмите Проверить результат. Monium пересчитает алерт по текущим настройкам и покажет вычисленный статус, график и значения переменных. Проверка позволяет оценить доступность данных и корректность настроек алерта.

Нажмите Создать. Алерт появится в списке.