Мониторинг состояния кластера Greenplum® и хостов

1. Перейдите на страницу каталога и выберите сервис Managed Service for Greenplum.
2. Нажмите на имя нужного кластера и выберите вкладку Мониторинг.

3. Чтобы перейти к работе с метриками, дашбордами или алертами в сервисе Yandex Monitoring, нажмите кнопку Открыть в Monitoring на панели сверху.

На странице отображаются следующие графики:

• Alive hosts — работоспособность хостов кластера.

• Alive segments — работоспособность первичного и резервного мастеров, основных и зеркальных сегментов.

• Connections — количество подключений к БД в каждом из состояний:

  • Active — активные;
  • Waiting — ожидают;
  • Idle — простаивают;
  • Idle in transaction — простаивают в транзакции;
  • Aborted — прерванные.

• Group resource cpu — загрузка процессорных ядер по группам процессов:

  • admin_group — в административной группе;
  • default_group — в группе по умолчанию.

• Group resource memory — использование оперативной памяти (в байтах) по группам процессов:

  • admin_group — в административной группе;
  • default_group — в группе по умолчанию.

• Master — определение первичного хоста-мастера.

• Master replication lag — отставание репликации мастера (в байтах).

• Master replication state — работоспособность репликации мастера.

• Segment health — количество сегментов с различной работоспособностью:

  • total — все;
  • not sync — несинхронизированные;
  • down — недоступные;
  • not prefer role — непредпочтительные.

• Spill files count — количество временных файлов.

• Spill files size — суммарный размер временных файлов (в байтах).

• Xid wraparound — использование последовательности идентификаторов транзакций (в процентах).

• Background activities — группа графиков, показывающих информацию о фоновых процессах:

  • Tables vacuum age — количество пользовательских таблиц, очистка которых выполнялась N дней назад.

  • Tables analyze age — количество пользовательских таблиц, сбор статистики для которых выполнялся N дней назад.

  • Expansion progress — ход процесса перераспределения данных при расширении кластера:

    • Tables — процент обработанных таблиц.
    • Bytes — процент перераспределенных байт данных.

    Примечание

    Этот график показывает ход процесса, даже если перераспределение данных было запущено не в виде фонового процесса.

1. Перейдите на страницу каталога и выберите сервис Managed Service for Greenplum.
2. Нажмите на имя нужного кластера и выберите вкладку Хосты → Мониторинги.
3. Выберите нужный хост из выпадающего списка.

На этой странице выводятся графики, показывающие нагрузку на отдельный хост кластера (мастер или сегмент):

• CPU — загрузка процессорных ядер. При повышении нагрузки значение Idle уменьшается.
• Disk IOPS in progress — количество незавершенных дисковых операций.
• Disk io time — длительность дисковых операций.
• Disk read and write — объем дисковых операций (в байтах).
• Disk read and write time — длительность дисковых операций чтения и записи.
• Disk usage — использование дискового пространства (выводится два графика: в байтах и в процентах).
• Memory usage — использование оперативной памяти (в байтах). При высоких нагрузках значение параметра Free уменьшается, а значения остальных — растут.
• Network — объем данных, переданных по сети (в байтах).

1. Перейдите на страницу каталога и выберите сервис Managed Service for Greenplum.
2. Нажмите на имя нужного кластера и выберите вкладку Мониторинг → Сеть.

На этой странице отображаются следующие графики:

• Interfaces:

  • Сlient Interface Packets — число полученных и отправленных пакетов на клиентском сетевом интерфейсе.
  • Сlient Interface Bytes — объем полученных и отправленных данных на клиентском сетевом интерфейсе (в байтах).
  • Client Interface Drops and Errors — число ошибок и отброшенных пакетов при отправке и передаче на клиентском сетевом интерфейсе.
  • Service Interface Packets — число полученных и отправленных пакетов на сервисном сетевом интерфейсе.
  • Service Interface Bytes — объем полученных и отправленных данных на сервисном сетевом интерфейсе (в байтах).
  • Service Interface Drops and Errors — число ошибок и отброшенных пакетов при отправке и передаче на сервисном сетевом интерфейсе.

• CPU:

  • Cpu Usage — использование процессорных ядер (в процентах).

• Ping and SSH response time:

  • Host Ping Average Response — среднее время ответа пинга (в миллисекундах).
  • Host Ping Packet Loss — потерянные пакеты пинга (в процентах).
  • Host SSH Response Time — время ответа при подключении через SSH (в миллисекундах).

• TCP counters:

  • TcpActiveConnection — число активных TCP-соединений в состоянии ESTABLISHED или CLOSE-WAIT.
  • TCP Errors — число ошибок при передаче TCP-пакетов.
  • TcpEstabResets — число раз, когда TCP-соединения совершали прямой переход в состояние CLOSED либо из состояния ESTABLISHED, либо из состояния CLOSE-WAIT.
  • TCP Retransmission — число TCP-пакетов, переданных повторно.

• ICMP Counters:

  • IcmpErrors — число ICMP-сообщений об ошибках.
  • Icmp6PacketsTooBig — число ICMPv6-сообщений о слишком больших пакетах.
  • IcmpDestUnreached — число ICMP- и ICMPv6-сообщений о недоступности назначения.

• UDP counters:

  • UdpSndbufErrors — число ошибок буфера при отправке UDP-пакетов.
  • UDP Datagrams — число UDP-пакетов.
  • UdpRcvbufErrors — число ошибок буфера при приеме UDP-пакетов.
  • UDP NoPorts — число принятых UDP-пакетов, для которых на порте назначения не было слушателя.

• IP:

  • IpMulticastPackets — число полученных и отправленных многоадресных пакетов.
  • Ip6 Neighbor Discovery — число отправленных запросов и объявлений маршрутизаторов.
  • IpBroadcastPackets — число полученных и отправленных широковещательных пакетов.
  • Ip6NoRoutes — число IPv6-пакетов, сброшенных из-за отсутствия маршрута.

1. Перейдите на страницу каталога и выберите сервис Managed Service for Greenplum.
2. Нажмите на имя нужного кластера и выберите вкладку Мониторинг → PXF.

На этой странице отображаются следующие графики:

• Liveness — состояние PXF на хостах.

• Connections — число подключений.

• Log messages — число сообщений типа warn, trace, info, fatal, error и debug.

• File handles — число файлов, открытых в процессе PXF.

• JVM memory — использование памяти JVM PXF (в ГБ).

• PXF threads — число потоков PXF.

• Sent data — объем отправленных данных.

• Sent records — число записей, отправленных PXF.

• JVM Threads — число потоков JVM PXF.

• PXF Busy threads — число занятых потоков PXF.

• Received data — объем полученных данных.

• Received records — число записей, полученных PXF.

1. В консоли управления выберите каталог с кластером, для которого нужно настроить алерты.
2. В списке сервисов выберите  Monitoring.
3. В блоке Сервисные дашборды выберите:
   • Managed Service for Greenplum® — Cluster Overview для настройки алертов кластера;
   • Managed Service for Greenplum® — Host Overview для настройки алертов хостов.
4. На нужном графике с показателями нажмите на значок и выберите пункт Создать алерт.
5. Если показателей на графике больше одного, выберите запрос данных для формирования метрики и нажмите Продолжить. Подробнее о языке запросов см. в документации Yandex Monitoring.
6. Задайте значения порогов Alarm и Warning для оповещения.
7. Нажмите кнопку Создать алерт.

1. Создайте алерт.
2. Добавьте метрику состояния.
3. Задайте значения порогов для оповещения в параметрах алерта.