Общие вопросы про Managed Service for Sharded PostgreSQL

• Что такое Managed Service for Sharded PostgreSQL?

• Какие преимущества предоставляет Managed Service for Sharded PostgreSQL?

• В каких случаях стоит использовать Managed Service for Sharded PostgreSQL?

• В каких случаях мне не подходит Managed Service for Sharded PostgreSQL?

• Поддерживаются ли JSONB и большие объекты?

• Зачем использовать Managed Service for Sharded PostgreSQL вместо Yandex Managed Service for YDB?

• Может ли кластер Managed Service for PostgreSQL из нескольких хостов быть шардом в Managed Service for Sharded PostgreSQL?

• Имеет ли смысл переносить мощные инстансы PostgreSQL (например, 96 vCPU) на Sharded PostgreSQL?

• Чем Managed Service for Sharded PostgreSQL отличается от Neon?

• Чем Managed Service for Sharded PostgreSQL отличается от Citus/Vitess?

• Как начать работу с сервисом Managed Service for Sharded PostgreSQL?

Что такое Managed Service for Sharded PostgreSQL?Что такое Managed Service for Sharded PostgreSQL?

Managed Service for Sharded PostgreSQL (Sharded PostgreSQL) — это управляемый сервис для горизонтального масштабирования PostgreSQL через автоматическое шардирование. Он функционирует как интеллектуальный прокси-роутер, который обрабатывает SQL-запросы и распределяет их по шардам на основе заданных правил — ключей шардирования. При этом сервис Managed Service for Sharded PostgreSQL:

• Использует высокодоступные кластеры как основу шардирования для максимальной надежности.
• Сохраняет доступность кластера при переходе между монолитной и шардированной архитектурой.
• Оптимизирован под OLTP-запросы с минимальными накладными расходами.

Возможности:

• Шардирование по диапазону значений или по хешу: роутер определяет, на каком шарде нужно выполнить запрос.
• Совместимость с расширенным протоколом PostgreSQL, что позволяет использовать подготовленные выражения и клиентские библиотеки без изменений.
• Поддержка сессионного и транзакционного режимов.
• Неограниченное количество роутеров.
• Перебалансировка — миграция данных между шардами для равномерного распределения нагрузки.
• Возможность указать несколько серверов для одного шарда. В таком случае роутер будет распределять запросы только для чтения среди реплик и автоматически определять, где находится мастер.

Какие преимущества предоставляет Managed Service for Sharded PostgreSQL?Какие преимущества предоставляет Managed Service for Sharded PostgreSQL?

С Managed Service for Sharded PostgreSQL вы получаете следующие преимущества:

• Управляемый сервис — автообновления, мониторинг и резервное копирование доступны «из коробки».
• Высокая доступность — автоматическое переключение на реплики при сбоях.
• Динамическая перебалансировка — перераспределение данных между шардами командой REDISTRIBUTE KEY RANGE.
• Транзакционная поддержка — сессионный (SESSION) и транзакционный (TRANSACTION) режимы управления соединениями.
• Мониторинг ресурсов (но контроль за нагрузкой остается на пользователе).
• Консультационная поддержка.

В каких случаях стоит использовать Managed Service for Sharded PostgreSQL?В каких случаях стоит использовать Managed Service for Sharded PostgreSQL?

Сервис оптимален для сценариев, где выполняется одно или несколько условий:

• Размер данных превышает 1 ТБ, при этом возможности вертикального масштабирования исчерпаны.
• Нагрузка превышает 20 000 запросов в секунду, при этом наблюдается деградация производительности.
• Нужно охлаждение данных (архивация старых данных с сохранением их доступности).
• Необходимо автоматизировать существующую шардированную инфраструктуру.

Рекомендуется начинать шардирование, если в кластере больше четырех хостов, больше 40 ядер CPU или размер диска превышает 600 ГБ. Миграция на Managed Service for Sharded PostgreSQL на раннем этапе проще, чем при терабайтных объемах.

В каких случаях мне не подходит Managed Service for Sharded PostgreSQL?В каких случаях мне не подходит Managed Service for Sharded PostgreSQL?

Сервис Managed Service for Sharded PostgreSQL не подходит для:

• OLAP-нагрузок (для этого рекомендуется использовать сервис Yandex MPP Analytics for PostgreSQL).
• Выполнения сложных запросов, которые затрагивают данные нескольких шардов (например, JOIN между разными шардами).

Поддерживаются ли JSONB и большие объекты?Поддерживаются ли JSONB и большие объекты?

Да, Managed Service for Sharded PostgreSQL полностью совместим с типами данных PostgreSQL, включая JSONB. При этом большие объекты могут влиять на производительность сети.

Зачем использовать Managed Service for Sharded PostgreSQL вместо Yandex Managed Service for YDB?Зачем использовать Managed Service for Sharded PostgreSQL вместо Yandex Managed Service for YDB?

Managed Service for Sharded PostgreSQL решает проблему масштабирования для PostgreSQL без смены типа СУБД.

Может ли кластер Managed Service for PostgreSQL из нескольких хостов быть шардом в Managed Service for Sharded PostgreSQL?Может ли кластер Managed Service for PostgreSQL из нескольких хостов быть шардом в Managed Service for Sharded PostgreSQL?

Да. В Managed Service for Sharded PostgreSQL шардом может быть как однохостовый, так и многохостовый кластер Managed Service for PostgreSQL.

Имеет ли смысл переносить мощные инстансы PostgreSQL (например, 96 vCPU) на Sharded PostgreSQL?Имеет ли смысл переносить мощные инстансы PostgreSQL (например, 96 vCPU) на Sharded PostgreSQL?

Да, если клиент готов к шардированию. Sharded PostgreSQL позволяет добавлять ресурсы горизонтально: вместо одного мощного хоста — несколько меньших, с балансировкой нагрузки.

Чем Managed Service for Sharded PostgreSQL отличается от Neon?Чем Managed Service for Sharded PostgreSQL отличается от Neon?

Neon реализует разделение compute- и storage-слоев (как Amazon Aurora), но не является шардированным решением и не позволяет горизонтально масштабировать кластер. Sharded PostgreSQL обеспечивает горизонтальное масштабирование через шардирование данных и запросов между независимыми узлами PostgreSQL.

Чем Managed Service for Sharded PostgreSQL отличается от Citus/Vitess?Чем Managed Service for Sharded PostgreSQL отличается от Citus/Vitess?

Критерий	Managed Service for Sharded PostgreSQL	Citus	Vitess
Производительность, по сравнению с PostgreSQL	На 10–30% меньше	На 15–40% меньше	На 20–50% меньше
Протокол	Нативный PostgreSQL	Расширения PostgreSQL	Проприетарный
Перебалансировка	Командой REDISTRIBUTE KEY RANGE, при этом кластер остается доступен на чтение и запись	Требует остановки	Через VReplication
Управление	Полная интеграция с управляемыми БД	Ручное администрирование	Комплексная настройка
Чтение с реплик	Автоматическое	Только через мастер	Через VTGate
Лицензия	Открытая лицензия PostgreSQL	GNU AGPLv3 с ограничениями	Apache License 2.0

Как начать работу с сервисом Managed Service for Sharded PostgreSQL?Как начать работу с сервисом Managed Service for Sharded PostgreSQL?

Создайте ваш первый кластер Managed Service for Sharded PostgreSQL. Подробная инструкция приведена в разделе Начало работы с Managed Service for Sharded PostgreSQL.

Перед началом работы определитесь с характеристиками вашего кластера:

• Тип шардирования.
• Сеть, к которой будет подключен ваш кластер.
• Зона доступности, в которой будут расположены хосты вашего кластера.
• Количество и класс хостов.
• Объем хранилища (резервируется в полном объеме при создании кластера).