Миграция базы данных из Yandex Managed Service for PostgreSQL в Yandex Object Storage

Вы можете перенести базу данных из Yandex Managed Service for PostgreSQL в Yandex Object Storage с помощью сервиса Yandex Data Transfer. Для этого:

1. Подготовьте трансфер.
2. Активируйте трансфер.
3. Проверьте работу копирования при повторной активации.

Если созданные ресурсы вам больше не нужны, удалите их.

Перед началом работыПеред началом работы

Подготовьте инфраструктуру:

Подготовьте трансферПодготовьте трансфер

1. Подключитесь к кластеру Managed Service for PostgreSQL, создайте в базе данных db1 таблицу x_tab и заполните ее данными:

   CREATE TABLE x_tab
   (
       id NUMERIC PRIMARY KEY,
       name CHAR(5)
   );
   INSERT INTO x_tab (id, name) VALUES
     (40, 'User1'),
     (41, 'User2'),
     (42, 'User3'),
     (43, 'User4'),
     (44, 'User5');
   

2. Создайте эндпоинт-приемник типа Object Storage со следующими настройками:

   • Бакет — <имя_созданного_ранее_бакета>
   • Сервисный аккаунт — storage-sa.
   • Выходной формат — CSV.
   • Формат сжатия — UNCOMPRESSED.
   • Имя папки — from_PostgreSQL.

3. Создайте эндпоинт-источник и трансфер:

Активируйте трансферАктивируйте трансфер

1. Активируйте трансфер и дождитесь его перехода в статус Завершен.

2. Убедитесь, что в бакете Object Storage появилась таблица public_x_tab.csv с данными из таблицы x_tab.

Проверьте работу копирования при повторной активацииПроверьте работу копирования при повторной активации

1. Подключитесь к кластеру Managed Service for PostgreSQL, удалите строку с идентификатором 41 и измените строку с идентификатором 42 в таблице x_tab:

   DELETE FROM x_tab WHERE id = 41;
   UPDATE x_tab SET name = 'Key3' WHERE id = 42;
   

2. Повторно активируйте трансфер и дождитесь его перехода в статус Завершен.

3. Убедитесь, что изменения отобразились в таблице public_x_tab.csv на приемнике.

Удалите созданные ресурсыУдалите созданные ресурсы

Некоторые ресурсы платные. Чтобы за них не списывалась плата, удалите ресурсы, которые вы больше не будете использовать:

• Убедитесь, что трансфер находится в статусе Завершен.

• Удалите эндпоинт-приемник.

• Удалите трансфер, эндпоинт-источник, кластер и бакет:

  Вручную

  Terraform

  • Трансфер.
  • Эндпоинт-источник.
  • Managed Service for PostgreSQL.
  • Бакет Object Storage.

  1. В терминале перейдите в директорию с планом инфраструктуры.

  2. Удалите конфигурационный файл postgresql-to-objstorage.tf.

  3. Проверьте корректность файлов конфигурации Terraform с помощью команды:

     terraform validate
     

     Если в файлах конфигурации есть ошибки, Terraform на них укажет.

  4. Подтвердите изменение ресурсов.

     1. Выполните команду для просмотра планируемых изменений:

        terraform plan
        

        Если конфигурации ресурсов описаны верно, в терминале отобразится список изменяемых ресурсов и их параметров. Это проверочный этап: ресурсы не будут изменены.

     2. Если вас устраивают планируемые изменения, внесите их:

        1. Выполните команду:

           terraform apply
           

        2. Подтвердите изменение ресурсов.

        3. Дождитесь завершения операции.

     Все ресурсы, которые были описаны в конфигурационном файле postgresql-to-objstorage.tf, будут удалены.