Перенос данных с использованием сервиса Data Transfer

Чтобы перенести базу данных из MySQL® в Managed Service for MySQL® с использованием сервиса Yandex Data Transfer:

1. Запустите перенос данных.
2. Завершите перенос данных.

Если созданные ресурсы вам больше не нужны, удалите их.

Перед началом работыПеред началом работы

Зарегистрируйтесь в Yandex Cloud и создайте платежный аккаунт:

1. Перейдите в консоль управления, затем войдите в Yandex Cloud или зарегистрируйтесь.
2. На странице Yandex Cloud Billing убедитесь, что у вас подключен платежный аккаунт, и он находится в статусе ACTIVE или TRIAL_ACTIVE. Если платежного аккаунта нет, создайте его и привяжите к нему облако.

Если у вас есть активный платежный аккаунт, вы можете создать или выбрать каталог, в котором будет работать ваша инфраструктура, на странице облака.

Подробнее об облаках и каталогах.

Необходимые платные ресурсыНеобходимые платные ресурсы

• Кластер Managed Service for MySQL®: выделенные хостам вычислительные ресурсы, объем хранилища и резервных копий (тарифы Managed Service for MySQL®).
• Публичные IP-адреса, если для хостов кластера включен публичный доступ (тарифы Yandex Virtual Private Cloud).
• Каждый трансфер: использование вычислительных ресурсов и количество переданных строк данных (тарифы Data Transfer).

Запустите перенос данныхЗапустите перенос данных

1. Подготовьте кластер-источник.

2. Подготовьте инфраструктуру и запустите перенос данных:

   Вручную

   Terraform

   1. Создайте кластер-приемник Managed Service for MySQL® любой подходящей конфигурации. При этом:

      • Версия MySQL® должна быть не ниже, чем в кластере-источнике.

        Перенос данных с повышением мажорной версии MySQL® возможен, но не гарантируется. Подробнее в документации MySQL®.

        Миграция с понижением версии MySQL® невозможна.

      • Режим SQL должен быть таким же, как и в кластере-источнике.

   2. Подготовьте кластер-приемник.

   3. Создайте эндпоинт для источника:

      • Направление — Источник.

      • Укажите имя эндпоинта.

      • Тип базы данных — MySQL.

      • Параметры эндпоинта:

        • Тип подключения — выберите Ручная настройка.
        • Настройки подключения — выберите Пользовательская инсталляция.
        • Хост — укажите IP-адрес или FQDN хоста, к которому необходимо подключиться.
        • Порт — укажите номер порта для подключения к кластеру-источнику.
        • База данных — укажите имя базы данных в пользовательской инсталляции.
        • Пользователь — укажите имя пользователя, под которым сервис Data Transfer будет подключаться к базе данных.
        • Пароль — укажите пароль пользователя.

   4. Создайте эндпоинт для приемника:

      • Направление — Приёмник.

      • Укажите имя эндпоинта.

      • Тип базы данных — MySQL.

      • Параметры эндпоинта:

        • Тип подключения — выберите Ручная настройка.
        • Настройки подключения — выберите Кластер Managed Service for MySQL.
        • Кластер управляемой БД — выберите кластер-приемник из списка.
        • База данных — укажите имя базы данных в выбранном кластере.
        • Пользователь — укажите имя пользователя, под которым сервис Data Transfer будет подключаться к базе данных.
        • Пароль — укажите пароль пользователя.

   5. Создайте трансфер типа Копирование и репликация, использующий созданные эндпоинты.

   6. Активируйте его.

      Важно

      Избегайте любых изменений в схеме данных в кластере-источнике и кластере-приемнике во время работы трансфера. Подробнее в разделе Работа с базами данных во время трансфера.

   1. Подготовьте кластер-источник.

   2. Если у вас еще нет Terraform, установите его.

   3. Получите данные для аутентификации. Вы можете добавить их в переменные окружения или указать далее в файле с настройками провайдера.

   4. Настройте и инициализируйте провайдер. Чтобы не создавать конфигурационный файл с настройками провайдера вручную, скачайте его.

   5. Поместите конфигурационный файл в отдельную рабочую директорию и укажите значения параметров. Если данные для аутентификации не были добавлены в переменные окружения, укажите их в конфигурационном файле.

   6. Скачайте в ту же рабочую директорию файл конфигурации data-transfer-mysql-mmy.tf.

      В этом файле описаны:

      • сеть;
      • подсеть;
      • группа безопасности и правило, необходимое для подключения к кластеру;
      • кластер-приемник Managed Service for MySQL®;
      • эндпоинт для источника;
      • эндпоинт для приемника;
      • трансфер.

   7. Укажите в файле data-transfer-mysql-mmy.tf:

      • параметры эндпоинта-источника;

      • параметры кластера-приемника, которые используются и как параметры эндпоинта-приемника:

        • target_mysql_version — версия MySQL®, она должна быть не ниже чем в кластере-источнике;
        • target_sql_mode — режим SQL, он должен быть таким же, как и в кластере-источнике;
        • target_db_name — имя базы данных;
        • target_user и target_password — имя и пароль пользователя-владельца базы данных.

   8. Проверьте корректность файлов конфигурации Terraform с помощью команды:

      terraform validate
      

      Если в файлах конфигурации есть ошибки, Terraform на них укажет.

   9. Создайте необходимую инфраструктуру:

      1. Выполните команду для просмотра планируемых изменений:

         terraform plan
         

         Если конфигурации ресурсов описаны верно, в терминале отобразится список изменяемых ресурсов и их параметров. Это проверочный этап: ресурсы не будут изменены.

      2. Если вас устраивают планируемые изменения, внесите их:

         1. Выполните команду:

            terraform apply
            

         2. Подтвердите изменение ресурсов.

         3. Дождитесь завершения операции.

      В указанном каталоге будут созданы все требуемые ресурсы. Проверить появление ресурсов и их настройки можно в консоли управления.

      Трансфер активируется автоматически после создания.

Завершите перенос данныхЗавершите перенос данных

1. Дождитесь перехода трансфера в статус Реплицируется.

2. Переведите кластер-источник в режим только чтение и переключите нагрузку на кластер-приемник.

3. На странице мониторинга трансфера дождитесь снижения до нуля характеристики Maximum data transfer delay. Это значит, что в кластер-приемник перенесены все изменения, произошедшие в кластере-источнике после завершения копирования данных.

4. Деактивируйте трансфер и дождитесь его перехода в статус Остановлен.

   Подробнее о статусах трансфера смотрите в разделе Жизненный цикл трансфера.

Удалите созданные ресурсыУдалите созданные ресурсы

Некоторые ресурсы платные. Чтобы за них не списывалась плата, удалите ресурсы, которые вы больше не будете использовать:

Реальный пример миграции базы данных MySQL® с помощью сервиса Data Transfer приведен в разделе Синхронизация данных из MySQL с помощью Yandex Data Transfer.

Полезные ссылкиПолезные ссылки

• Перенос данных через создание и восстановление логического дампа.