Миграция сервисов с балансировщика NLB с целевыми ресурсами из группы виртуальных машин (Instance Groups) на L7-балансировщик ALB с помощью Terraform
Важно
Часть ресурсов, необходимых для прохождения практического руководства, доступны только в регионе Россия.
Чтобы мигрировать сервис с сетевого балансировщика на L7-балансировщик:
- Ознакомьтесь с рекомендациями по миграции сервисов.
- Создайте инфраструктуру. На этом этапе вы подключите профиль безопасности Smart Web Security к виртуальному хосту L7-балансировщика.
- Проверьте работу L7-балансировщика.
- Мигрируйте пользовательскую нагрузку с сетевого балансировщика на L7-балансировщик.
Рекомендации по миграции сервисов
-
Подключите защиту от DDoS-атак на уровне L3-L4 (модель OSI
). Она станет дополнением к защите на уровне L7, которую после миграции обеспечит Yandex Smart Web Security.Чтобы подключить защиту на уровне L3-L4:
-
Перед миграцией зарезервируйте статический публичный IP-адрес с защитой от DDoS-атак и используйте этот адрес для обработчика L7-балансировщика. Если для сетевого балансировщика публичный IP с защитой уже есть, его можно сохранить при миграции. В противном случае IP-адрес придется поменять на защищенный.
-
Настройте порог для срабатывания механизмов защиты, который будет соответствовать объему легитимного трафика на защищаемый ресурс. Для настройки такого порога обратитесь в техническую поддержку
. -
Задайте значение MTU равным
1450на целевых ресурсах за балансировщиком. Подробнее см. в разделе MTU и TCP MSS.
-
-
Проводите миграцию в часы наименьшей пользовательской нагрузки. Во время миграции ваш сервис будет недоступен, пока для группы ВМ изменяется интеграция с целевой группой и публичный IP-адрес переносится с сетевого балансировщика на L7-балансировщик. Время недоступности сервиса зависит от количества ВМ в группе, настроек политик развертывания и обычно занимает от нескольких минут до нескольких десятков минут.
-
При использовании L7-балансировщика запросы на бэкенды приходят с IP-адресом источника из диапазона внутренних IP-адресов подсетей, указанных при создании L7-балансировщика. Исходный IP-адрес источника запроса (пользователя) фигурирует в заголовке
X-Forwarded-For. Если необходимо логировать публичные IP-адреса пользователей на веб-сервере, измените его конфигурацию. -
Перед миграцией определите минимальное количество ресурсных единиц для настройки автомасштабирования в L7-балансировщике.
Количество ресурсных единиц выберите на основе анализа нагрузки на ваш сервис по следующим показателям:
- количество запросов в секунду (RPS);
- количество одновременных активных соединений;
- количество новых соединений в секунду;
- объем трафика в секунду.
Создайте инфраструктуру
-
Если у вас еще нет Terraform, установите его.
-
Получите данные для аутентификации. Вы можете добавить их в переменные окружения или указать далее в файле с настройками провайдера.
-
Настройте и инициализируйте провайдер. Чтобы не создавать конфигурационный файл с настройками провайдера вручную, скачайте его
. -
Поместите конфигурационный файл в отдельную рабочую директорию и укажите значения параметров. Если данные для аутентификации не были добавлены в переменные окружения, укажите их в конфигурационном файле.
-
Скачайте в ту же рабочую директорию файл конфигурации в зависимости от используемого протокола:
HTTP— файл конфигурации alb-vm-http.tf .HTTPS— файл конфигурации alb-vm-https.tf .
В этих файлах описаны:
- подсети для L7-балансировщика;
- группа безопасности для L7-балансировщика;
- статический адрес для L7-балансировщика;
- импорт TLS-сертификата в Certificate Manager (если используется протокол
HTTPS); - профиль безопасности Smart Web Security;
- целевая группа, группа бэкендов и HTTP-роутер для L7-балансировщика;
- L7-балансировщик.
-
В конфигурационном файле задайте пользовательские параметры:
-
Укажите значения переменных:
domain_name— имя домена вашего сервиса.network_id— идентификатор сети, в которой находятся виртуальные машины из целевой группы сетевого балансировщика нагрузки.certificate(если используется протоколHTTPS) — путь к файлу самоподписанного пользовательского сертификата.private_key(если используется протоколHTTPS) — путь к файлу с закрытым ключом.
-
Для ресурса
yandex_alb_target_groupдобавьте столько блоковtarget, сколько виртуальных машин находится в целевой группе вашего сетевого балансировщика нагрузки:resource "yandex_alb_target_group" "alb-target-group" { ... target { subnet_id = "<идентификатор_подсети>" ip_address = "<внутренний_IP-адрес_ВМ_1>" } target { subnet_id = "<идентификатор_подсети>" ip_address = "<внутренний_IP-адрес_ВМ_2>" } ... target { subnet_id = "<идентификатор_подсети>" ip_address = "<внутренний_IP-адрес_ВМ_N>" } }Где:
subnet_id— идентификатор подсети, в которой расположена виртуальная машина.ip_address— внутренний IP-адрес виртуальной машины, указанной в целевой группе вашего сетевого балансировщика нагрузки.
-
Если для вашего сервиса требуется, чтобы запросы в рамках одной пользовательской сессии обрабатывал один и тот же ресурс бэкенда, включите для группы бэкендов привязку сессий (session affinity) — для ресурса
yandex_alb_backend_groupраскомментируйте блок:session_affinity { connection { source_ip = true } }
-
-
Проверьте корректность файлов конфигурации Terraform с помощью команды:
terraform validateЕсли в файлах конфигурации есть ошибки, Terraform на них укажет.
-
Создайте необходимую инфраструктуру:
-
Выполните команду для просмотра планируемых изменений:
terraform planЕсли конфигурации ресурсов описаны верно, в терминале отобразится список изменяемых ресурсов и их параметров. Это проверочный этап: ресурсы не будут изменены.
-
Если вас устраивают планируемые изменения, внесите их:
-
Выполните команду:
terraform apply -
Подтвердите изменение ресурсов.
-
Дождитесь завершения операции.
-
В указанном каталоге будут созданы все требуемые ресурсы. Проверить появление ресурсов и их настройки можно в консоли управления
. -
-
В консоли управления перейдите в каталог, в котором создан L7-балансировщик.
-
Выберите сервис Application Load Balancer.
-
Дождитесь, когда L7-балансировщик перейдет в статус
Active. -
Укажите настройки автомасштабирования в L7-балансировщике:
- В консоли управления нажмите на имя нужного балансировщика.
- Нажмите
и выберите Редактировать. - В блоке Настройки автомасштабирования укажите ограничения на количество ресурсных единиц.
- Нажмите кнопку Сохранить.
Проверьте работу L7-балансировщика
-
В консоли управления
перейдите в созданный L7-балансировщик и слева выберите Проверки состояния. Убедитесь, что все проверки состояния L7-балансировщика показывают состояниеHEALTHY. -
Протестируйте запрос к сервису через L7-балансировщик. Например, одним из способов:
-
В файле
hostsна рабочей станции добавьте запись<публичный_IP-адрес_L7-балансировщика> <имя_домена_сервиса>. Удалите запись после тестирования. -
Выполните запрос с помощью cURL
в зависимости от типа протокола:curl http://<имя_домена_сервиса> \ --resolve <имя_домена_сервиса>:<порт_сервиса>:<публичный_IP-адрес_L7-балансировщика>curl https://<имя_домена_сервиса> \ --resolve <имя_домена_сервиса>:<порт_сервиса>:<публичный_IP-адрес_L7-балансировщика>
-
Мигрируйте пользовательскую нагрузку с сетевого балансировщика на L7-балансировщик
Важно
В процессе миграции будут пересозданы ВМ бэкенда.
Если обработчик сетевого балансировщика использует публичный IP-адрес без защиты от DDoS, запомните текущие настройки проверок состояния для целевой группы в сетевом балансировщике, прежде чем приступать к миграции. Эти настройки понадобятся при подключении новой целевой группы к балансировщику.
Чтобы мигрировать нагрузку:
-
Измените для группы ВМ интеграцию с целевой группой:
- В консоли управления
перейдите в каталог, в котором находится группа ВМ. - Выберите сервис Compute Cloud.
- На панели слева выберите
Группы виртуальных машин. - Выберите группу, которую хотите изменить.
- В правом верхнем углу страницы нажмите Редактировать.
- В блоке Интеграция с Application Load Balancer включите опцию Создать целевую группу.
- Укажите имя целевой группы L7-балансировщика и опционально другие настройки целевой группы.
- Нажмите Сохранить.
В процессе изменения группы ВМ происходит следующее:
- Пересоздаются ВМ в группе.
- Удаляются целевые ресурсы из целевой группы сетевого балансировщика, на оставшиеся целевые ресурсы распределяется пользовательская нагрузка. У пользователей в это время наблюдается частичная недоступность сервиса через сетевой балансировщик.
- После удаления всех целевых ресурсов удаляется целевая группа. Сервис становится недоступным через сетевой балансировщик.
Вы можете перейти к следующему шагу, не дожидаясь, пока завершится изменение группы ВМ.
- В консоли управления
-
В группе бэкендов L7-балансировщика измените у бэкенда целевую группу. Укажите только целевую группу, созданную на предыдущем шаге.
В целевую группу L7-балансировщика автоматически будут добавляться ВМ из группы ВМ.
-
Выберите один из вариантов дальнейшей миграции пользовательской нагрузки с сетевого балансировщика на L7-балансировщик в зависимости от наличия у обработчика сетевого балансировщика публичного IP-адреса с защитой или без защиты от DDoS:
- Обработчик сетевого балансировщика использует публичный IP-адрес с защитой от DDoS. При миграции сохранится публичный IP-адрес для вашего сервиса.
- Обработчик сетевого балансировщика использует публичный IP-адрес без защиты от DDoS. При миграции изменится публичный IP-адрес для вашего сервиса.
Обработчик сетевого балансировщика использует публичный IP-адрес с защитой от DDoS
-
Удалите обработчик в сетевом балансировщике для освобождения статического публичного IP-адреса.
-
В L7-балансировщике назначьте обработчику публичный IP-адрес, который ранее был у сетевого балансировщика:
-
Откройте конфигурационный файл, который вы использовали для создания L7-балансировщика (
alb-vm-http.tfилиalb-vm-https.tf). -
Измените в описании балансировщика значение параметра
addressв блокеlistener.endpoint.address.external_ipv4_address:resource "yandex_alb_load_balancer" "<имя_балансировщика>" { ... listener { ... endpoint { address { external_ipv4_address { address = <публичный_IP-адрес_сервиса> } } ports = [ <порт_сервиса> ] } } }Где
address— это публичный IP-адрес, который ранее был у сетевого балансировщика. -
Примените изменения:
-
В терминале перейдите в папку, где вы отредактировали конфигурационный файл.
-
Проверьте корректность конфигурационного файла с помощью команды:
terraform validateЕсли конфигурация является корректной, появится сообщение:
Success! The configuration is valid. -
Выполните команду:
terraform planВ терминале будет выведен список ресурсов с параметрами. На этом этапе изменения не будут внесены. Если в конфигурации есть ошибки, Terraform на них укажет.
-
Примените изменения конфигурации:
terraform apply -
Подтвердите изменения: введите в терминале слово
yesи нажмите Enter.
-
-
-
После изменения IP-адреса восстановится доступность вашего сервиса через L7-балансировщик. Наблюдайте за пользовательской нагрузкой, поступающей на L7-балансировщик, на графиках статистики работы балансировщика.
-
Удалите освободившийся статический публичный IP-адрес, который был выбран при создании L7-балансировщика.
-
Откройте конфигурационный файл, который вы использовали для создания L7-балансировщика (
alb-vm-http.tfилиalb-vm-https.tf). -
Удалите из файла описание ресурса
yandex_vpc_address:resource "yandex_vpc_address" "static-address" { description = "Static public IP address for the Application Load Balancer" name = "alb-static-address" external_ipv4_address { zone_id = "ru-central1-a" ddos_protection_provider = "qrator" } } -
Примените изменения:
-
В терминале перейдите в папку, где вы отредактировали конфигурационный файл.
-
Проверьте корректность конфигурационного файла с помощью команды:
terraform validateЕсли конфигурация является корректной, появится сообщение:
Success! The configuration is valid. -
Выполните команду:
terraform planВ терминале будет выведен список ресурсов с параметрами. На этом этапе изменения не будут внесены. Если в конфигурации есть ошибки, Terraform на них укажет.
-
Примените изменения конфигурации:
terraform apply -
Подтвердите изменения: введите в терминале слово
yesи нажмите Enter.
-
-
-
(Опционально) После переноса пользовательской нагрузки на L7-балансировщик удалите сетевой балансировщик.
Обработчик сетевого балансировщика использует публичный IP-адрес без защиты от DDoS
-
Наблюдайте за состоянием целевых ресурсов сетевого балансировщика. Дождитесь автоматического удаления целевых ресурсов из целевой группы.
-
Создайте целевую группу сетевого балансировщика. Добавьте ВМ, которые были пересозданы при изменении группы ВМ.
-
В сетевом балансировщике подключите целевую группу, созданную на предыдущем шаге. При подключении целевой группы настройте проверки состояния, которые были у исходной целевой группы.
-
Дождитесь перехода проверок состояния ВМ в целевой группе сетевого балансировщика в статус
Healthy. После этого восстановится доступность вашего сервиса через сетевой балансировщик. -
Чтобы мигрировать пользовательскую нагрузку с сетевого балансировщика на L7-балансировщик, в DNS-сервисе, обслуживающем публичную зону вашего домена, измените значение A-записи для доменного имени сервиса на публичный IP-адрес L7-балансировщика. Если публичная зона домена была создана в Yandex Cloud DNS, то измените запись по инструкции.
Примечание
Миграция нагрузки может выполняться долго, так как распространение изменений в записи DNS зависит от времени жизни записи (TTL) и количества звеньев цепочки DNS-запросов.
-
По мере распространения изменений в записи DNS наблюдайте за ростом запросов, поступающих на L7-балансировщик, на графиках статистики работы балансировщика.
-
Наблюдайте за снижением нагрузки на сетевой балансировщик с помощью метрик балансировщика
processed_bytesиprocessed_packets. Для визуализации этих метрик можно создать дашборд. Если нагрузка на сетевом балансировщике долгое время отсутствует, то перенос на L7-балансировщик завершен. -
(Опционально) После переноса пользовательской нагрузки на L7-балансировщик удалите сетевой балансировщик.