Передача данных из эндпоинта-источника YTsaurus
С помощью сервиса Yandex Data Transfer вы можете переносить данные из таблиц YTsaurus в управляемые базы данных и реализовывать различные сценарии переноса, обработки и трансформации данных. Для реализации трансфера:
- Ознакомьтесь с возможными сценариями передачи данных.
- Настройте эндпоинт-источник в Yandex Data Transfer.
- Настройте один из поддерживаемых приемников данных.
- Cоздайте и запустите трансфер.
- Выполняйте необходимые действия по работе с базой данных и контролируйте трансфер.
Сценарии передачи данных из YTsaurus
Вы можете реализовывать сценарии загрузки данных из таблиц в управляемые базы данных Yandex Cloud для дальнейшего хранения в облаке, обработки и загрузки в витрины данных для визуализации.
Подробное описание возможных сценариев передачи данных в Yandex Data Transfer см. в разделе Практические руководства.
Настройка эндпоинта-источника Managed Service for YTsaurus
При создании или изменении эндпоинта задайте настройки доступа к кластеру Managed Service for YTsaurus:
-
Идентификатор сервисного аккаунта — выберите или создайте сервисный аккаунт с ролью
managed-ytsaurus.editor, от имени которого сервис Data Transfer будет подключаться к кластеру. -
Идентификатор кластера — выберите кластер, к которому необходимо подключиться.
-
Группы безопасности — выберите:
- облачную сеть для размещения эндпоинта;
- группы безопасности для сетевого трафика.
Правила групп безопасности применяются к трансферу. Они позволяют открыть сетевой доступ с ВМ трансфера к кластеру. Подробнее см. в разделе Сеть в Yandex Data Transfer.
- Таблицы и директории — пути к таблицам с данными. Для добавления нового пути нажмите кнопку + Путь и введите значение.
Настройка приемника данных
Настройте один из поддерживаемых приемников данных:
Полный список поддерживаемых источников и приемников в Yandex Data Transfer см. в разделе Доступные трансферы.
После настройки источника и приемника данных создайте и запустите трансфер.