Preview
Yandex MetaData Hub

Сервис для управления метаданными в Yandex Cloud.

Все возможности для хранения и управления метаданными собраны в одном сервисе.

Сервис предоставляется бесплатно и находится на стадии Preview.

Документация

Connection Manager

Сохраняйте параметры подключений к вашим базам данных и управляйте настройками доступа.

Schema Registry

Описывайте схемы ваших данных и задавайте политику эволюции схем.

Data Catalog*

Собирайте описания ваших данных, зависимости между ними (lineage) и организуйте работу с метаданными в едином каталоге.

Hive Metastore

Сократите вероятность отказов и потерь из-за недоступности метаданных.

Интеграция

MetaData Hub помогает связать ваши сервисы в облаке друг с другом. Доступны интеграции с Managed PostgreSQL, Managed MySQL®, Yandex Lockbox. Скоро появятся интеграции с WebSQL, Data Transfer и другими.

Безопасный доступ

Настраивайте гранулярный доступ к метаданным и не переживайте за ваши пароли — они хранятся в секретнице Yandex Lockbox. Отслеживайте действия с метаданными и подключениями с помощью Audit Trails.

Решайте задачи с MetaData Hub

Первичное хранение и предобработка данных

С помощью Hive Metastore вы можете управлять табличными метаданными объектов, которые находятся в бакетах Object Storage. Решайте задачи подготовки и очистки данных, создавайте полноценные хранилища и предметно-ориентированные витрины данных.

Работает в связке с
Object Storage

Работа с SQL-базами данных

Для выполнения запроса к базе данных выберите в сервисе Yandex WebSQL нужный кластер и подключение. Пароль при этом будет надёжно сохранен в Yandex Lockbox.

Работает в связке с
Yandex WebSQL

Поставка схематизированных данных

Опишите схему данных в Schema Registry и укажите эту схему в эндпоинте Data Transfer для Yandex Managed Service for Apache Kafka®. Data Transfer при переносе данных автоматически подгрузит текущую версию схемы.

Работает в связке с
Data Transfer

С чего начать

  1. Создайте кластер управляемой базы данных с генерацией пароля с помощью сервиса Yandex Lockbox.

  2. Перейдите в сервис MetaData Hub, далее в раздел Connection Manager.

  3. Настройте доступ к созданным подключениям.

Какие интеграции доступны

Интеграция
Connection Manager
Schema Registry
Data Catalog
Managed PostgreSQL
Managed MySQL®
Yandex Lockbox
Managed ClickHouse®
Yandex WebSQL
Data Transfer
DataLens

Недоступно

Доступно

Coming soon

Начните пользоваться Yandex MetaData Hub

* Интеграции станут доступны в Q2 2024.