Связаться с намиПодключиться

Начало работы для управляющего метаданными

Статья создана
Улучшена
Обновлена 27 ноября 2025 г.

Примечание

Функциональность находится на стадии Preview.

Работая с Yandex Data Catalog в роли управляющего метаданными, вы можете собирать и систематизировать метаданные об объектах Yandex Cloud и связях между ними.

Data Catalog поддерживает получение метаданных из следующих сервисов:

  • PostgreSQL;
  • MySQL®;
  • ClickHouse®;
  • Yandex Data Transfer;
  • WebSQL;
  • Yandex StoreDoc/ MongoDB;
  • OpenSearch;
  • Greenplum®.

Чтобы начать работу с сервисом:

  1. Создайте каталог метаданных.
  2. Создайте источник метаданных.
  3. Создайте загрузки данных из источников по расписанию.
  4. Проверьте загруженные метаданные.
  5. Создайте классификацию и теги.
  6. Создайте домен и поддомены.
  7. Создайте глоссарий и термины.
  8. Разметьте полученные данные.

В стоимость поддержки инфраструктуры входит плата за вычислительные ресурсы, объем хранилища и резервных копий кластера Yandex Managed Service for PostgreSQL (см. тарифы Managed Service for PostgreSQL).

Перед началом работы

  1. Перейдите в консоль управления, затем войдите в Yandex Cloud или зарегистрируйтесь, если вы еще не зарегистрированы.

  2. Если у вас еще нет каталога ресурсов, создайте его:

    1. В консоли управления на панели сверху нажмите и выберите нужное облако.

    2. Справа от названия облака нажмите .

    3. Выберите Создать каталог.

      create-folder1

    4. Введите имя каталога. Требования к имени:

      • длина — от 2 до 63 символов;
      • может содержать строчные буквы латинского алфавита, цифры и дефисы;
      • первый символ — буква, последний — не дефис.

    5. (Опционально) Введите описание каталога.

    6. Выберите опцию Создать сеть по умолчанию. Будет создана сеть с подсетями в каждой зоне доступности. Также в этой сети будет создана группа безопасности по умолчанию, внутри которой весь сетевой трафик разрешен.

    7. Нажмите кнопку Создать.

      create-folder2

  3. Назначьте вашему аккаунту в Yandex Cloud роли на каталог ресурсов:

    • data-catalog.dataSteward — чтобы создавать ресурсы Data Catalog и управлять ими;
    • vpc.user — чтобы работать с сетью кластера.

    Примечание

    Если вы не можете управлять ролями, обратитесь к администратору вашего облака или организации.

  4. Создайте кластер Managed Service for PostgreSQL, из которого будут поставляться данные в качестве тестовой нагрузки.

Создайте каталог метаданных

  1. В консоли управления выберите подготовленный ранее каталог ресурсов.
  2. Выберите сервис Yandex MetaData Hub.
  3. На панели слева выберите сервис  Data Catalog.
  4. Нажмите кнопку Cоздать каталог.
  5. Задайте Имя каталога метаданных.
  6. Задайте Описание каталога метаданных.
  7. Нажмите кнопку Создать.

Примечание

При создании каталога метаданных опция AI-разметка метаданных включена по умолчанию.

Когда опция включена, AI-ассистент предлагает описания, домены, классификации и теги, глоссарии и термины, а также размечает с их помощью ваши метаданные. Предложения ассистента можно подтвердить, отредактировать или отклонить. Для этого наведите курсор на значок AI рядом с предложением ассистента и выберите нужное действие.

После создания каталога AI-разметкой можно управлять на странице Обзор или при изменении каталога.

Создайте источник и загрузку метаданных

  1. В консоли управления перейдите в созданный ранее каталог метаданных.

  2. Перейдите на вкладку  Источники данных и нажмите кнопку Создать источник данных.

  3. Задайте Имя источника.

  4. Задайте Описание источника.

  5. Выберите Тип базы данных — PostgreSQL.

  6. В блоке Источник PostgreSQL задайте параметры:

    • ID папки — каталог ресурсов, в котором создан кластер Managed Service for PostgreSQL.
    • Тип инсталляции — Кластер Managed Service for PostgreSQL.
    • Кластер управляемой БД — созданный ранее кластер Managed Service for PostgreSQL.
    • ID подключения — подключение к созданному ранее кластеру Managed Service for PostgreSQL в сервисе Yandex Connection Manager.
    • Имя базы данных в созданном ранее кластере Managed Service for PostgreSQL.
    • (Опционально) Выгружать из всех баз данных — включите опцию, если необходимо выгружать данные из всех баз данных.
    • Идентификатор сети — укажите идентификатор сети.

  7. Нажмите кнопку Создать.

  8. После этого вам откроется страница со списком источников в каталоге метаданных. В строке с только что созданным источником будет отображаться сообщение Нет загрузки.

  9. Наведите курсор на это сообщение и в отобразившемся окне нажмите кнопку Создать загрузку.

  10. Задайте Имя загрузки.

  11. Задайте Описание загрузки.

  12. В поле Расписание выберите Каждый день.

  13. В полях Время начала и Время окончания задайте время работы загрузки.

  14. Нажмите кнопку Создать.

Проверьте загруженные метаданные

  1. В консоли управления перейдите в созданный ранее каталог метаданных.

  2. Перейдите на вкладку  Поиск по метаданным.

    В открывшемся списке отобразятся метаданные, полученные из созданного ранее кластера Managed Service for PostgreSQL.

Совет

Загруженные из источника метаданные также отобразятся на вкладке Выгруженные данные в этом источнике.

Создайте классификацию и теги

Создайте классификацию

  1. В консоли управления перейдите в созданный ранее каталог метаданных.
  2. Перейдите на вкладку  Теги и классификации и нажмите кнопку Создать классификацию.
  3. Задайте Имя классификации.
  4. Задайте Описание классификации.
  5. Нажмите кнопку Создать.

Создайте теги

  1. В консоли управления перейдите в созданный ранее каталог метаданных.
  2. Перейдите на вкладку  Теги и классификации и откройте созданную ранее классификацию.
  3. Нажмите кнопку Создать тег.
  4. В открывшемся окне задайте Имя тега.
  5. Задайте Описание тега.
  6. Нажмите кнопку Создать.

Создайте домен и поддомены

Создайте домен

  1. В консоли управления перейдите в созданный ранее каталог метаданных.
  2. Перейдите на вкладку  Домены и нажмите кнопку Создать домен.
  3. Задайте Имя домена.
  4. Задайте Описание домена.
  5. Добавьте один или несколько созданных ранее тегов.
  6. Нажмите кнопку Создать.

Создайте поддомен

  1. В консоли управления перейдите в созданный ранее каталог метаданных.
  2. Перейдите на вкладку  Домены и выберите созданный ранее домен.
  3. Нажмите кнопку Добавить поддомен.
  4. Задайте Имя поддомена.
  5. Задайте Описание поддомена.
  6. Добавьте один или несколько созданных ранее тегов.
  7. Нажмите кнопку Создать.

Создайте глоссарий и термины

Создайте глоссарий

  1. В консоли управления перейдите в созданный ранее каталог метаданных.
  2. Перейдите на вкладку  Термины и глоссарии и нажмите кнопку Создать глоссарий.
  3. Задайте Имя глоссария.
  4. Задайте Описание глоссария.
  5. Добавьте один или несколько созданных ранее тегов.
  6. Нажмите кнопку Создать.

Создайте термины

  1. В консоли управления перейдите в созданный ранее каталог метаданных.
  2. Перейдите на вкладку  Термины и глоссарии и выберите созданный ранее глоссарий.
  3. Нажмите кнопку Создать термин.
  4. Задайте Имя термина.
  5. Задайте Описание термина.
  6. Укажите синонимы для термина.
  7. Добавьте один или несколько созданных ранее тегов.
  8. Добавьте связанные термины.
  9. Нажмите кнопку Создать.

Разметьте полученные данные

  1. В консоли управления перейдите в созданный ранее каталог метаданных.
  2. Перейдите на вкладку  Поиск по метаданным.
  3. В строке с выбранным набором данных нажмите и выберите Присвоить домен, Изменить теги или Изменить термины.
  4. В открывшемся окне выберите объект в иерархии доменов, тегов или терминов. При необходимости воспользуйтесь поиском.
  5. Добавьте выбранные объекты.

Что дальше

Предыдущая
Schema Registry
Следующая
Начало работы аналитика метаданных