Yandex Cloud
Поиск
Связаться с намиПодключиться
  • Истории успеха
  • Документация
  • Блог
  • Все сервисы
  • Статус работы сервисов
    • Доступны в регионе
    • Инфраструктура и сеть
    • Платформа данных
    • Контейнеры
    • Инструменты разработчика
    • Бессерверные вычисления
    • Безопасность
    • Мониторинг и управление ресурсами
    • AI Studio
    • Бизнес-инструменты
  • Все решения
    • По отраслям
    • По типу задач
    • Экономика платформы
    • Безопасность
    • Техническая поддержка
    • Каталог партнёров
    • Обучение и сертификация
    • Облако для стартапов
    • Облако для крупного бизнеса
    • Центр технологий для общества
    • Партнёрская программа
    • Поддержка IT-бизнеса
    • Облако для фрилансеров
    • Обучение и сертификация
    • Блог
    • Документация
    • Мероприятия и вебинары
    • Контакты, чаты и сообщества
    • Идеи
    • Тарифы Yandex Cloud
    • Промоакции и free tier
    • Правила тарификации
  • Истории успеха
  • Документация
  • Блог
Проект Яндекса
© 2025 ТОО «Облачные Сервисы Казахстан»
Yandex Data Transfer
  • Доступные трансферы
  • Начало работы
    • Взаимосвязь ресурсов сервиса
    • Типы и жизненные циклы трансферов
    • Объекты, переносимые трансфером
    • Периодическое инкрементальное копирование
    • Параллельное копирование
    • Трансформация данных
    • Сериализация
    • Работа Yandex Data Transfer с источниками и приемниками
    • Гарантии поставки
    • Операции над трансфером
    • Сеть в Yandex Data Transfer
    • Скорость копирования данных в Yandex Data Transfer
    • Захват изменения данных
    • Какие задачи решает сервис
    • Квоты и лимиты
  • Решение проблем
  • Управление доступом
  • Правила тарификации
  • Справочник Terraform
  • Метрики Monitoring
  • Аудитные логи Audit Trails
  • Публичные материалы
  • Обучающие курсы
  1. Концепции
  2. Захват изменения данных

Захват изменения данных

Статья создана
Yandex Cloud
Улучшена
Dmitry A.
Обновлена 7 мая 2025 г.

CDC (change data capture — захват изменения данных) — это процесс отслеживания изменений в базе данных и поставка этих изменений к потребителям в режиме почти реального времени. CDC может применяться для:

  • создания приложений, которые реагируют на изменение данных в реальном времени;
  • поставки данных из централизованного хранилища в микросервисы;
  • сбора и поставки данных из продакшен-окружения во внутренние хранилища данных — для обработки и анализа.

В Yandex Cloud одним из способов реализации CDC-подхода может быть трансфер из базы данных в брокер сообщений. Все обновления в базе отслеживаются трансфером и отправляются в брокер сообщений, а потребители подключаются к брокеру и считывают поступающие сообщения.

Data Transfer поддерживает CDC-режим для трансферов из баз данных PostgreSQL, MySQL® в Apache Kafka®. При этом данные в приемник попадают в формате Debezium.

image

Greenplum® и Greenplum Database® являются зарегистрированными товарными знаками или товарными знаками Broadcom Inc в США и/или других странах.

1 Функциональность находится на стадии Preview.
Готовность реализации для разных типов инсталляции Yandex Data Transfer может отличаться. Трансфер для источника MongoDB и приемника Apache Kafka® пока не поддерживается (cм. список доступных трансферов).

Примеры использованияПримеры использования

  • Захват изменений из MySQL® и поставка в Apache Kafka®
  • Захват изменений из PostgreSQL и поставка в Apache Kafka®
  • Захват изменений из YDB и поставка в Apache Kafka®
  • Захват изменений данных из YDB и поставка в YDS
  • Захват изменений из PostgreSQL и поставка в Yandex Data Streams
  • Захват изменений из MySQL® и поставка в YDS

Была ли статья полезна?

Предыдущая
Скорость копирования данных в Yandex Data Transfer
Следующая
Какие задачи решает сервис
Проект Яндекса
© 2025 ТОО «Облачные Сервисы Казахстан»