Потоковая обработка с Data Streams
Yandex Data Streams способен непрерывно выполнять сбор данных из источников, таких как истории посещений веб‑сайтов, логи работы приложений, ленты социальных сетей и системные журналы.
Масштабируемый сервис для управления потоками данных
в режиме реального времени.
Упрощает обмен данными между компонентами в микросервисных архитектурах.
При использовании в качестве транспорта для микросервисов
упрощает интеграцию, увеличивает надёжность, улучшает масштабирование.
Совместим с протоколами Apache Kafka®, AWS Kinesis Data Streams.
Запись данных и их чтение практически в режиме реального времени. Вы можете задать скорость передачи данных и время их хранения.
Гранулярно настраиваются необходимые ресурсы для обработки потока данных: от очень маленьких потоков в 100 КБ/с и до потоков в 100 МБ/с.
С помощью Yandex Data Transfer один поток данных может быть передан в несколько приёмников с различными политиками хранения.
Данные автоматически реплицируются между несколькими географически распределёнными зонами доступности.
После создания вы можете централизованно управлять потоками данных из консоли управления или с помощью API.
Yandex Data Streams способен непрерывно выполнять сбор данных из источников, таких как истории посещений веб‑сайтов, логи работы приложений, ленты социальных сетей и системные журналы.
Посмотрите доклад Yandex Scale 2021
Узнайте, как организовать миграцию между различными средами, создать DR-площадку и обеспечить поставку данных в аналитическое хранилище.
Для чего нужен Data Streams?
Yandex Data Streams способен непрерывно выполнять сбор данных из источников, таких как истории посещений веб‑сайтов, логи работы приложений, ленты социальных сетей и системные журналы.
Какие типы данных можно передавать с Data Streams?
Как отправлять данные?
Чем Data Streams отличается от Apache Kafka®?
Logstash является зарегистрированным товарным знаком Elasticsearch BV в США и/или других странах.
Apache® и Apache Kafka® являются зарегистрированными товарными знаками или товарными знаками Apache Software Foundation в США и/или других странах.
ClickHouse является зарегистрированным товарным знаком ClickHouse, Inc.