preview

Yandex Managed Service for Apache Spark

Управляемый сервис кластерных вычислений на основе Apache Spark.

Сервис не тарифицируется и находится на стадии Preview.

Документация

Быстрая обработка больших данных

Apache Spark объединяет возможности машинного обучения, аналитики и онлайн-обработки данных. Работает в оперативной памяти и обеспечивает быстрые вычисления, помогая анализировать информацию.

Автоматизация и актуальность

Мгновенное развёртывание кластеров Apache Spark и автоматическая установка последних версий. Укажите нужную при настройке — и ваша среда всегда будет соответствовать современным требованиям.

Гибкая оптимизация

Сервис оптимизирован под ключевые задачи: пакетную трансформацию, потоковую обработку, машинное обучение и аналитические запросы. Есть возможность подключения внешних библиотек для эффективной работы с данными.

Интеллектуальное масштабирование

Автоматическое управление ресурсами позволяет динамически выделять дополнительные CPU и память при увеличении нагрузки, а при снижении — освобождать неиспользуемые.

Простое администрирование

Встроенный мониторинг и журналирование автоматизируют рутинные процессы: не нужно вручную собирать логи, обрабатывать файлы с серверов и настраивать визуализацию.

Технологическая эффективность

Сервис поддерживает автоматическое развёртывание систем, управление версиями, оптимизацию под конкретные задачи, масштабирование ресурсов и проводит постоянный мониторинг состояния инфраструктуры.

Решайте задачи с помощью Managed Service for Apache Spark

Мы берём на себя большую часть работ по развёртыванию, настройке и обслуживанию кластера Apache Spark

Процессы
Managed Service for Apache Spark
Самостоятельная инсталляция Apache Spark
Развёртывание виртуальных машин
Настройка сети
Обновление версий
Мониторинг
Доступность мастера
Сбор журналов выполнения задач
Масштабирование кластера в соответствии с настройками
Интеграция с сервисами Yandex Cloud

Самостоятельный контроль

Контроль на стороне Yandex Cloud

С чего начать

Выберите необходимые вычислительные мощности, сервисы Apache и создайте готовый к работе кластер Managed Service for Apache Spark.

Начните пользоваться Yandex Managed Service for Apache Spark

Полезные ссылки

Apache Spark и Apache Airflow являются зарегистрированными товарными знаками или товарными знаками Apache Software Foundation в США и/или других странах.