Пошаговые инструкции для Yandex Data Processing
Статья создана
Обновлена 16 сентября 2024 г.
Кластеры Yandex Data Processing
- Информация об имеющихся кластерах
- Создание кластера
- Подключение к кластеру
- Изменение кластера
- Миграция легковесного кластера в другую зону доступности
- Удаление кластера
Подкластеры Yandex Data Processing
Сервисы Apache и другие сторонние сервисы
Delta Lake
- Настройка Delta Lake в однокластерном режиме
- Настройка Delta Lake в мультикластерном режиме
- Советы по настройке и применению Delta Lake
Задания (jobs)
- Управление заданиями
- Запуск заданий
- Управление заданиями Spark
- Управление заданиями PySpark
- Управление заданиями Hive
- Управление заданиями MapReduce
Логи и мониторинг
- Работа с логами
- Мониторинг состояния кластера и хостов Yandex Data Processing
- Мониторинг состояния Spark-приложений
- Диагностика и устранение проблем производительности Spark-приложений