История изменений в Yandex Managed Service for Apache Airflow™
Статья создана
Обновлена 16 октября 2024 г.
Сентябрь 2024
- 16 сентября 2024 Managed Service for Apache Airflow™ перешел на стадию General Availability, и за его использование начала взиматься плата в соответствии с правилами тарификации.
- Добавлена возможность совершать операции над кластером Apache Airflow™ с помощью CLI Yandex Cloud, Terraform и API.
Июнь 2024
- Логи заданий Apache Airflow™ теперь сохраняются в Yandex Object Storage. Это решает проблему с недоступностью логов на выключенных воркерах после отработавшего автомасштабирования.
- Добавлена возможность хранить подключения, переменные и конфигурационные данные, которые используются в DAG-файлах, в Yandex Lockbox. Подробнее см. в руководстве Хранение подключений и переменных в Yandex Lockbox.
Май 2024
Добавлена возможность назначить кластеру сервисный аккаунт, от имени которого кластер будет обращаться к другим сервисам Yandex Cloud, например Cloud Logging, Yandex Monitoring и Yandex Lockbox. Также это дает возможность использовать весь функционал Yandex Cloud SDK при написании DAG-скриптов без необходимости дополнительной настройки авторизации.
Апрель 2024
- Добавлена возможность устанавливать deb-пакеты в качестве зависимостей при создании или изменении кластера.
- При возникновении проблем во время установки pip- и deb-зависимостей теперь отображается понятный текст ошибки. Также, если указаны неправильные пакеты, то операция изменения кластера откатывается с возможностью изменить ввод без обращения в службу поддержки.
- Скрипты в DAG-файлах теперь запускаются быстрее.