Практические руководства Object Storage

В этом разделе собраны практические руководства по использованию Object Storage для хостинга сайтов, резервного копирования, работы с данными и других задач.

Хостинг сайтов и веб-приложенийХостинг сайтов и веб-приложений

• Статический сайт в Yandex Object Storage
• Хостинг статического сайта на фреймворке Gatsby в Yandex Object Storage
• Настройка хостинга статического сайта в бакете Yandex Object Storage с доступом через Yandex Cloud CDN
• Интеграция L7-балансировщика с Cloud CDN и Object Storage
• Развертывание Nextcloud в Yandex Cloud
• Установка Ghost CMS High Availability с помощью Cloud Apps
• Установка WordPress с помощью Cloud Apps
• Установка WordPress High Availability с помощью Cloud Apps

Резервное копированиеРезервное копирование

• Обзор
• Резервное копирование в Yandex Object Storage с помощью AWS S3 Sync
• Резервное копирование в Yandex Object Storage с помощью rclone
• Резервное копирование в Object Storage с помощью Veeam Backup
• Резервное копирование в Yandex Object Storage с помощью GeeseFS
• Резервное копирование ВМ с помощью «Хайстекс Акура — Система резервного копирования»
• Резервное копирование в Yandex Object Storage с помощью Duplicati
• Резервное копирование кластера Managed Service for Kubernetes в Object Storage
• Резервное копирование в Yandex Object Storage с помощью MSP360 Backup (CloudBerry Desktop Backup)
• Резервное копирование в Yandex Object Storage с помощью Bacula
• Резервное копирование в Yandex Object Storage с помощью Veritas Backup Exec

Сбор и анализ логовСбор и анализ логов

• Получение статистики запросов к объекту с использованием S3 Select

• Получение статистики посещения сайта с использованием S3 Select

• Поиск событий в аудитных логах

• Анализ логов Object Storage при помощи DataLens

• Получение статистики запросов к объектам Object Storage с использованием Yandex Query

• Хранение журналов работы приложения

• Поиск событий Yandex Cloud в Object Storage

• Загрузка аудитных логов в SIEM ArcSight

• Репликация логов в Yandex Object Storage с помощью Fluent Bit

• Репликация логов в Object Storage с помощью Yandex Data Streams

• Загрузка аудитных логов в SIEM Splunk

• Поиск событий Yandex Cloud в Yandex Query

Разработка и развертывание приложенийРазработка и развертывание приложений

• Как создать бота в Telegram
• Сокращатель ссылок
• Организация сине-зеленого и канареечного развертывания версий веб-сервиса
• Конвертация видео в GIF на Python
• Разработка навыка Алисы и сайта с авторизацией
• Публикация обновлений для игр с помощью Yandex Cloud CDN
• Разработка пользовательской интеграции в API Gateway
• Развертывание веб-приложения с использованием Java Servlet API
• Создание интерактивного serverless-приложения с использованием WebSocket
• Развертывание веб-приложения с JWT-авторизацией в Yandex API Gateway и аутентификацией в Firebase

Безопасность и управление доступомБезопасность и управление доступом

• Шифрование на стороне сервера
• Подключение к Object Storage из Virtual Private Cloud
• Использование секрета Yandex Lockbox для хранения статического ключа доступа

Работа с файловыми системамиРабота с файловыми системами

• Подключение бакета как диска в Windows

• Монтирование бакетов Object Storage к файловой системе хостов Yandex Data Processing

Перенос данных и интеграция с базами данныхПеренос данных и интеграция с базами данных

• Автоматическое копирование объектов из одного бакета Object Storage в другой

• Использование гибридного хранилища в Managed Service for ClickHouse®

• Миграция базы данных из Managed Service for PostgreSQL в Object Storage

• Выгрузка данных Greenplum® в гибридное хранилище Yandex Object Storage

• Загрузка данных из Яндекс Директ в витрину Yandex Managed Service for ClickHouse® с использованием Yandex Cloud Functions, Yandex Object Storage и Yandex Data Transfer

• Миграция данных из Yandex Data Streams с помощью Yandex Data Transfer

• Перенос данных в Yandex Managed Service for PostgreSQL с использованием Yandex Data Transfer

• Миграция базы данных из Yandex Managed Service for MySQL® в Object Storage

• Загрузка данных из Yandex Managed Service for OpenSearch в Yandex Object Storage с помощью Yandex Data Transfer

• Загрузка данных из Yandex Managed Service for YDB в Yandex Object Storage с помощью Yandex Data Transfer

• Загрузка данных из Object Storage в Yandex MPP Analytics for PostgreSQL с помощью Yandex Data Transfer

• Загрузка данных из Object Storage в Yandex Managed Service for ClickHouse® с помощью Yandex Data Transfer

• Миграция данных из Object Storage в Yandex Managed Service for MySQL® с помощью Yandex Data Transfer

• Миграция базы данных из Google BigQuery в Yandex Managed Service for ClickHouse®

• Загрузка данных из Object Storage в Yandex Managed Service for YDB с помощью Yandex Data Transfer

Обработка и анализ данныхОбработка и анализ данных

• Анализ поресурсной детализации расходов

• Использование Object Storage в Yandex Data Processing

• Импорт данных из Object Storage, обработка и экспорт в Yandex Managed Service for ClickHouse®

• Работа с данными с помощью Yandex Query

• Создание внешней таблицы на базе таблицы из бакета с помощью конфигурационного файла

• Автоматизация задач Yandex Query с помощью Yandex Managed Service for Apache Airflow™

• Обмен данными между Yandex Managed Service for ClickHouse® и Yandex Data Processing

• Обработка файлов детализации в сервисе Yandex Cloud Billing

• Использование Object Storage в сервисе Yandex Managed Service for Apache Spark™

• Импорт данных из Yandex Managed Service for MySQL® в Yandex Data Processing с помощью Sqoop

• Импорт данных из Yandex Managed Service for PostgreSQL в Yandex Data Processing с помощью Sqoop

• Федеративные запросы к данным с помощью Yandex Query

• Визуализация данных из Yandex Object Storage в Yandex DataLens

Машинное обучение и искусственный интеллектМашинное обучение и искусственный интеллект

• Использование данных из Object Storage для обучения модели в Yandex DataSphere
• Регулярное асинхронное распознавание аудиофайлов в бакете Object Storage
• Регулярное распознавание изображений и PDF-документов из бакета Object Storage
• Распознавание архива изображений в Yandex Vision OCR
• Создание сервера MLFlow для логирования экспериментов и артефактов

Управление инфраструктурой с TerraformУправление инфраструктурой с Terraform

• Загрузка состояний Terraform в Yandex Object Storage
• Блокировка состояний Terraform с помощью Yandex Managed Service for YDB

Полезные ссылкиПолезные ссылки

• Вебинар: как с помощью Cloud CDN и Object Storage разгрузить высоконагруженную инфраструктуру