Yandex Cloud
Поиск
Связаться с намиПодключиться
  • Документация
  • Блог
  • Все сервисы
  • Статус работы сервисов
    • Популярные
    • Инфраструктура и сеть
    • Платформа данных
    • Контейнеры
    • Инструменты разработчика
    • Бессерверные вычисления
    • Безопасность
    • Мониторинг и управление ресурсами
    • Машинное обучение
    • Бизнес-инструменты
  • Все решения
    • По отраслям
    • По типу задач
    • Экономика платформы
    • Безопасность
    • Техническая поддержка
    • Каталог партнёров
    • Обучение и сертификация
    • Облако для стартапов
    • Облако для крупного бизнеса
    • Центр технологий для общества
    • Облако для интеграторов
    • Поддержка IT-бизнеса
    • Облако для фрилансеров
    • Обучение и сертификация
    • Блог
    • Документация
    • Контент-программа
    • Мероприятия и вебинары
    • Контакты, чаты и сообщества
    • Идеи
    • Истории успеха
    • Тарифы Yandex Cloud
    • Промоакции и free tier
    • Правила тарификации
  • Документация
  • Блог
Проект Яндекса
© 2025 ООО «Яндекс.Облако»
Yandex Object Storage
    • Все руководства
    • Получение статистики запросов к объекту с использованием S3 Select
    • Получение статистики посещения сайта с использованием S3 Select
    • Получение статистики запросов к объектам с использованием Yandex Query
    • Анализ поресурсной детализации расходов
    • Шифрование на стороне сервера
    • Интеграция L7-балансировщика с CDN и Object Storage
    • Сине-зеленое и канареечное развертывание версий сервиса
    • Анализ логов с использованием DataLens
    • Монтирование бакетов к файловой системе хостов Yandex Data Processing
    • Использование Object Storage в Yandex Data Processing
    • Импорт данных из Object Storage, обработка и экспорт в Managed Service for ClickHouse®
    • Подключение бакета как диска в Windows
    • Миграция данных из Yandex Data Streams с помощью Yandex Data Transfer
    • Использование гибридного хранилища в Yandex Managed Service for ClickHouse®
    • Загрузка данных из Yandex Managed Service for OpenSearch в Yandex Object Storage с помощью Yandex Data Transfer
    • Автоматическое копирование объектов из бакета в бакет
    • Регулярное асинхронное распознавание аудиофайлов в бакете
    • Обучение модели в Yandex DataSphere на данных из Object Storage
    • Подключение к Object Storage из VPC
    • Перенос данных в Yandex Managed Service for PostgreSQL с использованием Yandex Data Transfer
    • Загрузка данных в Yandex Managed Service for Greenplum® с помощью Yandex Data Transfer
    • Загрузка данных в Yandex Managed Service for ClickHouse® с помощью Yandex Data Transfer
    • Загрузка данных в Yandex Managed Service for YDB с помощью Yandex Data Transfer
    • Обмен данными между Yandex Managed Service for ClickHouse® и Yandex Data Processing
    • Загрузка данных из Yandex Managed Service for YDB с помощью Yandex Data Transfer
    • Хостинг статического сайта на фреймворке Gatsby в Object Storage
    • Миграция базы данных из Managed Service for PostgreSQL в Object Storage
    • Обмен данными между Yandex Managed Service for ClickHouse® и Yandex Data Processing
    • Импорт данных из Yandex Managed Service for PostgreSQL в Yandex Data Processing с помощью Sqoop
    • Импорт данных из Yandex Managed Service for MySQL® в Yandex Data Processing с помощью Sqoop
    • Миграция данных из Yandex Object Storage в Yandex Managed Service for MySQL® с помощью Yandex Data Transfer
    • Миграция базы данных из Yandex Managed Service for MySQL® в Yandex Object Storage
    • Выгрузка данных Greenplum® в холодное хранилище Yandex Object Storage
    • Загрузка данных из Яндекс Директ в витрину Yandex Managed Service for ClickHouse® с использованием Yandex Cloud Functions, Yandex Object Storage и Yandex Data Transfer
    • Миграция данных из Elasticsearch в Yandex Managed Service for OpenSearch
    • Загрузка состояний Terraform в Object Storage
    • Блокировка состояний Terraform с помощью Managed Service for YDB
    • Визуализация данных Yandex Query
    • Публикация обновлений для игр
    • Резервное копирование ВМ с помощью Хайстекс Акура
    • Резервное копирование в Object Storage с помощью CloudBerry Desktop Backup
    • Резервное копирование в Object Storage через Duplicati
    • Резервное копирование в Object Storage с помощью Bacula
    • Резервное копирование в Object Storage с помощью Veeam Backup
    • Резервное копирование в Object Storage с помощью Veritas Backup Exec
    • Резервное копирование кластера Managed Service for Kubernetes в Object Storage
    • Разработка пользовательской интеграции в API Gateway
    • Сокращатель ссылок
    • Хранение журналов работы приложения
    • Разработка навыка Алисы и сайта с авторизацией
    • Создание интерактивного serverless-приложения с использованием WebSocket
    • Развертывание веб-приложения с использованием Java Servlet API
    • Разработка Telegram-бота
    • Репликация логов в Object Storage с помощью Fluent Bit
    • Репликация логов в Object Storage с помощью Data Streams
    • Загрузка аудитных логов в SIEM ArcSight
    • Загрузка аудитных логов в SIEM Splunk
    • Создание сервера MLFlow для логирования экспериментов и артефактов
    • Работа с данными с помощью Yandex Query
    • Федеративные запросы к данным с помощью Query
    • Распознавание архива изображений в Vision OCR
    • Конвертация видео в GIF на Python
    • Автоматизация задач с помощью Managed Service for Apache Airflow™
    • Обработка файлов детализации в сервисе Yandex Cloud Billing
    • Развертывание веб-приложения с JWT-авторизацией в API Gateway и аутентификацией в Firebase
    • Поиск событий Yandex Cloud в Yandex Query
    • Поиск событий Yandex Cloud в Object Storage
    • Создание внешней таблицы на базе таблицы из бакета с помощью конфигурационного файла
    • Миграция базы данных из Google BigQuery в Managed Service for ClickHouse®
  • Справочник Terraform
  • Метрики Monitoring
  • Аудитные логи Audit Trails
  • Логи бакета
  • История изменений
  • Вопросы и ответы
  • Обучающие курсы

В этой статье:

  • Перед началом работы
  • Подключитесь к данным в Object Storage
  • Создайте подключение в Yandex DataLens
  • Настройте поля датасета
  • Настройте визуализацию
  1. Практические руководства
  2. Визуализация данных Yandex Query

Визуализация данных из Yandex Object Storage в Yandex DataLens

Статья создана
Yandex Cloud
Обновлена 6 марта 2025 г.
  • Перед началом работы
  • Подключитесь к данным в Object Storage
  • Создайте подключение в Yandex DataLens
  • Настройте поля датасета
  • Настройте визуализацию

С помощью интеграции Yandex Query и Yandex DataLens можно визуализировать данные, хранимые в Yandex Object Storage. DataLens формирует запрос на языке YQL, Yandex Query исполняет запрос и возвращает результаты, которые визуализируются с помощью чартов.

Ниже приведена архитектура решения.

datalens-architecture

Рассмотрим визуализацию зависимости количества и средней стоимости поездок Нью-Йоркского желтого такси от времени суток. Данные заранее размещены в Yandex Object Storage в общедоступном бакете yq-sample-data в каталоге nyc_taxi_csv.

Примечание

Yandex Cloud предоставляет набор данных — поездки Нью-Йоркского такси — на условиях “как есть” (as is). Yandex Cloud не дает никаких заверений, явных или подразумеваемых, гарантий или условий в отношении использования вами указанного датасета (набора данных). В пределах, разрешенных вашим местным законодательством, Yandex Cloud не несет никакой ответственности за любые убытки или ущерб, включая прямые, побочные, специальные, косвенные, случайные или штрафные, возникшие в результате использования вами датасета.

NYC Taxi and Limousine Commission (TLC):

Данные были собраны и предоставлены NYC Taxi and Limousine Commission (TLC) поставщиками технологий, уполномоченными в рамках Taxicab & Livery Passenger Enhancement Programs (TPEP/LPEP). Данные о поездке не были созданы TLC, и TLC не делает никаких заявлений относительно точности этих данных.

Ознакомьтесь с Источником датасета и Правилами его использования.

Для визуализации и исследования данных подготовьте облако к работе, затем выполните следующие шаги:

  1. Подключитесь к данным в Object Storage.
  2. Создайте подключение в Yandex DataLens.
  3. Настройте поля датасета.
  4. Настройте визуализацию.

Перед началом работыПеред началом работы

Зарегистрируйтесь в Yandex Cloud и создайте платежный аккаунт:

  1. Перейдите в консоль управления, затем войдите в Yandex Cloud или зарегистрируйтесь.
  2. На странице Yandex Cloud Billing убедитесь, что у вас подключен платежный аккаунт, и он находится в статусе ACTIVE или TRIAL_ACTIVE. Если платежного аккаунта нет, создайте его и привяжите к нему облако.

Если у вас есть активный платежный аккаунт, вы можете создать или выбрать каталог, в котором будет работать ваша инфраструктура, на странице облака.

Подробнее об облаках и каталогах.

Примечание

Для создания в DataLens подключения к Yandex Query требуется сервисный аккаунт с ролью editor на каталог, в котором будет создано соединение с бакетом Object Storage.

Подключитесь к данным в Object StorageПодключитесь к данным в Object Storage

  1. В консоли управления выберите каталог, в котором нужно создать соединение.

    select-catalog

  2. В списке сервисов выберите Yandex Query.

    select-yq

  3. На панели слева выберите Учебник.

  4. Нажмите кнопку Создать соединение. В блоке создания соединения все поля ввода параметров уже заполнены — введите описание (опционально) и нажмите кнопку Создать. Вы перейдете на экран создания привязки к данным.

  5. Введите описание привязки к данным (опционально) и нажмите кнопку Создать. Будут созданы нужные для обучения ресурсы.

Создайте подключение в Yandex DataLensСоздайте подключение в Yandex DataLens

Чтобы создать подключение к Yandex Query:

  1. Перейдите на главную страницу DataLens.

  2. На панели слева выберите Подключения и нажмите кнопку Создать подключение.

  3. Выберите подключение Yandex Query.

  4. Укажите параметры подключения:

    • Облако и каталог. Выберите каталог, в котором находится ваш сервисный аккаунт.
    • Сервисный аккаунт. Выберите существующий сервисный аккаунт или создайте новый.
    • Время жизни кеша в секундах. Укажите время жизни кеша или оставьте значение по умолчанию.
    • Уровень доступа SQL запросов. Выберите вариант Разрешить подзапросы из датасетов и запросы из чартов.
  5. Нажмите кнопку Создать подключение.

  6. Введите имя подключения yq-connect и нажмите Создать.

Настройте поля датасетаНастройте поля датасета

  1. На странице создания подключения в правом верхнем углу нажмите кнопку Создать датасет.

    create-dataset

  2. В открывшемся окне введите текст запроса, указанный ниже, и нажмите кнопку Создать.

    SELECT 
        *
    FROM 
        bindings.`tutorial-analytics`
    

    Если все настроено правильно, то в нижней части экрана в блоке Предпросмотр появятся данные следующего вида:

    dataset-results

  3. Создайте вычисляемое поле, содержащее данные часа посадки:

    1. Перейдите на вкладку Поля и нажмите кнопку Добавить поле.

      create-field

    2. В поле Название поля укажите hour_trip.

    3. В строке формул введите:

      HOUR([tpep_pickup_datetime])
      
    4. Нажмите кнопку Создать. Новое поле hour_trip отобразится в списке полей датасета.

  4. В столбце Агрегация для поля total_amount выберите тип агрегации Среднее.

    field-agg

  5. В правом верхнем углу нажмите кнопку Сохранить. Введите имя датасета yellow-taxi-dataset и нажмите Создать.

  6. После сохранения датасета в правом верхнем углу нажмите Создать чарт.

    create-chart

Настройте визуализациюНастройте визуализацию

Для визуализации и исследования используйте чарт типа комбинированная диаграмма.

  1. Выберите тип визуализации Комбинированная диаграмма.

    chart-type

  2. Перетащите измерение hour_trip в секцию X. Измерение в секции X будет общим для всех слоев.

  3. Для первого слоя выберите тип Столбчатая диаграмма.

    select-layer-column

  4. Перетащите показатель total_amount в секцию Y. В области визуализации отобразится столбчатая диаграмма.

  5. Добавьте слой. Для этого нажмите значок справа от названия первого слоя.

  6. Для второго слоя выберите тип Линейная диаграмма.

    select-layer-line

  7. Добавьте в чарт поле:

    1. Вверху слева нажмите и выберите Поле.

      chart-add-field

    2. В открывшемся окне введите:

      • В поле Название поля — count_trip.

      • В строке формул — COUNT().

        chart-field-create

    3. Нажмите кнопку Создать.

  8. Перетащите новый показатель count_trip в секцию Y2. В области визуализации поверх первой диаграммы отобразится линейная диаграмма.

  9. В правом верхнем углу нажмите кнопку Сохранить. Введите имя чарта yellow-taxi-combo-chart и нажмите Сохранить.

В созданном чарте прослеживается зависимость количества поездок (линейная диаграмма) и средней стоимости поездок (столбчатая диаграмма) от времени суток.

datalens-yq-combo-chart

Аналогичным образом вы можете построить дополнительные чарты и дашборды и поделиться результатом с коллегами.

Была ли статья полезна?

Предыдущая
Terraform
Следующая
Публикация обновлений для игр
Проект Яндекса
© 2025 ООО «Яндекс.Облако»