О чем эта история
Дата-компания Weborama перенесла данные своих клиентов в масштабируемое хранилище данных Yandex Object Storage. Также на управляемых сервисах Yandex Cloud были развернуты сервисы: инструмент для верификации трафика Weborama Campaign Manager и DMP-платформа по работе с данными Weborama Audience Manager.
Миграция на российскую облачную платформу позволила в сжатые сроки выполнить требования федерального закона 152-ФЗ «О персональных данных», а использование платформенных сервисов — высвободить время на разработку новых инструментов, не увеличивая штат девопс-инженеров.
Перенос обработки персональных данных на территорию России
Weborama — глобальная независимая дата-компания и мировой лидер в сфере управления аудиторными данными со штаб-квартирой во Франции. Компания специализируется на разработке и внедрении технологических решений, основанных на работе с аудиторными данными и направленных на улучшение маркетинговых показателей и повышение эффективности рекламных расходов. В ее активе широкий стек собственных технологий и ресурсов, в том числе:
- Решение класса CDP/DMP (Weborama Audience Manager).
- База аудиторных профилей (BigSea).
- Инструменты семантического анализа текстовых данных для изучения интернет-аудитории (BigFish), построения кастомных аудиторных сегментов (MoonFish) и контекстуального таргетинга (GoldenFish).
- Инструменты измерения и аудита рекламных размещений (Weborama Campaign Manager).
В России компания работает с 2012 года. Сотрудничает с ведущими рекламодателями, крупнейшими коммуникационными группами и площадками. Все хэшированные данные клиентов, в том числе и пользователей из России, компания хранила на своих собственных серверах во Франции.
Однако в 2015 году вступил в силу федеральный закон 242-ФЗ, который внес изменения в 152-ФЗ и обязал размещать персональные данные россиян в дата-центрах на территории РФ. Для того чтобы выполнить требования законодательства, Weborama было необходимо быстро найти партнера для переноса данных российских клиентов. При этом подписанный SLA не позволял компании надолго отключить доступ к данным. Проблемы или сбои в работе могли привести к большим штрафам, снижению доходов компании, а также к потере доверия клиентов. А некоторые сервисы настолько чувствительны к задержкам, что простаивание их даже в течение минуты было бы критичным.
От верификатора трафика к миграции в облако
На тот момент Weborama уже имела опыт работы с Яндексом — дата-компания стала одним из верификаторов платформы, что позволило рекламодателям оценивать размещения медийной рекламе на площадках Яндекс. Компания решила развивать сотрудничество и выбрала для миграции облачную платформу Yandex Cloud.
Помимо большого количества платформенных сервисов, которые тесно интегрированы между собой и могут быть использованы для создания новых сервисов Weborama, облачная платформа Яндекса имеет аттестат соответствия ИСПДн требованиям безопасности информации и персональных данных. Аттестат подтверждает, что облачная платформа полностью выполняет все требования 152-ФЗ, постановления правительства № 1119 и Приказа ФСТЭК № 21 и обеспечивает первый уровень защищенности обрабатываемых персональных данных (УЗ-1).
Миграция и разработка новых сервисов
Основной задачей был перенос данных и сервисов Weborama с собственных серверов во Франции на облачную платформу. Вместе с консультантами Yandex Cloud был разработан алгоритм миграции: на каждом этапе проводилось тестирование, а затем реализация итерации. Такой подход позволил провести плавный переход на новую инфраструктуру, избежав потери данных и, соответственно, срывов проектов.
На виртуальных машинах Yandex Compute Cloud были подняты необходимые для работы сервисы: брокер сообщений RabbitMQ и система мониторинга Prometheus. Данные размещались в универсальном масштабируемом облачном объектном S3-совместимом хранилище Yandex Object Storage, а для управления СУБД Redis был настроен управляемый сервис Yandex Managed Service for Redis. За процесс создания кластеров и управления ими отвечает Yandex Managed Service for Kubernetes, а для балансировки нагрузки используется Yandex Network Load Balancer.
Миграцию на новую инфраструктуру удалось реализовать в сжатые сроки. Теперь информация клиентов компании хранится в дата-центрах Яндекса на территории России, а само хранилище автоматически масштабируется под любое количество загружаемых данных. Также облачная инфраструктура позволила Weborama всего за полгода развернуть на российских серверах инструмент для верификации трафика Weborama Campaign Manager и DMP-платформу по работе с данными Weborama Audience Manager. При этом компания активно пользовалась консультациями инженеров со стороны Яндекса, что позволило минимизировать количество ошибок.
Стабильная работа в соответствии с законом о персональных данных
Миграция данных и сервисов в Yandex Cloud открыла для Weborama возможность не только в короткие сроки полностью обеспечить соответствие требованиям российского законодательства, но и создавать новые продукты под развертывание на облачной платформе с фокусом на масштабируемость и гибкость.
Облачный провайдер принял на себя все организационно-технические меры для обеспечения защиты персональных данных граждан России. Следующий шаг компании в применении облачных технологий — увеличение объемов используемых ресурсов.
Мнение
С целью соответствия предъявляемым в законе «О персональных данных» требованиям мы вместе с консультантами Yandex Cloud разработали решение по пошаговому переводу сервисов, где на каждом этапе проводилось тестирование, а затем реализация итерации. Это помогло провести плавный переход на новую инфраструктуру, избежав потери данных и, соответственно, срывов проектов. Таким образом, мы окончательно укрепились во мнении о правильном выборе поставщика облачного сервиса.