Переход на AWS помог компании Technodom модернизировать архитектуру данных

О редакции Битва супераппов! Так ли хорош Kaspi?
Дата публикации: 10.10.2024, 17:02
Эдуард Ким руководитель data office TechnoDom, Qlik, Datanomix

Эдуард Ким руководитель data office TechnoDom, Qlik, Datanomix

Переход инфраструктуры и аналитики в облако помогает компаниям по всему миру решать проблемы с масштабируемостью и эффективностью работы с данными. Ведущая сеть электроники в Казахстане Technodom одной из первых в регионе начала использовать AWS для работы с большими данными и ML-проектами. В результате качество данных повысилось на 70 процентов, а производительность разработки — на 40 процентов. О результатах внедрения рассказали на сайте Amazon. Digital Business собрал ключевые тезисы опубликованного кейса, а также узнал некоторые подробности у Head of data office Technodom Эдуарда Кима и СЕО qCloudy Нурбека Садыкова — его компания помогала внедрять сервисы в структуру торговой сети..


Technodom — сеть розничной торговли электротехническим и компьютерным оборудованием в Казахстане. Компания одной из первых в регионе перешла на Amazon Web Services (AWS) для проекта по работе с большими данными и машинным обучением (ML). Компании необходимо было модернизировать инфраструктуру данных, чтобы справиться с разрозненностью данных и отказоусточивостью, которая мешала быстро принимать data-driven решения. Используя AWS, Technodom увеличил производительность разработки, улучшил качество обслуживания клиентов и повысил персонализацию с помощью внедрения новых моделей машинного обучения, а также модернизировал свою архитектуру данных.


Миграция на AWS как способ модернизировать архитектуру данных

Technodom образован в 2002 году и сейчас включает 79 магазинов, 92 пункта самовывоза в 28 городах Казахстана. В 2022 году в компании разработали стратегию цифровой трансформации. Предыдущая архитектура бизнеса опиралась на локальные центры обработки данных — с высокими затратами на обслуживание, ограниченной масштабируемостью и низкой эффективностью.

Чтобы преодолеть эти барьеры, Technodom разработал новую архитектуру данных, используя сервисы AWS. Ритейлер привлек партнера AWS — qCloudy — для создания инфраструктуры новой дата-платформы. Команда qCloudy подключилась на раннем этапе, когда Technodom только сформулировал идею трансформации в публичном облаке в абсолютно новой концепции. Команды вместе прошли путь от Proof of Concept (PoC) до полноценного внедрения озера данных.

Партнер совместно с командой Technodom разработал инфраструктуру дата-платформы. Подобрал подходящие инструменты AWS для задач заказчика: безопасное хранение данных, интеграция и подготовка данных, сервис для высокопроизводительной аналитики, и конечно, ML-сервисы, с помощью которых Technodom внедрил модели машинного обучения для автоматизации и персонализации.

— Наш партнер qCloudy и служба поддержки AWS оказали всестороннюю поддержку, помогая с проектированием безопасной архитектуры и миграцией данных, что значительно упростило процесс,— добавляет Эдуард Ким.

Эдуард Ким, Datanomix.pro, Qlik, TechnoDom, дата-аналитика, бизнес-аналитика, цифровизация бизнеса

Эдуард Ким

Повышение производительности разработки на 40 процентов с помощью AWS

Technodom начал постепенную миграцию на AWS в 2022 году. Сперва внедрили платформу данных с использованием концепции Lake House (гибридная архитектура данных, сочетающая элементы озер и хранилищ данных — прим. Digital Business). Концепция объединяет подходы Data Lake и Data Warehouse, а также обеспечивает принятие data-driven-решений с помощью облачного хранилища данных.

Technodom использует сервисы AWS для решения трех задач:

  1. Безопасное управление озером данных — централизованным хранилищем, которое принимает и обрабатывает большие объемы данных;
  2. Организация сложных рабочих процессов;
  3. Обработка данных практически в реальном времени.

Надежное управление данными и бесперебойный поток информации способствует принятию решений и инновациям. Именно работа с огромными объемами данных, которые поступали из разных источников, стала главным вызовом проекта для партнера qCloudy.

— Это не просто проект по развертыванию инфраструктуры или внедрению DevOps — это большая работа по построению целой дата-платформы с возможностями машинного обучения. Важно было не только построить Data Lake, но и обеспечить доступность каждой единицы данных принятия решений без задержек. Такие проекты — пока редкость в Казахстане, и мы гордимся, что приняли этот вызов и успешно его реализовали, — основатель qCloudy Нурбек Садыков.

Нурбек Садыков

К концу 2022 года Technodom располагал облачной инфраструктурой и реализовал несколько моделей машинного обучения на Amazon SageMaker — сервисе с полной автоматизацией управления. В него входит широкий набор инструментов для высокопроизводительного и недорогого машинного обучения практически для любого сценария использования.

—Используя модели машинного обучения на AWS SageMaker и автоматизируя пайплайн машинного обучения, мы предоставляем персонализированные рекомендации по ассортименту товаров каждого магазина. Это приводит к увеличению продаж до 15 процентов определенных категориях и сокращает время ручной обработки ассортимента нашими категорийными менеджерами. Такая автоматизация значительно повысила эффективность и производительность нашей деятельности, — Head of data science компании Technodom Никита Гаврилов.

Благодаря AWS Technodom повысил качество данных на 70 процентов, а производительность разработки — на 40 процентов. Нововведение также свело к минимуму затраты на обслуживание. Теперь компания может масштабировать ресурсы для оптимизации эксплуатационных расходов. Кроме того, «Технодом» получил конкурентное преимущество и сократил время выхода на рынок при запуске новых проектов.

Улучшение аналитики с помощью AWS и искусственного интеллекта

Technodom  уделяет внимание масштабируемости и возможности быстрого внесения изменений. Компания масштабирует свои лучшие ML-модели с помощью ИИ-функционала Amazon SageMaker, еще больше расширяет возможности анализа данных и внедряет инновации с помощью AWS.

— Мы использовали AWS, чтобы достичь целей инноваций и цифровой трансформации, предоставив современную и безопасную облачную архитектуру, поддерживающую передовую аналитику и машинное обучение, — отмечает Эдуард Ким.