МАГНИТ, Розничная сеть

MLOps / Data-инженер (F&R)

Не указана
  • Санкт-Петербург
  • Полная занятость
  • Удаленная работа
  • От 3 до 6 лет
  • Spark
  • PySpark
  • Apache Airflow
  • CI/CD
  • k8s
  • Kubernetes

Привет!

Мы — команда Магнит, крупнейшего офлайн-ритейлера в России.
У нас — более 26 000 магазинов, и наша задача — чтобы в каждом из них был нужный товар в нужное время. Для этого мы оптимизируем цепочки поставок, учитывая возможности логистики, распределительных центров и поставщиков.

F&R — крупный стратегический проект по оптимизации цепочек поставок: от прогноза спроса до пополнения конкретного магазина.

Мы занимаемся разработкой и сопровождением модуля прогнозирования спроса. Сейчас разрабатываем ML-платформу для поддержки всего цикла ML: от данных до продакшн-моделей.

Задачи

  • Разработка, оптимизация и рефакторинг spark-приложений
  • Проектирование и поддержка пайплайнов и их оркестрации (Airflow, CI/CD)
  • Разработка архитектуры и оптимизация системы прогнозирования спроса
  • Разработка микросервисов и унифицированных решений

Стек технологий

Python, Spark, Airflow, Git, CI/CD, Docker, k8s, kubeflow

Ожидания от кандидата

  • Глубокие знания Apache Spark (разработка Pyspark приложений, оптимизация, работа с большими данными)
  • Опыт оркестрации сервисов с использованием Airflow
  • Опыт разработки CI - пайплайнов
  • Знакомство с основными принципами Kubernetes

Что предлагаем:

  • официальное оформление в аккредитованной IT-компании
  • формат работы на выбор: удалёнка, гибрид или офис (Москва/СПБ/Краснодар/Иннополис)
  • прозрачные процессы, минимум бюрократии
  • обучение за счёт компании, участие в конференциях
  • ДМС со стоматологией + льготы для семьи
  • корпоративные скидки и бонусы от партнёров