Группа НЛМК

Ведущий разработчик (Hadoop)

Не указана
  • Москва
  • Полная занятость
  • Удаленная работа
  • От 1 года до 3 лет
  • Hadoop
  • Clickhouse
  • Python
  • Apache Airflow

НЛМК-ИТ — обеспечивает потребности предприятий Группы НЛМК в развитии информационных технологий. В спектр услуг входят: реализация ИТ-проектов, поддержка и развитие бизнес-приложений, ИТ-инфраструктуры и систем связи. Численность сотрудников ИТ превышает 800 человек.

Чем предстоит заниматься:

  • Проектировать и развивать масштабируемое DWH на PostgreSQL, Cloudera и Clickhouse для сложных аналитических задач;

  • Реализовывать и оптимизировать процессы интеграции, загрузки и трансформации больших объемов данных(Airflow/SQL);

  • Внедрять лучшие практики моделирования, обработки и анализа данных;

  • Обеспечивать высокую доступность и качество данных, автоматизировать мониторинг и контроль целостности;

  • Менторить команду, делиться экспертизой по современным технологиям Data Engineering.

Для нас важно:

  • Глубокие знания архитектуры и практический опыт построения хранилищ данных на PostgreSQL, знание Cloudera и Clickhouse будет плюсом;
  • Отличное владение SQL и опыт оптимизации запросов для обработки больших объёмов данных;
  • Умение проектировать и поддерживать ETL/ELT-процессы с использованием Python и Airflow;
  • Опыт работы с системами контроля версий (Git), CI/CD, Linux и инструментами мониторинга;
  • Экспертиза в моделировании данных, аналитическом дизайне DWH и оптимизации хранения;
  • Способность быстро осваивать новые технологии и делиться опытом с командой.

Работа в группе НЛМК - это:

  • ДМС, включая стоматологию;
  • Страхование жизни и страховка для путешественников;
  • Корпоративная мобильная связь;
  • Система скидок для сотрудников НЛМК ИТ;
  • Частичная компенсация питания в корпоративных столовых;
  • Возможность обучения за счет работодателя;
  • Активная корпоративная жизнь;
  • Поддержка от компании в жизненно важных событиях;
  • Бесплатный доступ к электронной библиотеке.