Норникель

Data Engineer

Не указана
  • Москва
  • Полная занятость
  • Полный день
  • От 3 до 6 лет

Вакансия открыта в ООО "Норникель Спутник" (аккредитованная IT - компания).

НАШИ ЗНАНИЯ - ВАШИ ВОЗМОЖНОСТИ

"НОРНИКЕЛЬ Спутник" СЕГОДНЯ:

Уникальные и интересные задачи: У нас можно участвовать в масштабных и уникальных проектах совместно с коллегами по всей России и видеть результаты своей ежедневной работы.

Поддержка коллег: У нас можно развиваться вместе с опытной командой, готовой делиться своей экспертизой и поддерживать вас при решении сложных задач.

Разносторонний опыт и развитие: У нас можно совершенствовать свои навыки и знания, которые сделают вас конкурентоспособными на рынке труда, а также иметь возможности для прозрачного карьерного роста, как вертикального, так и горизонтального.

Забота о сотрудниках: У нас можно активно участвовать в корпоративной жизни, присоединяться к волонтерским программам Группы компаний «Норникель», всегда быть в форме, участвуя в спортивных мероприятиях вместе с коллегами.

В 2020 году Норникель встал на путь цифровой трансформации, которая включает разработку собственных цифровых платформ и решений, внедрение Data Driven в технологические, производственные и бизнес-процессы. Компания ежегодно повышает собственный уровень AI операционализации. Здесь ключевую роль играет Экосистема Озера данных, которая, по сути, является цифровой сервис-площадкой для реализации всех инициатив, направленных на цифровизацию различных технологических и бизнес-процессов, например, производства на базе цифровых двойников, советчиков и аналитических отчетов.

Озеро данных спроектировано как масштабируемая платформа и в перспективе позволит хранить и анализировать данные всей группы компаний, получая синергетический эффект при обогащении новыми данными существующих на предприятии цифровых моделей.

Команда Big Data, курирующая Озеро данных, стремительно растет, масштабируется и ищет новых специалистов, в том числе на роль Data Engineer

Обязанности:

  • Участие в запуске технологических, инновационных и бизнес-решений (в том числе с использованием AI/ML) в Экосистеме Озера данных;
  • Разработка и реализация e2e интеграционных сценариев и решений от источников данных до Экосистемы Озера данных;
  • Поддержка решений, запущенных в Экосистеме Озера данных;
  • Участие в сборе, систематизации и анализе инициатив по анализу данных;
  • Осуществление контроля за качеством собираемых данных, организация Data Quality;
  • Оценка качества и применимости внедряемых решений и инструментов по анализу данных;
  • Участие в разработке, развёртывании и развитии ИТ-инфраструктуры Экосистемы Озера данных.
  • Участие в разработке и принятии проектной и сопровождающей документации к внедряемым решениям.

Требования:

  • Опыт в разработке интеграционных потоков данных (Batch и Streaming Data Pipelines);
  • Знание Data Lake, DWH;
  • Опыт работы с Hadoop, Spark, Hive, Kafka, NiFi, Greenplum, PostgreSQL, ClickHouse;
  • Опыт администрирования с использованием Jira, Confluence;
  • Знание SQL, Python;
  • Навыки оформления отчетных материалов, технических заданий, функционально-технических требований.

Будет преимуществом (работа в следующем технологическом окружении):

  • Опыт в разработке архитектуры данных (Data Vault);
  • Python Application Server;
  • Jupyter Lab, Jupyter Hub;
  • RedOS/ Ubuntu/ Astra Linux;
  • Kubernetes/ OpenShift;
  • GitLab.

Условия:

  • официальное трудоустройство по ТК РФ;
  • ДМС (включающий стоматологию);
  • график работы с 9:00 до 18:00 (офис, гибридный режим, возможна полная удаленная работа);
  • работа в стабильной, интенсивно развивающейся компании;
  • карьерный и профессиональный рост;
  • возможность повышения квалификации за счет работодателя.