Сбер Бизнес Софт

Разработчик витрин данных (Data Engineer) Hadoop/Greenplum

Не указана
  • Москва
  • От 1 года до 3 лет
  • Spark
  • SQL
  • Scala
  • Hadoop
  • ETL
  • Apache Kafka

Сбер Бизнес Софт в цифрах:

Больше 4 лет развиваем продукты для автоматизации бизнес-процессов, развития продаж и клиентского сервиса.
80% наших сотрудников - ИТ-cпециалисты
100+ проектов в области ИИ
Команда из 500+ экспертов


Мы ищем Data Engineer в команду разработки витрин данных для направления рискового страхования . Это уже существующее направление - вы будете работать над созданием и поддержкой потоков данных, ETL-преобразований и витрин для продуктов благосостояния. Команда занимается обработкой больших объемов данных.


Чем предстоит заниматься:

  • Разрабатывать витрины данных с использованием инструментов Hadoop (Hive, Spark, HDFS);

  • Переносить код прототипов от аналитиков в промышленную среду, доводить идеи до работающих продуктов;

  • Писать и оптимизировать сложные SQL-запросы, работать с процедурами обработки данных;

  • Описывать архитектуру решений и сопровождать полный релизный цикл: от разработки до передачи витрины на поддержку;

  • Настраивать мониторинг и алертинг, анализировать и исправлять дефекты;

  • Работать с системами контроля версий (Git/BitBucket) и CI/CD (Jenkins), раскатывать дистрибутивы по стендам.


Ты идеальный кандидат, если:

  • Продвинутый уровень SQL и опыт оптимизации запросов.

  • Опыт работы с Hadoop-стеком: Hive, Spark, Oozie, HDFS, YARN (понимание внутренней архитектуры);

  • Навыки работы с существующим кодом - умеешь читать, анализировать и дорабатывать чужой код;

  • Опыт написания процедур обработки данных и разработки распределенных приложений;

  • Понимание работы с системами контроля версий (Git, Jenkins, BitBucket);

  • Опыт работы с реляционными СУБД - Teradata, Oracle, MS SQL или аналоги;

  • Умение работать в Confluence, Jira, писать документацию.

Будет большим плюсом

  • Опыт программирования на Scala или Java (PySpark не подходит, так как стек заточен под JVM).

  • Опыт участия в интеграционных проектах (REST API, интеграция систем).

Что мы предлагаем:

  • Оформление в штат по ТК РФ;
  • На период ИС офисный формат работы. Гибридный после завершения ИС;
  • Работа в аккредитованной ИТ-компании, сопутствующие льготы;
  • Ежегодный бонус по итогам работы;
  • ДМС с первого месяца, в т.ч. можно подключить родных по программе со-оплаты;
  • Скидки и льготы от партнеров (путешествия, рестораны, магазины и многое другое);
  • Обучение и участие в конференциях за счет компании;
  • Развитие и расширение компетенций внутри команды.

Почему у нас классно работать:

  • Видимый результат: твой вклад напрямую влияет на продукт и развитие компании;
  • Минимизируем бюрократию, даем возможность проявлять инициативу;
  • Есть возможность карьерного роста внутри команды или других подразделений;
  • Вклад в развитие общества: наши исследования способствуют улучшению экономики регионов и качества жизни людей.

Мы верим в силу данных как инструмента позитивных изменений.