Ecom.tech

Data Engineer (spark/scala)

Не указана
  • Москва
  • Полная занятость
  • Удаленная работа
  • От 3 до 6 лет
  • SQL
  • airflow
  • Scala
  • Java
  • Greenplum
  • Spark
  • Spark Structured Streaming
  • Airflow
  • Kafka
  • Cassandra

Сейчас мы в поисках Data Engineer в инфраструктурный продуктовый стрим - Data Platform.

О команде:

Data Platform отвечает за запуск data driven сервисов и продуктов, создание экосистемы и процессов по работе с данными в Самокате, а также за технологическое развитие платформы для решения новых задач компании.

Чем предстоит заниматься:

  • реализация сервисов потоковой (near-realtime) обработки данных и REST API для доступа к данным;

  • разработка ETL процессов и компонентов ETL-фреймворка;

  • участие в развитии процессов и фрэймворков команды разработки.

От успешного соискателя мы ожидаем:

  • опыт разработки с использованием Apache Spark;

  • опыт разработки на Java, Scala;

  • опыт и навыки работы с реляционными базами данных. Уверенные знания по нереляционным и распределенным хранилищам и базам данных;

  • знания базовых алгоритмов и структур данных.