
Ecom.tech
Data Engineer (spark/scala)
- SQL
- airflow
- Scala
- Java
- Greenplum
- Spark
- Spark Structured Streaming
- Airflow
- Kafka
- Cassandra
Сейчас мы в поисках Data Engineer в инфраструктурный продуктовый стрим - Data Platform.
О команде:
Data Platform отвечает за запуск data driven сервисов и продуктов, создание экосистемы и процессов по работе с данными в Самокате, а также за технологическое развитие платформы для решения новых задач компании.
Чем предстоит заниматься:
-
реализация сервисов потоковой (near-realtime) обработки данных и REST API для доступа к данным;
-
разработка ETL процессов и компонентов ETL-фреймворка;
-
участие в развитии процессов и фрэймворков команды разработки.
От успешного соискателя мы ожидаем:
-
опыт разработки с использованием Apache Spark;
-
опыт разработки на Java, Scala;
-
опыт и навыки работы с реляционными базами данных. Уверенные знания по нереляционным и распределенным хранилищам и базам данных;
-
знания базовых алгоритмов и структур данных.