
Lamoda Tech
Team Lead Big Data Engineer
Не указана
- Big Data
- Python
- Hadoop
- Spark
- Scala
- SQL
- Apache Kafka
- Apache Airflow
Мы в поиске Team Lead в направление BigData, который будет руководить командой по разработке инструментов и пайплайнов данных для DS и ML команд. Команда работает в различных кросc-функциональных проектах в области DS и поддерживает такие продукты как: ранжирование, навигация, персонализация и прайсинг.
Чем предстоит заниматься:
- Управлять командой из 4 человек (оценка производительности, мотивации, развитие, найм);
- Выстраивать процессы команды и настраивать взаимодействие со смежными командами;
- Определять (и отстаивать) архитектуру решений обработки данных, техническая декомпозиция до понятных команде эпиков;
- Совместно работать с командой над задачами из бэклога, помогать в критических направлениях;
- Обеспечивать качество и надежность производимых командой решений;
- Строить инструменты и ETL пайплайны данных;
- Развивать практику и культуру работы с данными в компании;
- Участвовать в исследованиях и принимать решения по использованию новых инструментов для обработки данных в компании;
- Организовывать и проводить собеседования.
Наш технологический стек: Hadoop, Trino, Spark, Spark Streaming, Airflow, Hudi / Iceberg, Python, Scala.
Мы ожидаем:
- Опыт управления командой от 1 года и готовность решать управленческие кейсы;
- Опыт в организации найма и построения команды;
- Желание быть техническим лидером для команды (не бояться погружаться в детали и помогать достигать целей);
- Готовность управлять сроками и ожиданиями бизнеса;
- Опыт выстраивания процессов с 0, подкрепленный метриками;
- Понимание принципов организации хранилищ данных;
- Уверенное знание SQL, умение строить сложные запросы и оптимизировать производительность;
- Уверенное знание одного из языков программирования: python, java, scala;
- Экспертность в Data Engineering, хорошие знания технологий (hadoop, kafka, spark, trino, airflow).