Обязанности:
- Разработка решений по извлечению, трансформации и загрузке данных (ETL/ELT) из различных источников;
- Построение real-time/near-real-time/batch пайплайнов;
- Создание витрин данных;
- Написание SQL-тестов, оптимизацией запросов;
- Разработка инструментов контроля качества и консистентности данных;
- Разработка и внедрение решений для анализа больших данных.
Требования:
- Знание SQL, опыт работы с аналитическими СУБД (ClickHouse/Druid/Vertica) и транзакционными (PostgreSQL/MSSQL);
- Навыки оптимизации запросов и анализа планов выполнения;
- Опыт управления трансформациями данных с использованием dbt/SQLMesh;
- Опыт разработки решений для обработки данных с применением оркестраторов (Airflow/Luigi/Dagster);
- Хорошие знания Python;
- Понимание процессов ETL/ELT и практический опыт их применения;
- Знание принципов и опыт работы с DWH/Data Lake/LakeHouse;
- Опыт работы с Kafka, Kafka Connect, Flink, Docker, Spark.
Условия:
- Оформление в штат в соответствии с ТК РФ;
- Конкурентоспособная заработная плата (обсуждается по результатам собеседования);
- Соц.пакет: программа ДМС со стоматологией, корпоративная мобильная связь, санаторно – курортное лечение;
- Возможность расти как вертикально, так и повышать уровень своих профессиональных и деловых компетенций;
- Внутреннее обучение: конференции, тренинги, мастер-классы, корпоративный университет. Внешнее обучение по направлению профессиональной деятельности;
- Корпоративная электронная библиотека;
- Место работы: Удаленно.