
Amex Development
Data/ELT - инженер_middle/senior
- Hadoop Spark Airflow GreenPlum Oracle ClickHouse Python Bash
Удаленная работа!
Пожалуйста указывайте в сопроводительном письме Вашу локацию и желаемый уровень оплаты в рублях.
Ищем опытного Data Engineer’а, который будет развивать и оптимизировать ETL-процессы на мощном стеке технологий: Hadoop, Spark, Airflow, GreenPlum.
Что предстоит делать:
Разрабатывать и оптимизировать ETL-процессы на стеке Hadoop;
Проводить анализ данных в Hadoop-кластере;
Подключаться к новым источникам данных (ClickHouse, GreenPlum, Oracle, Kafka и др.), анализировать их структуру, объемы, инкременты и бизнес-смысл;ClickHouse, GreenPlum, Oracle, Kafka и др.), анализировать их структуру, объемы, инкClickHouse, GreenPlum, Oracle
Создавать продуктовые витрины в архитектуре DataVault;
Разрабатывать DQ-проверки по техническому заданию;
Оптимизировать процессы, рефакторить код и развивать библиотеку продукта.
Какие навыки важны:
✅ Опыт работы с Hadoop, Spark, Airflow;
✅ Отличное владение Python и Bash;
✅ Понимание модели данных Data Vault;
✅ Опыт работы с GreenPlum;
✅ Владение Git.
✅ Опыт работы с Oracle, ClickHouse;
Что предлагаем:
Конкурентную зарплату и бонусы;
Возможность работать удаленно или в офисе;
Доступ к обучению и развитию (курсы, конференции, сертификации);
Работу над сложными и интересными задачами в команде профессионалов;
Возможность влиять на развитие продукта и процессов.
Если тебе интересно развиваться в Big Data, работать с топовыми технологиями и решать нестандартные задачи — ждем твое резюме!