Amex Development

Data/ELT - инженер_middle/senior

Не указана
  • Москва
  • Полная занятость
  • Удаленная работа
  • От 3 до 6 лет
  • Hadoop Spark Airflow GreenPlum Oracle ClickHouse Python Bash

Удаленная работа!
Пожалуйста указывайте в сопроводительном письме Вашу локацию и желаемый уровень оплаты в рублях.

Ищем опытного Data Engineer’а, который будет развивать и оптимизировать ETL-процессы на мощном стеке технологий: Hadoop, Spark, Airflow, GreenPlum.

Что предстоит делать:
Разрабатывать и оптимизировать ETL-процессы на стеке Hadoop;
Проводить анализ данных в Hadoop-кластере;
Подключаться к новым источникам данных (ClickHouse, GreenPlum, Oracle, Kafka и др.), анализировать их структуру, объемы, инкременты и бизнес-смысл;ClickHouse, GreenPlum, Oracle, Kafka и др.), анализировать их структуру, объемы, инкClickHouse, GreenPlum, Oracle
Создавать продуктовые витрины в архитектуре DataVault;
Разрабатывать DQ-проверки по техническому заданию;
Оптимизировать процессы, рефакторить код и развивать библиотеку продукта.

Какие навыки важны:
✅ Опыт работы с Hadoop, Spark, Airflow;
✅ Отличное владение Python и Bash;
✅ Понимание модели данных Data Vault;
✅ Опыт работы с GreenPlum;
✅ Владение Git.
✅ Опыт работы с Oracle, ClickHouse;


Что предлагаем:
Конкурентную зарплату и бонусы;
Возможность работать удаленно или в офисе;
Доступ к обучению и развитию (курсы, конференции, сертификации);
Работу над сложными и интересными задачами в команде профессионалов;
Возможность влиять на развитие продукта и процессов.

Если тебе интересно развиваться в Big Data, работать с топовыми технологиями и решать нестандартные задачи — ждем твое резюме!