ОВЕН, Производственное объединение

Data Engineer

Не указана
  • Москва
  • Полная занятость
  • Полный день
  • От 3 до 6 лет
  • Python
  • PostgreSQL
  • Apache Kafka
Обязанности:

Обеспечение надежного потока данных из всех
источников (почта, телефония, CRM, Jira,
Confluence) в единое хранилище (DL/DWH),
ответственность за их качество, консистентность и
доступность для аналитики и AI;

Проектирование архитектуры слоев хранения (raw → staging →curated);

Настройка интеграции и оркестрация (Airbyte, Airflow);

Отслеживание качества (Great
Expectations);

Оптимизация хранения
(Postgres/ClickHouse, S3/MinIO), внедрение практики
идемпотентности и дедупликации.

Требования:

Высшее техническое образование;

Общий стаж: от 3 лет в сфере работы с данными (ETL/ELT, DWH, интеграции);

Опыт на продакшне: минимум 1-2 года поддержки и оптимизации потоков данных в реальных боевых системах;

Обязательно:

• проектирование пайплайнов в Airflow (или

аналогах)
• опыт работы с S3-совместимыми хранилищами
(AWS S3, MinIO и т.п.)
• уверенные SQL-навыки (Postgres/ClickHouse,
сложные запросы с оконными функциями и
CTE);

• написание коннекторов/обработчиков на
Python;

Обязательное знание: SQL (window/CTE), Python, Airflow, одна из S3-совместимых систем, Postgres/ClickHouse, моделирование данных;

Желательное знание: Kafka/Redpanda, Debezium (CDC), опыт с почтовыми / M365 / IMAP API, IoT / OPC UA / BACnet / Modbus.

МЫ ПРЕДЛАГАЕМ:

График 5/2 гибкий начала рабочего дня;

Широкие возможности для развития - семинары, мастер – классы, корпоративная программа наставничества, программы для развития руководителей;

«Белая» заработная плата, гибкое начало рабочего дня и полное соблюдение ТК;

Профессиональное обучение за счёт Компании;

Изучение английского в офисе за счет Компании;

ДМС;

Компенсация затрат на занятия спортом;

Доступ к электронной библиотеке Альпина Диджитал для сотрудников;

Автомат с полезной едой в офисе;

Подарки сотрудникам к праздникам;

Профессиональный коллектив;

Отсутствие дресс-кода.