Компания Arenadata ищет DevOps-инженера для поддержки команды разработки и деплоя компонентов в проекте по управлению большими данными в облаках. В ваши обязанности будет входить сборка, упаковка, исследование и запуск программных продуктов в платформе управления большими данными на основе микросервисной архитектуры. Также разработка k8s operator'a для автоматизации деплоя программных продуктов, таких как Spark, Trino, Impala, Airflow, Flink, Picodata и других в кластере Kubernetes.
Что нужно делать:
- Исследовать взаимодействие и конфигурирование инструментов big-data в k8s-кластере.
- Разрабатывать и поддерживать k8s operator на основе kubebuilder.
- Обеспечивать качество кода путём проведения код-ревью.
- Оптимизировать производительность и масштабируемость разворачиваемых решений.
- Работать в тесном взаимодействии с TPM, Developers и др. для обеспечения успешного запуска и поддержки продуктов.
- Поддерживать и развивать существующие k8s решения, включая исправление багов и добавление новой функциональности.
Мы ждём, что вы:
- Обладаете уверенными знаниями Docker/Kubernetes.
- Имеете опыт эксплуатации кластеров k8s и поддержки жизненного цикла приложений микросервисной архитектуры.
- Имеете опыт написания/использования helm-charts.
- Понимаете принципы IaaC.
- Обладаете уверенными знаниями Linux, Git.
- Понимаете цикл разработки программных продуктов.
- Имеете знания и опыт написания скриптов (Go/Python в приоритете).
- Имеете желание развиваться в направлении разработки k8s operators.
Будет плюсом:
- опыт эксплуатации и конфигурирование компонент экосистемы Hadoop (Spark, Yarn, Ranger, Hue)
- практический опыт работы с любым облачным провайдером (AWS, GCP, Azure, VK Cloud, Yandex, SberCloud и пр.).
- знания и опыт разработки K8s operator с использованием operatorSDK framework (Go, Ansible);
- знания и опыт разработки на Go или желание развиваться в этом направлении;
- понимание принципов работы: СУБД, каталогов, очередей, брокеров сообщений (PostgreSQL, Greenplum, Apache Kafka, Clickhouse, Apache Zookeeper, Apache Hadoop и др.).
Условия работы
В качестве окружения мы можем предложить облачную инфраструктуру построенную на ведущих облачных провайдерах РФ, отлаженую систему автоматизированного тестирования, CI/CD на базе GitLab и доступ к передовым разработкам облачных провайдеров и мира open source.
Разработка ведётся на английском языке (тикеты и документация), поэтому ждём от тебя знания языка на уровне свободного чтения и написания технических текстов. Для тех кто учит язык, в компании предусмотрено бесплатное обучение.
Вместе с тобой над проектом будут работать команды Product owners, Architectors, QAs, DevOps и многие другие.
Мы предлагаем матричную структуру управления, нацеленную на создание качественных программных продуктов мирового уровня, позволяющую командам убрать узкие места коммуникации и принятия решений через руководителя и выстроить доверительные отношения внутри команды.
Работа удалённая и/или из офиса (Москва, Санкт-Петербург) на выбор. Команда работает по московскому времени с окном обязательной доступности (с 10 до 16).