Kubernetes

#vacancy #DataOps #Kubernetes #Spark #Flink #Trino #StarRocks #Iceberg #Paimon #ClickHouse #CDC DataOps Engineer (Lakehouse / Streamhouse / Kubernetes / Производство) 📊 ⚙️ ID вакансии: 155_Kok Ставка: до 275 000 руб. на руки в месяц. Грейд: Senior / Senior+ / TeamLead. Загрузка: Full-time (полная занятость). Старт: ASAP. Длительность проекта: 6 месяцев. Формат: Удалённо. Язык: Английский — чтение технической документации. Локация/Гражданство: РФ, РБ. Проект: Производство. ⏳ Срок актуальности вакансии: до 12.08.2026. 📌 Важно: рассматриваются кандидаты с релевантностью опыта от 85% (аутстаффинговая позиция). ‼️ Критичные требования (приоритет при оценке): Опыт настройки CDC (Change Data Capture). Знание Terraform или Ansible. Опыт работы с Trino, StarRocks. Опыт в построении Lakehouse / Streamhouse архитектур. Знание особенностей работы с Big Data-стеком. Paimon / Iceberg. Spark / Flink. ClickHouse. Ищем DataOps-инженера уровня Senior / TeamLead для работы над проектом в производственной компании. Пред предстоит поддерживать и развивать CI/CD пайплайны для data-инфраструктуры, сопровождать Kubernetes-кластер, администрировать вычислительные движки (Trino, Flink, StarRocks, Spark) и работать с современными форматами хранения (Iceberg, Paimon, Parquet, ORC, S3/MinIO). 🚀 Ключевые задачи: Поддержка и развитие CI/CD пайплайнов для data-инфраструктуры. Организация и сопровождение Kubernetes-кластера: деплойменты, helm-чарты. Настройка и поддержка инфраструктуры для работы с DWH, Lakehouse и Streamhouse. Поддержка и администрирование вычислительных движков: Trino, Flink, StarRocks, Spark. Работа с системами хранения: Apache Iceberg, Paimon, Parquet, ORC, S3 (MinIO). Настройка CDC-процессов для сбора и синхронизации данных. Мониторинг и логирование сервисов, устранение инцидентов. Автоматизация рутинных задач, связанных с управлением экспериментальными окружениями (20+ машин). Взаимодействие с data-инженерами и аналитиками для обеспечения стабильности и прозрачности процессов. 🎯 Обязательные требования: Kubernetes и CI/CD: Опыт работы с Kubernetes: деплойменты, Helm. Опыт работы с системами CI/CD. Вычислительные фреймворки: Опыт администрирования и настройки вычислительных фреймворков (Spark, Flink или аналоги). Хранилища данных: Опыт работы с хранилищами данных (Iceberg, Paimon или схожие). Опыт работы с S3-совместимыми системами хранения (MinIO или AWS S3). Автоматизация: Навыки автоматизации (Bash, Python, Groovy и др.). Инструменты и процессы: Знание Git, опыт работы с GitLab / Jira / Confluence. Архитектура данных: Понимание принципов DWH и потоковой обработки данных. 📲 Контакт для отклика: @hrwomenpro (При отклике, пожалуйста, сразу присылайте актуальное резюме, пишите ID вакансии: 155_Kok) 📢 Источник: https://t.me/itworkhubchannel/820