DataEngineer

#vacancy #DataEngineer #BigData #Hadoop #Java #Groovy #Airflow #NiFi Data Engineer (Big Data / Hadoop / Java / Groovy / X5) 📊 🐘 ID вакансии: DE_Gul Ставка: до 250 000 руб. на руки в месяц. Грейд: Senior / Lead. Загрузка: Full-time (полная занятость). Формат: Удалённо. Заказчик: X5. Локация/Гражданство: РФ и дружественные страны. ⏳ Срок актуальности вакансии: до 09.08.2026. 📌 Важно: рассматриваются кандидаты с релевантностью опыта от 85% (аутстаффинговая позиция). ‼️ КРИТИЧНО: при отклике обязательно указывайте номер телефона РФ (+7) — на него будут выданы доступы. Кандидаты без российского номера не рассматриваются. ‼️ Все перечисленные ниже требования должны быть отражены в резюме! Ищем опытного Data Engineer для работы над Big Data-платформой в X5. Роль для зрелого инженера уровня Senior/Lead, который самостоятельно разрабатывает и поддерживает интеграционные решения, решает технически сложные задачи, определяет технологическую стратегию проекта и выстраивает инженерные практики (CI/CD, код-ревью). Пред предстоит работать со стеком Java/Groovy, Apache NiFi, Airflow, Hadoop, Hive и реляционными БД. 🚀 Ключевые задачи: Самостоятельная разработка, реализация и поддержка интеграционных решений на стеке команды (Java, Groovy, Apache NiFi, Airflow). Определение стека технологий для конкретных проектов и задач. Решение технически сложных задач, которые не могут решить другие инженеры в команде. Оперативное реагирование на проблемы в зоне ответственности, выполнение задач в установленные сроки. Разработка и контроль актуальности документации по взаимодействию конфигурационных единиц платформы больших данных. Контроль качества интеграционных решений с последующим созданием задач/дефектов для рефакторинга. Определение технологической стратегии развития проекта или продукта, работа на перспективу. Выстраивание процессов (CI/CD, код-ревью), внедрение и развитие инженерных практик. Предоставление отчётов о деятельности руководству. 🎯 Обязательные требования : Языки программирования: Владение одним из языков: Java или Groovy. Знание принципов ООП, умение читать чужой код. Сборка и деплой: Сборка проекта, компиляция и деплой в Rancher (Docker). Big Data и интеграции: Опыт проектирования, реализации, развития и поддержки интеграционных решений на стеке технологий BigData. Опыт работы с Hadoop. Понимание устройства HDFS, форматов данных. Опыт работы с Hive или любым другим хранилищем на основе Hadoop. Базы данных и SQL: Знание SQL (индексы, функции, умение читать планы запросов, оптимизация запросов). Опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MS SQL, DB2 и т.п.). ETL и инструменты: Знание особенностей работы ETL-инструментов (Apache NiFi, Airflow, интеграционные шины SAP BW, Talend, Informatica, SAS и т.п.). Архитектура данных: Понимание принципов построения и хранения данных — DWH и DataLake. Умение работать с архитектурными схемами. Инструменты и процессы: Умение работать с Git в консоли. Опыт использования систем ведения проектов и документации. 💡 Желательные навыки: Опыт администрирования Unix / Linux. Опыт администрирования Hadoop (HDFS, Yarn, Ranger, Spark, Zookeeper). Опыт работы с Zabbix, Ansible. 📲 Контакт для отклика: @hrwomenpro (При отклике, пожалуйста, сразу присылайте актуальное резюме с подтверждением всех обязательных требований, пишите ID вакансии: DE_Gul)