DataWarehouse

#vacancy #DataWarehouse #DataVault #dbt #Greenplum #ClickHouse #Senior Разработчик хранилищ данных (Data Vault / MPP-миграция) 🗄 🔄 ID вакансии: RhD_DNA Ставка: Аналитик — до 310 000 руб. на руки Разработчик — до 350 000 руб. на руки Грейд: Senior. Загрузка: Full-time (полная занятость). Формат: Удалённо. Локация/Гражданство: РФ / РФ. Ищем Senior разработчика хранилищ данных для работы в БКС. Ключевая задача проекта — миграция БД с MS SQL на MPP-системы (Greenplum, ClickHouse) по методологии Data Vault с использованием dbt. Предстоит проектировать и разрабатывать витрины данных (DDS, DMA), оптимизировать SQL-запросы, строить ETL/ELT-процессы и проводить нагрузочное тестирование. 🚀 Ключевые задачи: Проектирование и разработка: осуществление проектирования и разработки витрин (DDS, DMA) по методологии Data Vault с использованием механизма dbt. Миграция: участие в выборе подхода к миграции — прямой перенос или рефакторинг с использованием MPP-паттернов. Тестирование: проведение тестирования (включая нагрузочное, стресс-тесты), проведение ПСИ (приёмо-сдаточных испытаний). Оптимизация: оптимизация SQL-запросов, чтение и анализ планов запросов. ETL/ELT: разработка трансформаций для большого количества разных типов источников. 🎯 Обязательные требования: SQL и базы данных: Экспертные знания SQL. Большой опыт оптимизации SQL-запросов, умение читать план запроса. Миграция и MPP: Опыт участия в проектах миграции БД с MS SQL на Greenplum, ClickHouse по методологии Data Vault. Опыт построения MPP-хранилищ. Фреймворки и языки: Опыт работы с фреймворком dbt. Знания Python. ETL/ELT: Большой опыт разработки ETL/ELT-трансформаций для большого количества разных типов источников. 💡 Будет преимуществом (Nice to have): Технологии и инструменты: Знание технологий Apache Airflow, Apache NiFi, S3, Kafka. Углублённое понимание MPP-оптимизации. Работа с данными: Опыт работы с большими объёмами данных. Опыт работы с холодным хранилищем (S3). Коммуникация: Консультирование и обучение пользователей DWH. 📲 Контакт для отклика: @hrwomenpro (При отклике, пожалуйста, сразу присылайте актуальное резюме, пишите ID вакансии: RhD_DNA и указывайте, на какую роль претендуете — аналитик или разработчик)