DataEngineer

#vacancy #DWH #DataEngineer #SQL #MPP #BigData #Senior Senior Аналитик DWH (Дата-платформы / MPP / Big Data) 📊 🗄 ID вакансии: DWH_AiP Ставка: обсуждается. Грейд: Senior. Загрузка: Full-time (полная занятость). Формат: Удалённо. Локация/Гражданство: РФ, РБ. Ищем Senior аналитика DWH с глубокой экспертизой в построении дата-платформ (DWH, OLAP, Data Lake, Lakehouse). Предстоит работать с большими объемами данных (миллиарды записей, ТБ данных), проектировать модели данных по методологиям Kimball и Data Vault, анализировать потоки данных и взаимодействовать с бизнес-заказчиками, разработчиками и администраторами на одном языке. 🚀 Ключевые задачи: Анализ и проектирование: Анализ потребностей бизнеса в подготовленных данных. Подготовка требований в части методологии расчета показателей. Проектирование модели данных презентационных и детальных слоев данных. Поиск релевантных источников данных, профилирование данных в источниках и в контуре платформы данных. Разработка: Разработка алгоритмов построения витрин данных и объектов детального слоя. Разработка прототипов витрин и согласование их с потребителем. Определение логики проверки качества данных и имплементация её для создаваемых витрин. Сопровождение и поддержка: Сопровождение разработки витрин на всех этапах: разработка потоков, тестирование, UAT, передача на поддержку. Решение инцидентов на 3-й линии поддержки. Оценка и планирование: Оценка вычислительных ресурсов, необходимых для решения задачи (сайзинг стораджа и компьюта). Оценка трудозатрат на выполнение доработок. 🎯 Обязательные требования: Архитектура данных: Уверенное понимание принципов построения дата-платформ (DWH, OLAP, Data Lake, Lakehouse). Знание методологий проектирования модели данных (Kimball, Data Vault) и реальный опыт их применения на практике. SQL и БД: Экспертное знание SQL. Знание РСУБД (PostgreSQL, Oracle, MS SQL). Опыт оптимизации сложных запросов. MPP и Big Data: Понимание принципов и опыт работы с MPP-системами (GreenPlum, ClickHouse, Trino). Навыки работы с большими объемами данных (миллиарды записей, ТБ данных). Опыт работы с распределёнными хранилищами (Hadoop, S3). ETL/ELT и потоки данных: Умение анализировать существующие потоки данных и их зависимости (ETL/ELT, Airflow). Умение систематизировать слабоструктурированные требования в формате описания витрин данных. Коммуникация и управление: Сильные навыки коммуникации для общения на одном языке с бизнес-заказчиками, разработчиками и администраторами. Навыки планирования и управления рабочим временем. Навыки постановки задач в смежные подразделения. Грамотная устная и письменная речь . 📲 Контакт для отклика: @hrwomenpro (При отклике, пожалуйста, сразу присылайте актуальное резюме. Пишите ID вакансии: DWH_AiP)