Позиция: Middle Data Engineer

Позиция: Middle Data Engineer Куда: Сбер, B2C, Data Unit, Трайб X Формат работы: полная занятость; офис/гибрид в Москве, Санкт-Петербурге Вилка гросс: 250-430 + годовой бонус (mid 25%, max 50%) от годового оклада Про нас: Мы разрабатываем внутреннее веб-приложение для создания и управления клиентскими сегментами. Платформа позволяет кампейн-инженерам и аналитикам формировать целевые аудитории через UI с фильтрами по клиентским атрибутам, рассчитывать размер аудитории в реальном времени и публиковать готовые сегменты. В 2026 году мы планируем реализовать бэклог из множества задач, включая расширение функциональности конструктора сегментов, разработку ИИ-помощника, разработку интеграционных взаимодействий. Что предстоит делать? - Разрабатывать и оптимизировать ETL потоки Hadoop <-> Clickhouse - Разрабатывать и встраивать в приложение систему контроля качества данных - Автоматизировать рутинные операции при управлении атрибутным составом приложения - Проводить эксперименты для повышения производительности вычислений в Clickhouse От нас: - Разработка важной функциональности, которую ждут многочисленные внутренние клиенты из разных команд Банка - Амбициозные задачи для создания лучшего продукта на рынке - Минимум бесполезных встреч - ДМС Требования: - Опыт работы с БД (Hadoop, Clickhouse, Greenplum) от 2х лет - Опыт работы и глубокое понимание Spark, Hive, MapReduce - Продвинутый уровень SQL Что ещё может пригодиться: - Kafka, Flink - Опыт настройки и оптимизации Clickhouse - CI/CD (у нас Jenkins+Bitbucket+Nexus), DevOps Ответы на 10 важных вопросов 1. Данные: петабайты данных десятков миллионов розничных клиентов Банка. 2. Железо, продакшн и ноутбук: кластеры Hadoop, Clickhouse. Рабочий ноутбук на Linux + разные варианты ВРМ (Citrix Workspace, преимущественно Windows). 3. Масштаб влияния на бизнес: продукт на стадии опытной эксплуатации, в перспективе станет главным выбором для различных бизнес-процессов Банка, требующих сборку аудитории. 4. Уровень зрелости Data Science: функция ИИ внедрена во все ключевые направления бизнеса, ИИ приносит деньги и бизнес активно приходит с запросом на наши решения. 5. Роль DE: разрабатывать и отвечать за качество потоков данных, поддерживать высокую производительность вычислений. 6. Бэкграунд вашего руководителя: Linkedin. 7. Как часто вам будут мешать работать: Ежедневные дейли, планирование на час-полтора один раз в 2-недельный спринт. 8. Карьерный рост: Каждый квартал – компания оценок и ревью. Централизованные компании по пересмотру ЗП и грейда раз в полгода. 9. Prod/research: prod 80%, rnd 20%. 10. Роль сервиса или лидера: преимущественно сервисная роль. CV отправлять в tg