Data Engineer (GCP Migration & Cloud Data Platforms)

Data Engineer (GCP Migration & Cloud Data Platforms) О компании и роли Мы ищем опытного Senior Data Engineer / Senior Data & AI Cloud Engineer для участия в комплексных миграциях корпоративных дата-платформ на Google Cloud Platform. Это стратегическая роль для инженера с сильным техническим бэкграундом, реальным опытом миграции больших экосистем данных (Spark/Databricks → GCP) и глубоким знанием GCP data stack. Проект долгосрочный, с высокой степенью ответственности, архитектурного влияния и hands-on участия. Основные задачи Вести end-to-end миграцию с AWS / Databricks / Spark на GCP. Определять архитектуру BI-миграции (например, QuickSight → BigQuery BI). Переписывать PySpark/Spark-пайплайны под GCP (BigQuery SQL, Dataflow/Beam, Dataproc Serverless). Мигрировать крупные DBT-проекты (50–60+ моделей). Разрабатывать фреймворк для проверки качества данных и reconciliation. Создавать инфраструктуру через Terraform. Настраивать CI/CD на GitLab, автоматизацию тестов и валидацию моделей. Оптимизировать оркестрацию через Airflow / Cloud Composer. Участвовать в PoC, принимать архитектурные решения, менторить mid-level инженеров. Требования 5+ лет опыта Data Engineer на enterprise-уровне. 2–3+ года опыта работы с GCP data stack: BigQuery, Dataflow/Beam, Cloud Composer, Dataplex, Vertex AI. Реальный опыт миграций Spark/Databricks → GCP. Глубокие знания DBT (dbt-core, dbt-bigquery) с большими проектами. Отличное владение Python (pandas, numpy) и продвинутым SQL. Опыт конверсии PySpark → Dataflow/Beam. Terraform для GCP на хорошем уровне. Опыт с CI/CD (GitLab), Docker, Airflow. Будет плюсом Опыт миграций BI (QuickSight → BigQuery-инструменты). Опыт Dataproc Serverless. Понимание data governance на GCP. Полностью удалённая работа (ЗА ПРЕДЕЛАМИ РФ И РБ) !!!! Проект на 6 мес с возможным продлением Контракт с компанией в зоне EU. Full time Откликаясь на вакансию пожалуйста уточняйте: * присылайте резюме на английском в PDF * когда готовы приступить * свои зп ожидания * локацию Пишите пожалуйста @goutsta