ML Engineer / LLM Engineer

ML Engineer / LLM Engineer Ищем ML-инженера с сильным практическим опытом работы с LLM: fine-tuning, post-training, evaluation и inference . Важно: это не позиция классического ML Engineer / Data Scientist. Нужен кандидат, который самостоятельно обучал и адаптировал LLM и понимает полный цикл — от данных и обучения до evaluation и deployment. Задачи: - Разработка и улучшение пайплайна LLM post-training : SFT, preference optimization, Offline / Online RL; - Улучшение instruction following и построение системы benchmarking / evaluation ; - Обучение LoRA / QLoRA-адаптеров под различные домены и задачи; - Работа с reward models / verifiers и reward functions для RL; - Разработка RAG-систем : retrieval, reranking, context construction и evaluation; - Обучение и интеграция tool use / function calling / structured outputs ; - Оптимизация inference и serving моделей с использованием vLLM / SGLang ; Обязательные требования: - Практический опыт fine-tuning / post-training LLM ; - Опыт с SFT и preference optimization: DPO / IPO / ORPO / SimPO или аналогами; - Опыт или хорошее практическое понимание Online RL для LLM : GRPO / GSPO или аналогичных методов; - Понимание reward models, preference data и LLM evaluation; - Уверенное владение Python, PyTorch, Hugging Face Transformers ; - Опыт с TRL и/или verl ; - Опыт с LoRA / QLoRA / PEFT ; - Опыт inference / serving через vLLM и/или SGLang ; - Опыт разработки RAG, tool use или structured generation ; - Понимание архитектуры современных LLM и особенностей их обучения и inference; - Опыт работы с GPU, distributed training и Linux / Docker / Git; - Умение самостоятельно ставить эксперименты, выбирать метрики и анализировать результаты. Будет плюсом: - Continual / domain pre-training; - Reasoning RL; - Multilingual LLM или code generation; - FSDP / DeepSpeed / Megatron-LM; - Quantization и оптимизация inference. Чтобы откликнуться, отправляйте резюме рекрутеру @ai_star_hr 📢 Источник: https://t.me/workayte/4347