LLM Engineer / инженер LLM-решений

Работодатель:
Зарплата:
190 000 руб.
Опыт работы:
От 3 до 6 лет

OSMI IT ищет LLM Engineer для разработки и запуска LLM-решений: RAG, ИИ-агентов и агентных сценариев на платформе OSMI AI. В этой роли важно подтверждать качество воспроизводимыми измерениями и контролировать время ответа и стоимость инференса в контуре заказчика.

Чем предстоит заниматься

  • Разбирать бизнес-процессы заказчиков, проектировать LLM-решения и согласовывать критерии приёмки.
  • Создавать RAG-пайплайны: чанкинг, эмбеддинги, гибридный поиск BM25 и reranker, метаданные и права доступа.
  • Разрабатывать ИИ-агентов: agentflow, tool calling, контекст и память. Подключать инструменты через MCP Gateway — 1С, Битрикс24, Directum RX и API заказчиков.
  • Собирать эталонные датасеты и eval-наборы на реальных сценариях, расширять выборку синтетическими данными.
  • Измерять качество: выстраивать метрики и проверки перед релизом, отслеживать регрессии промптов и моделей, проводить A/B-сравнения и валидировать LLM-as-judge.
  • Подбирать и дообучать малые модели 7–14B для классификации, маршрутизации, извлечения сущностей, ASR и OCR.
  • Оптимизировать инференс: квантизация, батчинг, vLLM, кеширование и маршрутизация запросов между малыми и большими моделями.
  • Контролировать достоверность и безопасность: галлюцинации, ссылки на источники, prompt injection и маскирование персональных данных.
  • Обеспечивать наблюдаемость действий агентов через Langfuse или аналоги, выводить решения в продакшен и сопровождать их.

Что мы ожидаем

  • 3–6 лет в разработке, из них от 2 лет — с LLM-решениями, RAG или агентами в продакшене.
  • Уверенное владение Python и SQL. Умение организовать воспроизводимые эксперименты и автоматические прогоны.
  • Опыт работы с LLM, включая Qwen, Llama, DeepSeek, GigaChat/YandexGPT, и облачными API. Понимание возможностей и ограничений моделей.
  • LangGraph или аналоги, tool calling, MCP, OpenAI-совместимые API, управление контекстом и памятью.
  • Практический опыт с RAG: чанкинг, эмбеддинги, гибридный поиск, reranker, векторные базы Qdrant, pgvector или Chroma.
  • Опыт оценки качества: eval-наборы, recall@k, MRR, метрики генерации, LLM-as-judge и статистическая значимость различий.
  • Понимание квантизации GGUF/AWQ/GPTQ, LoRA, дистилляции, vLLM/Ollama, бюджета VRAM и работы в закрытом контуре.
  • Проекты, в которых заказчик принимал качество модели или агента по измеримым критериям.

Условия

  • Зарплата от 190 000 ₽ на руки в месяц.
  • Удалённая работа, полная занятость.
  • График 5/2, 8 часов в день.

Похожие вакансии

LLM-engineer/специалист по интеграции RAG-систем
OSMI IT

Отличные знания нейросетей и моделей LLM, таких как GPT, Claude, LLaMA, DeepSeek. Опыт интеграции RAG-систем и работы с векторными...

170 000 - 250 000 руб.
Инженер проектировщик (ТМ, ТС, ОВ, ВК, ТХ) / Ведущий инженер проектировщик
Класс Безопасности

Образование: высшее техническое (теплоэнергетика, ТГВ, водоснабжение и водоотведение, технология машиностроения, химическая технология) или профильная переподготовка. Опыт: от 2–3 лет...

200 000 руб.
Инженер-проектировщик ОВиК
Чехов и Партнеры

Опыт проектирования ОВиК от 5 лет. Не менее 30 реализованных проектов квартир и частных домов. Опыт работы в компании по...

250 000 руб.
Ведущий шеф-инженер по пусконаладке паровых турбин и компрессоров
Энерджи Менеджмент

Высшее или средне-специальное профильное техническое образование. Обязательны знания и опыт в области компрессорного и/или паротурбинного оборудования и вспомогательных...

190 000 руб.
AI Engineer /Разработчик продуктов с помощью AI
Продамус

Опыт классической разработки от 3 лет. Опыт самостоятельного создания полноценных продуктов с помощью AI — от идеи до работающего решения.

180 000 - 230 000 руб.