Prompt-инженер (LLM) в SimbirSoft

Сгенерировать отклик под эту вакансию с ИИ

Аврора подстроит резюме и напишет сопроводительное за 30 секунд

Чем предстоит заниматься

Создавать прототипы LLM-решений, тестировать их и контролировать качество.
Управлять поведением моделей без дообучения: подбирать промпты (CoT, Tree-of-thoughts, few-shot, structured outputs, tool calling и др.), работать с контекстом, параметрами моделей и архитектурой LLM-пайплайнов (одиночный промпт, цепочки промптов и т.п.).
Вместе с продакт-менеджерами проектировать диалоговые сценарии.
Оценивать качество LLM-решений на всех этапах: формировать и поддерживать golden-сеты и валидационные выборки, разрабатывать метрики и бенчмарки, настраивать llm-as-a-judge.
Готовить инструкции для разметчиков и участвовать в разметке, включая самостоятельную разметку golden-сетов.
Изучать логи, трейсы и обратную связь по работе ассистентов в продакшене, находить инсайты и улучшать качество.
Совместно с разработчиками интегрировать LLM в продукты.

Требования

1–3 года опыта решения реальных бизнес-задач с использованием LLM (цепочки промптов, structured outputs, диалоговые ассистенты)
Хорошее владение Python, опыт работы с аналитическими инструментами (jupyter, pandas, matplotlib)
Опыт работы с SQL, навыки работы с данными, умение собрать датасет и провести аналитику
Опыт работы с OpenAI API и аналогами
Навыки тестирования и регресс-проверок промптов, понимание подходов к оценке LLM-систем (offline-метрики, human evaluation, llm-as-a-judge, A/B тестирование)
Будет плюсом: опыт использования алгоритмов автоматической оптимизации промптов (GEPA и др.)
Будет плюсом: опыт организации процесса разметки, построения golden-датасетов и автоматизации эвалов
Будет плюсом: опыт использования валидационных фреймворков и инструментов observability (DeepEval, LangFuse, MlFlow, LangSmith и др.)
Будет плюсом: опыт работы с фреймворками оркестрации LLM (langgraph, langchain или аналоги)
Будет плюсом: опыт построения сложных агентных систем, RAG

Условия

Возможна удалённая работа.

Стек

PythonjupyterpandasmatplotlibSQLOpenAI APILLMCoTTree-of-thoughtsfew-shotstructured outputstool callingllm-as-a-judgeGEPADeepEvalLangFuseMlFlowLangSmithlanggraphlangchainRAG

Контакт работодателя

Прямой контакт рекрутёра в Telegram, без посредников

@recruiter_hidden

Бесплатно — за подписку на наш Telegram-канал

@recruiter

Telegram · прямой контакт

Написать

Аврора откликнется за вас. Пока вы пишете одному рекрутёру, автопилот отправляет отклики на все подходящие.

Попробовать →

Контакты открываются по подписке на канал. Подпишитесь — и контакт откроется сразу, ничего заполнять не нужно.

Подписаться снова

Дневной лимит контактов исчерпан. Счётчик обнулится в 00:00 по Москве — вакансия никуда не денется, она уже в вашей истории.

Безлимит будет в подписке Авроры — скоро.

Узнать первым →

Вакансия в архиве — отклик недоступен. Посмотрите похожие активные вакансии ниже.

Prompt-инженер (LLM) в SimbirSoft

Чем предстоит заниматься

Требования

Условия

Стек

Контакт работодателя

Похожие вакансии

Ведущий ML-инженер (прогнозирование спроса и ценообразование)

Senior Data Scientist (рекомендательные системы) в HeadHunter

Data Scientist / AI Engineer (LLM, AI-агенты)

AI Engineer (Network Security) в BI.ZONE

Data Scientist (LLM Core)

AI-инженер (LLM/RAG) в Урал Логистика