А
Альвента
сегодняQA-инженер AI-агента (тестирование и разметка данных)
80 000–120 000 ₽
Сгенерировать отклик под эту вакансию с ИИ
Аврора подстроит резюме и напишет сопроводительное за 30 секунд
Чем предстоит заниматься
- Проектировать тестовую модель голосового AI-агента: сценарии звонков (запись, перенос, отмена, консультация, продажа услуги), состояния и переходы, граничные и нестандартные случаи.
- Разрабатывать и поддерживать тест-кейсы и чек-листы, формировать регрессионные наборы.
- Прогонять сценарии вручную: звонить агенту и запускать текстовые прогоны; проверять перебивания, уход от темы, неполные ответы, шум, фамилии, телефоны, даты и время.
- Учитывать недетерминированность LLM: многократно прогонять кейсы, считать долю успешных прогонов, отделять стабильные баги от случайных.
- Заводить баги с чёткой классификацией: ошибка распознавания речи, неверный переход по сценарию, неправильно извлечённые данные, галлюцинация, грамматика, тон и стиль, синтез речи.
- Анализировать логи реальных звонков, выявлять повторяющиеся проблемы и превращать их в тест-кейсы.
- Размечать и исправлять датасеты под конкретные баги: интенты и поля, эталонные реплики агента, пары «хороший / плохой ответ» для дообучения.
- Формулировать критерии оценки и инструкции для автоматической проверки ответов через LLM (LLM-as-a-judge) и выборочно валидировать её оценки.
- После каждого релиза или дообучения проверять, что старые баги закрыты и не появились новые.
Требования
- Коммерческий опыт в тестировании от 2 лет
- Уверенное владение техниками тест-дизайна: классы эквивалентности, граничные значения, таблицы решений, диаграммы состояний и переходов, pairwise
- Умение писать понятные тест-кейсы, чек-листы и баг-репорты; опыт с TMS (TestRail, Qase, Allure TestOps или аналоги)
- Понимание процессов QA: регресс, смоук, приоритизация багов, тестовое покрытие
- Отличная грамотность в русском языке: умение замечать ошибки в согласовании, неестественные обороты и «канцелярит» в речи
- Внимательность и терпение к монотонной работе с большим объёмом диалогов и разметки
- Уверенная работа с таблицами и JSON: умение читать структурированные логи и данные
Условия
- Оформление: полная занятость.
- График: 5/2.
- Формат работы: удалённо.
- Зарплата: от 80 000 до 120 000 ₽ в месяц на руки.
- Опыт работы: 3–6 лет.
Стек
Контакт работодателя
Прямой контакт рекрутёра в Telegram, без посредников
@recruiter_hidden
Бесплатно — за подписку на наш Telegram-канал
@recruiter
Telegram · прямой контакт
Аврора откликнется за вас. Пока вы пишете одному рекрутёру, автопилот отправляет отклики на все подходящие.
Попробовать →Безлимит будет в подписке Авроры — скоро.
Узнать первым →Вакансия в архиве — отклик недоступен. Посмотрите похожие активные вакансии ниже.
Похожие вакансии
I
Igaming-Soft
вчера
Manual QA / Тестировщик игр в iGaming
500–700 $
Удалённопрямой контакт
Л
Лоция
5 дней назад
QA инженер (функциональное тестирование)
зп не указана
MiddleУдалённопрямой контакт
Q
Quickly Search
11 дней назад
Technical Support L2 Engineer
зп не указана
MiddleУдалённопрямой контакт
N
Компания под NDA
15 дней назад
Senior QA Manual Engineer (WMS, ритейл)
зп не указана
Seniorпрямой контакт
D
DevCasi
18 дней назад
Lead Support / Руководитель технической поддержки в iGaming
от 1 500 $
LeadУдалённопрямой контакт
Y
YADRO
26 дней назад
QA Lead / Руководитель отдела тестирования (Enterprise)
зп не указана
LeadУдалённопрямой контакт