Despre postul vacant
Aspirity Solutions ищет AI QA Engineer для системного тестирования голосовых AI-агентов в реальном времени. Работа включает проверку голосового UX, логики сценариев, интеграций и качества генерации.
Обязанности
- Тестировать голосовой UX.
- Измерять и анализировать задержки Latency P95/P99.
- Проверять корректность Barge-In при перебивании.
- Тестировать работу голосовых агентов в шумной среде.
- Читать и анализировать NSL-скрипты на Jinja2.
- Выявлять логические циклы и тупики.
- Проверять корректные переходы состояний.
- Выявлять отклонения от инструкций и некорректную генерацию фактов.
- Формировать и поддерживать Golden Datasets для регрессионного тестирования.
- Проверять вызовы внешних сервисов, включая CRM и API.
- Анализировать поведение агента при ошибках API.
- Проверять обработку исключений.
Условия
- Удалённый формат работы.
- Возможность развиваться в QA-направлении для систем с LLM и AI-агентами.
- Оплата по квалификации — от 20 USD в час.
- Вакансия доступна кандидатам вне России и Беларуси.
Компания
Aspirity Solutions занимается разработкой цифровых сотрудников, которые общаются с людьми голосом.
Будет преимуществом
- Опыт работы с LLM и prompt engineering.
- Опыт тестирования голосовых помощников, таких как Alexa и Google Assistant.
- Понимание метрик качества AI-систем.