Vakansiya haqida
Aspirity Solution ищет QA Engineer для тестирования и оценки AI-агентов и LLM-систем. Работа полностью удалённая, вне РФ и РБ, с графиком с 7:00 до 16:00 PT и оплатой от 20 USD в час.
Обязанности
- Тестировать и оценивать работу диалоговых и когнитивных AI-агентов.
- Разрабатывать и проводить eval-тесты для проверки корректности, устойчивости и стабильности поведения агентов.
- Подготавливать тест-кейсы и сценарии функционального и нефункционального тестирования.
- Анализировать поведение агентов при нестандартных входных данных, выявлять логические ошибки и проблемы в промптах.
- Взаимодействовать с разработчиками и prompt-инженерами для улучшения моделей и тестовых пайплайнов.
- Поддерживать и развивать автоматизацию тестирования и QA-процессы внутри AI-команды.
- Вести техническую документацию и описывать best practices.
Условия
- Полностью удалённый формат работы.
- Оплата по квалификации — от 20 USD в час.
- Работа в команде разработчиков, ML-инженеров и AI-специалистов.
- Возможность профессионально расти в QA для LLM- и AI-агентных систем.
Компания
Aspirity Solution — студия разработки с более чем 10-летним опытом создания веб- и мобильных приложений, no-code решений и интеллектуальных AI-агентов для клиентов по всему миру.