Тестировщик ИИ/Тесты промптов нейросетей

Тестировщик промптов занимается тестированием коммуникационной модели, разработанной для Telegram-бота. Основная цель — общаться с ботом в различных сценариях и выявлять ошибки, несоответствия или отклонения в его ответах и поведении, которые могут выдать, что это не человек. Задача тестировщика — сделать бота максимально похожим на человека, предоставляя промпт-инженеру обратную связь для дальнейшей оптимизации модели.
Основные задачи тестировщика:
Общение с ботом: Тестировщик должен взаимодействовать с ботом через платформу Telegram в различных сценариях — начиная от простых вопросов и заканчивая более сложными диалогами.
Выявление ошибок и несоответствий:
Нелогичные или неуместные ответы.
Сбои в продолжительности диалога.
Чрезмерно формальные или неестественные фразы.
Зависания, неадекватные реакции на запросы и любые другие сбои в работе модели.