На главную

Анализ ответов чат-бота на ИИ

Дано. Вопросно-ответная система на корпоративной документации с доступом через телеграм бот. Доступно. 1. Документация в базе знаний 2. Sys-promt 3. Результат поиска по векторной БД перед отправкой LMM. 4. Опорный перечень вопросов, который предстоит развить. Надо. Предложить методику оценки и тестирования и оценить качество (достоверность, полноту и корректность) ответов системы на вопросы пользователя. Опыт в решение подобной задачи обязателен! За качественный референс исполнителя - вознаграждение.