Дано. Вопросно-ответная система на корпоративной документации с доступом через телеграм бот.
Доступно. 1. Документация в базе знаний 2. Sys-promt 3. Результат поиска по векторной БД перед отправкой LMM. 4. Опорный перечень вопросов, который предстоит развить.
Надо. Предложить методику оценки и тестирования и оценить качество (достоверность, полноту и корректность) ответов системы на вопросы пользователя.
Опыт в решение подобной задачи обязателен!
За качественный референс исполнителя - вознаграждение.