Выберите одну задачу
Например, поиск по инструкциям для нового сотрудника или подготовка черновика ответа на типовой запрос. Укажите, где заканчиваются полномочия помощника и в каких случаях он должен передавать вопрос человеку. Не объединяйте в первом пилоте все отделы и документы.
Приведите знания в порядок
Уберите устаревшие версии, назначьте владельцев документов и проверьте противоречия. Важно не только количество материалов, но и их актуальность. Если инструкции спорят друг с другом, система может уверенно предложить неверный ответ.
Соберите контрольные вопросы
Возьмите реальные обращения, добавьте сложные случаи и вопросы, на которые в базе нет ответа. Определите признаки хорошего результата: корректность, ссылка на источник, отсутствие лишних сведений. Оценивайте помощника на одной и той же выборке после каждого изменения.
Ограничьте доступ
Помощник не должен превращаться в обход существующих прав. Продумайте, какие документы доступны конкретной роли, где обрабатывается запрос и какие данные разрешено передавать поставщику модели. Эти решения принимаются до подключения рабочих данных.
Проверяйте пользу в процессе
Сравните время поиска и число уточнений с исходным сценарием. Учитывайте стоимость запросов и время сотрудника на проверку. Иногда итог пилота — сузить задачу или сначала улучшить базу знаний. Это тоже полезный результат.
