Определите границы базы
Начните с одного круга пользователей и набора вопросов. Назначьте владельцев материалов и решите, кто имеет право видеть каждый источник. Доступ к ответу не должен обходить доступ к исходному документу.
Разберите качество источников
Удалите дубликаты, отметьте устаревшие версии и договоритесь, какой документ главнее при противоречии. Таблицы, сканы и изображения требуют отдельной проверки извлечения текста.
Организуйте обновление
Зафиксируйте, откуда загружаются материалы, как часто проверяются изменения и как удаляется отозванная версия. Без этого даже хороший ответ может опираться на устаревшее правило.
Подготовьте тестовые вопросы
Включите простые, составные и вопросы без ответа в документах. Для каждого сохраните ожидаемые источники. Проверяйте не только формулировку ответа, но и релевантность найденных фрагментов.
Предусмотрите отказ
Помощник должен иметь возможность сказать, что сведений недостаточно, и направить пользователя к ответственному. Ссылки полезны для проверки, но сами по себе не доказывают правильность вывода.