Как протестировать список формулировок вопросов сразу группой?

В разделе Как протестировать формулировки вопросов для автоответов в БЗ? описано, как протестировать вопросы по одному.

Для проверки сразу нескольких вопросов пользователей предусмотрена возможность загрузить XLSX файл со списком вопросов. Сервис тестирования проверит каждый вопрос из списка по указанным базам знаний и вернет файл с заполненными результатами тестирования вопросов.

Для пакетного тестирования:

  1. Подготовьте файл с вопросами

  2. Перейдите в раздел “Пакетное тестирование”

  3. Загрузите файл в систему

  4. Дождитесь окончания тестирования

  5. Скачайте файл с результатами тестирования

Файл для пакетного тестирования

Для тестирования следует подготовить файл, в котором будет приведен список вопросов. Следует учесть, что:

  1. Вопросы для проверки должны располагаться в колонке с названием “Вход” или “Input“

  2. Сервис принимает файл XLSX формата.

Например,

 

В случае, если вопросы располагаются в других колонках, то система не сможет корректно проанализировать вопросы.

Тестирование

Добавление файла

В разделе тестирования баз знаний нажмите кнопку “Пакетное тестирование”. Откроется меню загрузки файла.

 

Загрузить файл можно двумя способами:

  1. Перетащите файл на панель пакетного тестирования

  2. Нажмите на выделенную область и откроется браузер файлов

Статус тестирования

Сразу после импорта файла сервис начнет проверку.

В один момент может производиться только одна пакетная проверка, поэтому панель пакетного тестирования перестанет принимать файлы. В окне пакетного тестирования отображается информация о ходе проверки.

Если запросов в файле много проверка может занять длительное время. Панель проверки или даже браузер можно закрыть и вернуться к результатам тестирования позднее.

Окончание тестирования и скачивание результатов

Когда проверка будет завершена, панель отобразит информацию о завершении, кнопка “Получить результат” станет активной.

 

При нажатии на кнопку “Получить результат“ система предложит скачать файл с результатами тестирования.

Файл с результатами тестирования

Результаты тестирования экспортируются в XLSX формате. Файл с результатами содержит те же строки что и в изначально загружаемом файле. Система добавляет колонки с дополнительной информацией, полученной по итогам теста.

 

Для каждого анализируемого запроса система находит 3 наиболее релевантных ответа. И для каждого подходящего ответа указывается следующая информация:

  • Название документа

  • ID документа

  • Наиболее релевантная формулировка вопроса в документе

  • Название базы знаний, в которой содержится документ

  • ID базы знаний

  • Уверенность системы в %