<< Щелкните, чтобы показать Содержание >> Ввод и обработка документов > Инструменты Ario > Подготовка модуля к работе > Обучение классификаторов документов

Обучение классификатора

Contents

В справочнике Классификаторы Ario нажмите на кнопку Обучить:

В результате сервис создает задачу на обучение. В справочнике Классификаторы Ario в поле Статус обучения отображается текущее состояние обучения классификатора:

•	Черновик – обучение не начато;

•	Опубликован – обучение завершено;

•	Не используется – классификатор не используется в работе, в поле *Состояние записи установлено значение Закрытая.

Статус обновляется с интервалом, указанным в установке *Интервал обновления статуса задачи на обучение. Кроме того, статус обучения обновляется при открытии карточки классификатора.

По кнопке История обучения можно посмотреть историю обращений к сервису.

Проверка результатов обучения

Когда обучение классификатора закончится, сформируется модель классификации. Модель содержит набор признаков, характерных для каждого класса. Метрики и классы модели отображаются на закладке «Результаты обучения»:

Подробнее

Метрика	Описание
Правильность	Доля документов из тестового набора данных, класс которых определен правильно
Точность	Доля документов из метрики Правильность, класс которых действительно определен правильно
Полнота	Метрика показывает, насколько хорошо классификатор находит положительные образцы
F1-мера	Среднее гармоническое между Точностью и Полнотой. По значению метрики можно сделать вывод о результатах обучения: - 0,8-0,84 – удовлетворительно - 0,85-0,93 – хорошо - 0,94 и выше – отлично
Обучающий набор	Количество документов, которые используются для обучения классификатора
Тестовый набор	Количество документов, которые используются для определения показателей качества модели классификации (Правильность, Точность и т.д.) и которые не используются для обучения классификатора
Время обучения, сек	Длительность обучения классификатора. В метрике учитывается время, затраченное на обучение классификатора на данных, извлеченных из документов. При этом время, затраченное на извлечение данных из документов, не учитывается

Чтобы проверить, насколько хорошо прошло обучение классификатора:

1.	Нажмите на кнопку Проверить и выберите документ. Когда классификация документа завершится, откроется окно с результатами классификации. Если класс документа определен верно, значит, обучение прошло успешно. При необходимости можно проверить документы других классов.

2.	Посмотрите значение метрики F1-мера. Если F1-мера меньше 0,85 – значит, набор документов для обучения подобран некачественно.

Если обучение прошло неуспешно:

1.	Проверьте, что в каждом классе находятся только нужные документы. В классе «Входящее письмо» должны находиться только входящие письма. Других документов, например, приказов, договоров, быть не должно.

2.	Увеличьте количество документов каждого класса.

3.	Повторите обучение классификатора.

Впоследствии можно повторять обучение классификатора, чтобы повысить качество классификации документов.

Сообщество пользователей Directum