Аннотация:В данной работе рассматриваются способы сравнения и анализа ошибок
текстовых классификаторов с использованием машинного обучения. Также
описываются инструменты, которые были реализованы в рамках данной
работы.
Инструмент сравнения классификаторов позволяет проанализировать
и сопоставить результаты работы всех классифкаторов, то есть срав-
нить их по заранее определенным метрикам. Инструмент анализа оши-
бок предоставляет возможность детального анализа работы текстового
классификатора. Он выводит подробные отчеты классифификации, шабло-
ны, которым обучился классификатор, а также разные графики и диаграм-
мы, отображающие работу этого классификатора, как в целом, так и на
конкретных примерах. То есть этот инструмент позволяет детально рас-
смотреть работу классификатора и локализовать ошибки.
Такой инструмент необходим как единая, унифицированная платфор-
ма для автоматизированного анализа классификаторов. Такая платформа
позволяет разработчику классификатора не задумываться о том, как его
можно сравнить с другими классификаторами, и сокращает время, потра-
ченное им на анализ ошибок. Также этот инструмент можно использо-
вать в соревновательных целях и в учебных, чтобы студенты, изучающие
и занимающиеся разработкой алгоритмов текстовой классификации, мог-
ли попробовать их в реальных условиях и сравнить с результатами работы
других классификаторов.