От матрицы замешательства до графика ROC

Question

Недавно я реализовал алгоритм классификации сумм слов, основанный на том, который описан в this paper.

Все работает хорошо, но я хотел бы измерить точность классификаторов с использованием кривых ROC или, возможно, графиков с точным отзывом.

Я могу легко получить матрицу путаницы для каждого из классификаторов, но я не знаю, какой параметр я должен изменить, чтобы получить больше очков и на самом деле построить кривые.

Не могли бы вы объяснить это мне?

Answer 1

Я думаю, что для вывода классификатора необходимо, чтобы для вывода кривой ROC были непрерывными значениями, а не дискретными значениями. Если предсказанные метки являются непрерывными значениями, вы можете установить пороговое значение для вычисления точек кривой ROC. Если предсказанные метки находятся в двух классах (дискретные значения), вы получите только одну точку кривой ROC.

http://en.wikipedia.org/wiki/Receiver_operating_characteristic