Оценка и вычисление точности Top-N: Top 1 и Top 5

Я столкнулся с несколькими (проблема классификации машин), которые были опубликованы в статье, посвященной оценке точности с помощью подхода Top-N. Данные показывают, что точность Top 1 составляет 42,5%, а точность Top-5 = 72,5% при одном и том же обучении, состоянии тестирования. Интересно, как рассчитать этот процент топ-1 и топ-5?Оценка и вычисление точности Top-N: Top 1 и Top 5

Может ли кто-нибудь показать мне пример и шаги, чтобы рассчитать это?

Благодаря

источник

2016-06-07 D_9268

Посмотрите на свой вопрос с точки зрения случайного читателя. Как вы думаете, на это можно ответить. Вот как я его читаю: «Я читаю X, который рассказывает об Y. Это показывает, что a = 5 и b = 14. Как они это делают? Gimme codez'. Я уверен, что на мой вопрос ответить невозможно. Считаете ли вы, что это ваш? –

@ SalvadorDali проверьте ниже ответ от «rcpinto». Возможно, что-то вы также можете понять оттуда. Спасибо за ваш ответ, я сделаю свой вопрос в следующий раз. –

Top-1 точность обычная точность: модель ответа (один с наибольшей вероятностью) должен быть точно ожидаемый ответ.

Точность Top-5 означает, что любой вашей модели. 5 ответов наивысшей вероятности должны соответствовать ожидаемому ответу.

Например, предположим, что вы применяете машинное обучение к распознаванию объектов с помощью нейронной сети. Изображение кошки показано, и эти выходы вашей нейронной сети:

Tiger: 0,4
Собака: 0,3
Cat: 0,1
Lynx: 0,09
Lion: 0.08
Птица: 0.02
медведь: 0,01

Используя точность top-1, вы считаете этот результат неправильным, потому что он предсказал тигр.

Используя точность top-5, вы считаете этот результат правильным, потому что кошка входит в пятерку догадок.

источник

2016-06-07 04:27:04 rcpinto

Спасибо большое! это хорошее объяснение и пример. –

Спасибо за этот ответ. На ваш взгляд, Top-5 действительно хорошая метрика, или это способ преувеличить истинные возможности нейронной сети? Если бы я был слеп и попросил кого-нибудь рассказать мне, какое животное было передо мной, я бы ожидал, что «Это кошка», а не «Это тигр, собака, кошка, рысь или лев». –

Оценка и вычисление точности Top-N: Top 1 и Top 5

ответ

Смежные вопросы