ImageNet: что означает ошибка топ-5?

9

Один из методов оценки для ImageNet Competition (классифицирует 1000 категорий изображений) - ошибка топ-5, что это значит?

Смотрите: http://www.image-net.org/challenges/LSVRC/

machine-learning classification computer-vision

— RockTheStar
источник

8

Ошибка топ-5, также известная как ошибка ранга 5, является просто экземпляром метрики ошибки ранга N с $(N=5)$ .

Ошибка ранга $N$ - это доля тестовых образцов $x_i$ где правильная метка $y_i$ не отображается в верхних $N$ прогнозируемых результатах модели, когда результаты сортируются в порядке убывания достоверности, или $P(y_i|x_i)$ .

В ILSVRC 2014 метрика ошибки для классификации была:

e = \frac{1}{n} \cdot \sum_{k} min_{i} d (c_{i}, C_{k})

$e = \tfrac{1}{n} \cdot \sum_k \min_{i} d(c_i, C_k)$

где

d (a, b) = {\begin{cases} 0 & if a = b \\ 1 & otherwise \end{cases}

$d(a, b) = \begin{cases} 0 & \text{if } a = b \\ 1 & \text{otherwise} \end{cases}$

$c_i$ - это прогнозируемая метка, а - метка истинности земли. Существует возможных меток с . $C_k$ $n$ $k=1, ..., n$

— sabalaba
источник

Большой! Одно уточнение, что означает c и заглавные буквы C?

— RockTheStar

Здесь большой C является одним из основных меток истинности, а маленький C - одним из предсказанных.

— Сабалаба

1

сабалаба - не могли бы вы добавить эту информацию в свой ответ?

— Glen_b

3

Топ-5 ошибок (модели) - это доля тестовых изображений, для которых правильная метка не входит в число пяти меток, которые модель считает наиболее вероятными [ 1 ]

— Дебврат Варшней
источник

1

Я думаю, что условная оценка должна образом: , если встречается в верхних N вероятных классификациях для данного основного класса истинности Bk. = 1, если это не так. $d(A_i, B_k)$ $d(Ai, Bk) = 0$ $A_i$

Здесь k принимает значения от 0 до N-1. Где N - количество классов. Для каждого существуют вероятные классификации , где i принимает значения [0, N-1] $B_k$ $A_i$

— RM Nair
источник