Вопросы с тегом «perplexity»

Я столкнулся с недоумением термина, который относится к усредненной по логарифму обратной вероятности на невидимых данных. Статья Википедии о недоумении не дает интуитивное значение для того же. Эта мера недоумения использовалась в статье pLSA . Кто-нибудь может объяснить необходимость и интуитивное значение меры недоумения ?

42 measurement  perplexity 

Попытка понять связь между перекрестной энтропией и недоумением. В общем случае для модели M , Недоумение (М) = 2 ^ энтропии (M) . Действуют ли эти отношения для всех разных n-грамм, то есть униграмм, биграмм и т. Д.

10 natural-language  entropy  perplexity