Статистика и большие данные

Вопросы и ответы для людей, интересующихся статистикой, машинным обучением, анализом данных, интеллектуальным анализом данных и визуализацией данных

4
Разница между биномиальной, отрицательной биномиальной и пуассоновской регрессией
Я ищу некоторую информацию о разнице между биномиальной, отрицательной биномиальной и пуассоновской регрессией и для каких ситуаций эти регрессии лучше всего подходят. Могу ли я выполнить какие-либо тесты в SPSS, чтобы определить, какая из этих регрессий лучше всего подходит для моей ситуации? Кроме того, как мне запустить пуассоновский или отрицательный …

4
В чем разница между стационарным тестом и тестом единичного корня?
В чем разница между тестом Квятковского – Филлипса – Шмидта – Шина (KPSS) и расширенным тестом Дики-Фуллера (АДФ)? Они тестируют одно и то же? Или нам нужно использовать их в разных ситуациях?


2
Функция потерь коэффициента кости по сравнению с кросс-энтропией
При обучении нейронных сетей пиксельной сегментации, таких как полностью сверточные сети, как вы принимаете решение использовать функцию кросс-энтропийной потери в сравнении с функцией потери коэффициента Кости? Я понимаю, что это короткий вопрос, но не совсем уверен, какую другую информацию предоставить. Я просмотрел кучу документации о двух функциях потери, но не …

2
Когда целесообразно использовать неправильное правило подсчета очков?
Merkle & Steyvers (2013) пишут: Чтобы формально определить правильное правило оценки, пусть будет вероятностным прогнозом испытания Бернулли с истинной вероятностью успеха . Правильные правила оценки - это метрики, ожидаемые значения которых сведены к минимуму, если .ееfdddппpе= резнак равнопf = p Я понимаю, что это хорошо, потому что мы хотим побудить …

1
Пошаговый пример автоматического дифференцирования в обратном режиме
Не уверен, принадлежит ли этот вопрос здесь, но он тесно связан с градиентными методами в оптимизации, которая, кажется, здесь уместна. В любом случае, не стесняйтесь мигрировать, если считаете, что какое-то другое сообщество обладает большим опытом в этой теме. Короче говоря, я ищу пошаговый пример автоматического дифференцирования в обратном режиме . …

1
Как понять SARIMAX интуитивно?
Я пытаюсь понять статью о прогнозировании электрической нагрузки, но я борюсь с концепциями внутри, особенно с моделью SARIMAX . Эта модель используется для прогнозирования нагрузки и использует многие статистические понятия, которые я не понимаю (я студент старших курсов по информатике - вы можете считать меня непрофессионалом в области статистики). Мне …

5
Может ли глубокая нейронная сеть приблизить функцию умножения без нормализации?
Допустим, мы хотим сделать регрессию для простого f = x * yиспользования стандартной глубокой нейронной сети. Я помню, что есть исследования, которые говорят о том, что NN с одним скрытым слоем может апоксировать любую функцию, но я пытался и без нормализации NN не смог приблизиться даже к этому простому умножению. …

4
Как определить оптимальный порог для классификатора и сгенерировать ROC-кривую?
Допустим, у нас есть классификатор SVM, как мы генерируем кривую ROC? (Как теоретически) (потому что мы генерируем TPR и FPR с каждым порогом). И как определить оптимальный порог для этого классификатора SVM?

1
Что такое абляция? И есть ли систематический способ сделать это?
Что такое абляция? И есть ли систематический способ сделать это? Например, у меня есть NNn предикторов в линейной регрессии, которые я назову своей моделью. Как я проведу исследование абляции с этим? Какие метрики я должен использовать? Всесторонний источник или учебник был бы оценен.

1
Почему PCA чувствителен к выбросам?
В этой SE много постов, в которых обсуждаются надежные подходы к анализу главных компонентов (PCA), но я не могу найти ни одного хорошего объяснения того, почему PCA в первую очередь чувствителен к выбросам.

1
Почему неактивные функции активации являются проблемой при обратном распространении?
Я прочитал здесь следующее: Сигмоидальные выходы не центрированы по нулю . Это нежелательно, поскольку нейроны на более поздних уровнях обработки в нейронной сети (подробнее об этом в ближайшее время) будут получать данные, которые не центрированы по нулю. Это влияет на динамику во время градиентного спуска, потому что, если данные, поступающие …

3
Почему регрессия Бета / Дирихле не считается обобщенной линейной моделью?
Предпосылка это цитата из виньетки R пакета betareg1 . Более того, модель разделяет некоторые свойства (такие как линейный предиктор, функция связи, параметр дисперсии) с обобщенными линейными моделями (GLM; McCullagh and Nelder 1989), но это не частный случай этой структуры (даже для фиксированной дисперсии) ) Этот ответ также намекает на тот …

7
Два броска костей - одно и то же число в последовательности
В настоящее время я изучаю класс статистического вывода на Coursera. В одном из заданий возникает следующий вопрос. | Suppose you rolled the fair die twice. What is the probability of rolling the same number two times in a row? 1: 2/6 2: 1/36 3: 0 4: 1/6 Selection: 2 | …

3
R карета и НС
Я очень предпочитаю каретку из-за ее способности к настройке параметров и унифицированного интерфейса, но я заметил, что для этого всегда требуются полные наборы данных (то есть без NA), даже если применяемая «голая» модель допускает NA. Это очень утомительно, так как нужно применять трудоемкие методы вменения, которые не нужны в первую …

Используя наш сайт, вы подтверждаете, что прочитали и поняли нашу Политику в отношении файлов cookie и Политику конфиденциальности.
Licensed under cc by-sa 3.0 with attribution required.