Статистика и большие данные

Пусть Икс1, . , , , XNX1,...,XnX_1,...,X_n являются IID из N( μ , σ2)N(μ,σ2)N(\mu,\sigma^2) , и пусть Икс( я )X(i)X_{(i)} обозначим яii «й наименьший элемент из Икс1, . , , , XNX1,...,XnX_1,...,X_n . Как можно было бы оценить верхний предел ожидаемого максимума отношения между двумя последовательными элементами в Икс( я …

10 expected-value  order-statistics  ratio  maximum 

Это бета-оценка F: Fβ= ( 1 + β2) ⋅ р г е с я с я о п ⋅ г е с л л( β2⋅ р т е с я с я о п ) + г е грл лFβзнак равно(1+β2)⋅пресяsяоN⋅ресaLL(β2⋅пресяsяоN)+ресaLLF_\beta = (1 + \beta^2) \cdot \frac{\mathrm{precision} \cdot \mathrm{recall}}{(\beta^2 \cdot …

10 machine-learning  precision-recall  model-evaluation 

У меня есть набор данных 482 наблюдений. data=Populationfull Я собираюсь сделать анализ ассоциации генотипа для 3 SNP. Я пытаюсь построить модель для моего анализа, и я использую AOV (у ~ х, данные = ...). Для одной черты у меня есть несколько фиксированных эффектов и ковариат, которые я включил в модель, …

10 r  anova 

В моем классе машинного обучения мы узнали о том, как регрессия LASSO очень хороша при выполнении выбора функций, поскольку она использует регуляризацию.L1L1l_1 Мой вопрос: люди обычно используют модель LASSO только для выбора функций (а затем переходят к сбросу этих функций в другую модель машинного обучения), или они обычно используют LASSO …

10 feature-selection  lasso  regression-strategies 

Пусть X1,X2,…,X3nX1,X2,…,X3nX_1, X_2, \ldots, X_{3n} - последовательность случайных величин iid, взятых из альфа-стабильного распределения , с параметрами α=1.5,β=0,c=1.0,μ=1.0α=1.5,β=0,c=1.0,μ=1.0\alpha = 1.5, \; \beta = 0, \; c = 1.0, \; \mu = 1.0 . Теперь рассмотрим последовательность Y1,Y2, ...,YNY1,Y2,…,YNY_1, Y_2, \ldots, Y_{n} , где YJ + 1= Х3 Дж + 1Икс3 …

10 probability  self-study  monte-carlo  convergence  order-statistics 

Можно ли научить нейронную сеть рисовать картинку в определенном стиле? (Таким образом, он берет изображение и перерисовывает его в стиле, для которого он был обучен.) Есть ли одобренная технология для такого рода вещей? Я знаю об алгоритме DeepArt. Хорошо заполнить основное изображение определенным рисунком (например, vangoghify image), но я ищу …

10 machine-learning  neural-networks  deep-learning 

При проверке гипотез, общий вопрос - что такое популяционная дисперсия? Мой вопрос: как мы можем узнать разницу населения? Если бы мы знали все распределение, мы могли бы также знать среднее значение для всего населения. Тогда какой смысл в проверке гипотез?

10 hypothesis-testing  variance  t-test  z-test 

Я попытался реализовать численную оценку дивергенции Кульбака-Лейблера для двух выборок. Для отладки реализации возьмем образцы из двух нормальных распределений N(0,1)N(0,1)\mathcal N (0,1) и N(1,2)N(1,2)\mathcal N (1,2) . Для простой оценки я сгенерировал две гистограммы и попытался численно аппроксимировать интеграл. Я застрял с обработкой тех частей гистограммы, где ячейки одной из …

10 estimation  intuition  kullback-leibler  numerics 

У меня есть две категориальные / номинальные переменные. Каждое из них может принимать только два разных значения (итого, у меня всего 4 комбинации). Каждая комбинация значений поставляется с набором числовых значений. Итак, у меня есть 4 набора чисел. Чтобы сделать его более конкретным, допустим, что у меня есть male / …

10 hypothesis-testing  p-value  nonparametric  permutation-test 

Есть ли эквивалент средней формулы: м е с п =1NΣя = 1NИксямеaNзнак равно1NΣязнак равно1NИкся\begin{equation} \mathrm{mean} = \cfrac{1}{N} \sum_{i=1}^{N} X_i \end{equation} для медианы?

10 median  definition 

Я понимаю, что в линейной регрессии ошибки предполагаются нормально распределенными при условии прогнозируемого значения y. Затем мы смотрим на остатки как своего рода прокси для ошибок. Это часто рекомендуется для создания вывода , как это: . Однако я не понимаю, в чем смысл получения остатка для каждой точки данных и …

10 regression  assumptions 

В качестве примера я часто встречаю студентов, которые знают, что Observed является предвзятой оценкой численности населения R 2 . Затем, при написании своих отчетов, они говорят что-то вроде:р2р2R^2R2R2R^2 «Я рассчитал Observed и Скорректированный R 2 , и они были довольно похожи, предполагая лишь небольшое смещение в полученном нами значении Observed …

10 mathematical-statistics  terminology  bias  estimators 

Я пытаюсь обучить глубокую нейронную сеть для классификации, используя обратное распространение. В частности, я использую сверточную нейронную сеть для классификации изображений, используя библиотеку Tensor Flow. Во время тренировок я испытываю какое-то странное поведение, и мне просто интересно, типично ли это, или я что-то делаю не так. Итак, моя сверточная нейронная …

10 machine-learning  classification  neural-networks  conv-neural-network  tensorflow 

Краткий вопрос: есть ли раздача жира? Я уверен, что если он существует, то у него другое имя. Я не знаю, как сформулировать это как аналитическую функцию. Можете ли вы помочь мне найти существующую версию или начать формулировку чего-то более чистого, чем гигантский симулятор? Это распределение чисел, которые фактически попадают, когда …

10 distributions  simulation 

В PCA, имеет ли значение, если мы выбираем главные компоненты обратной ковариационной матрицы ИЛИ, если мы отбрасываем собственные векторы ковариационной матрицы, соответствующие большим собственным значениям? Это связано с обсуждением в этом посте .

10 machine-learning  pca  computational-statistics