Статистика и большие данные

Я не уверен, является ли этот вопрос полностью уместным здесь, если нет, пожалуйста, удалите. Я аспирант по экономике. Для проекта, который исследует проблемы социального страхования, у меня есть доступ к большому количеству отчетов об административных делах (> 200 тыс.), Которые касаются оценки приемлемости. Эти отчеты могут быть связаны с индивидуальной …

9 machine-learning  data-mining  econometrics  text-mining  natural-language 

Ситуация У меня есть набор данных с одной зависимой и одной независимой переменной . Я хочу согласовать непрерывную кусочно-линейную регрессию с известными / фиксированными точками останова, возникающими в . Точки останова известны без неопределенности, поэтому я не хочу их оценивать. Затем я подгоняю регрессию (OLS) в форме Вот примерx k …

9 r  regression  standard-error  piecewise-linear 

Я пытаюсь сэмплировать задний план, имеющий много режимов, особенно далеко друг от друга, используя MCMC. Похоже, что в большинстве случаев только один из этих режимов содержит 95% hpd, который я ищу. Я пытался реализовать решения, основанные на умеренном моделировании, но это не дает удовлетворительных результатов, поскольку на практике переход от …

9 sampling  mcmc  inference  convergence 

Я пытаюсь вычислить предельную вероятность для статистической модели методами Монте-Карло: е( х ) = ∫е( x ∣ θ ) π( θ )dθе(Икс)знак равно∫е(Икс|θ)π(θ)dθf(x) = \int f(x\mid\theta) \pi(\theta)\, d\theta Вероятность того, что она хорошо себя ведет - гладкая, вогнутая - но объемная. Я пробовал значительную выборку, но результаты оказались неубедительными и …

9 monte-carlo  likelihood  marginal 

РЕДАКТИРОВАТЬ: С момента создания этого поста, я добавил еще один пост здесь . Краткое содержание текста ниже: я работаю над моделью и пробовал линейную регрессию, преобразования Бокса-Кокса и GAM, но не добился большого прогресса Используя R, я в настоящее время работаю над моделью, чтобы предсказать успех игроков бейсбола низшей лиги …

9 r  multiple-regression  data-transformation  nonlinear-regression  gam 

Скажем, я выполняю анализ, глядя на определенную меру здоровья. Меня интересует разница в этой мере между пациентами и контрольной группой, а также в том, отличается ли эта разница от нуля. В прошлом проводились исследования, в которых рассматривался мой вопрос об одном и том же вопросе о здоровье и измерении состояния …

9 bayesian  meta-analysis  case-control-study 

Я хотел бы обдумать эту тему, но учиться на официальных документах и ​​руководствах сложно, потому что есть много пробелов, которые обычно заполняются в учебниках. Если это важно, у меня достаточно сильные математические знания, как и у доктора наук. в прикладной математике (точнее, CFD).

9 bayesian  nonparametric  references  nonparametric-bayes 

В основном это фон, пропустите до конца, если вы уже достаточно знаете о технологических смесях Дирихле . Предположу , я моделирование некоторых данных как поступающие из смеси процессов Дирихля, т.е. пусть и зависимость от F Предположит Y я я я д ~ ∫ F ( у | & thetas ) …

9 bayesian  nonparametric-bayes 

Правда ли, что в предположениях Гаусса-Маркова обычный метод наименьших квадратов дает эффективные и объективные оценки? Так: для всех tЕ( тыT) = 0E(ut)=0E(u_t)=0 Ttt для t = sЕ( тыTUs) = σ2E(utus)=σ2E(u_tu_s)=\sigma^2 т = сt=st=s для т ≠ sЕ( тыTUs) = 0E(utus)=0E(u_tu_s)=0 т ≠ ыt≠st\neq s где остатки.Uuu

9 regression  self-study  least-squares 

Я использую скрытый анализ классов для кластеризации выборки наблюдений на основе набора двоичных переменных. Я использую R и пакет poLCA. В LCA необходимо указать количество кластеров, которые вы хотите найти. На практике люди обычно запускают несколько моделей, каждая из которых задает разное количество классов, а затем используют различные критерии, чтобы …

9 data-visualization  mixture  latent-class 

В R, если я вызываю lm()функцию следующим образом: lm.1 = lm(response ~ var1 + var2 + var1 * var2) summary(lm.1) Это дает мне линейную модель переменной отклика с var1, var2и взаимодействие между ними. Однако как именно мы численно интерпретируем термин взаимодействия? Документация говорит, что это «крест» между var1и var2, но …

9 r  regression 

Я пытаюсь выучить модель линейной регрессии. Однако у меня есть некоторая путаница, связанная с нормализацией данных. Я нормализовал особенности / предикторы к нулевому среднему значению и единице дисперсии. Нужно ли делать то же самое для цели. Если так, то почему?

9 regression  multiple-regression  normalization 

Я читаю теорему Гасса-Маркова о википедии и надеялся, что кто-нибудь сможет помочь мне понять суть этой теоремы. Мы предполагаем, что линейная модель в матричной форме имеет вид: и мы ищем СИНИЙ, .y=Xβ+ηy=Xβ+η y = X\beta +\eta βˆβ^ \widehat\beta В соответствии с этим я бы обозначил как "остаток", а как "ошибку". …

9 regression  least-squares  mse  blue 

Для таблицы непредвиденных обстоятельств 2 на 2 некоторые говорили, что точный тест Фишера использует счет в ячейке (1,1) в таблице в качестве статистики теста, и при нулевой гипотезе будет имеют гипергеометрическое распределение.Икс1 , 1Икс1,1X_{1,1}Икс1 , 1Икс1,1X_{1,1} Некоторые говорили, что его тестовая статистика | Икс1 , 1- μ ||Икс1,1-μ| |X_{1,1} - …

9 hypothesis-testing  fishers-exact  hypergeometric 

Мне просто интересно узнать о нулевой гипотезе U-критерия Манна-Уитни. Я часто вижу, что утверждалось, что нулевая гипотеза состоит в том, что две популяции имеют равные распределения. Но я думаю - если бы у меня было две нормальные популяции с одинаковым средним, но крайне неравным отклонением, тест Манна-Уитни, вероятно, не обнаружил …

9 hypothesis-testing  variance  wilcoxon-mann-whitney