Статистика и большие данные

Я планирую провести симуляционное исследование, в котором сравниваю эффективность нескольких надежных методов корреляции с различными распределениями (искаженное, с выбросами и т. Д.). Под устойчивым я имею в виду идеальный случай быть устойчивым к: а) перекосам, б) выбросам и в) тяжелым хвостам. Наряду с корреляцией Пирсона в качестве базовой линии, я …

18 r  correlation  robust  spearman-rho  winsorizing 

Является ли «предел погрешности» таким же, как «стандартная ошибка»? (Простой) пример, иллюстрирующий разницу, был бы великолепен!

18 definition 

Я смотрю на использование лассо в качестве метода выбора признаков и подбора прогнозирующей модели с бинарной целью. Ниже приведен код, с которым я играл, чтобы опробовать метод с регуляризованной логистической регрессией. Мой вопрос заключается в том, что я получил группу «значимых» переменных, но могу ли я упорядочить их, чтобы оценить …

18 logistic  importance  glmnet 

Я ищу статьи или тексты, которые сравнивают и обсуждают (эмпирически или теоретически): Алгоритмы деревьев повышения и принятия решений , такие как Random Forests или AdaBoost , и GentleBoost, применяются к деревьям решений. с Методы глубокого обучения, такие как ограниченные машины Больцмана , иерархическая временная память , сверточные нейронные сети и …

18 machine-learning  deep-learning  cart  rbm  adaboost 

Я хочу сделать классификацию на мои текстовые данные. У меня есть 300 classes200 учебных документов на класс (так 60000 documents in total), и это, вероятно, приведет к очень большим размерам данных (возможно, мы просматриваем более 1 миллиона измерений ). Я хотел бы выполнить следующие шаги в конвейере (просто чтобы дать …

18 machine-learning  classification  text-mining 

В частности, как следует рассчитывать стандартные ошибки фиксированных эффектов в линейной модели смешанных эффектов (в частом смысле)? Я был ведущим полагать , что типичные оценки ( ), такие как те , которые представлены в Laird и Ware [1982 года] даст системотехники, которые занижены в размерах , так как Компоненты оценочной …

18 r  mixed-model  random-effects-model 

У меня есть точка (х, у), что мне нужен линейный регрессор для прохождения заданного набора данных (X, Y). Как мне реализовать это в R?

18 r  regression 

Я пытаюсь свести к минимуму пользовательские функции. Он должен принимать пять параметров и набор данных и выполнять все виды вычислений, выдавая в качестве выходных данных одно число. Я хочу найти комбинацию из пяти входных параметров, которая дает наименьший выход моей функции.

18 r  optimization 

Часто утверждают, что байесовский каркас имеет большое преимущество в интерпретации (по сравнению с частыми), потому что он вычисляет вероятность параметра с учетом данных - вместо как в Частые рамки. Все идет нормально.p ( x | θ )p(θ|x)p(θ|x)p(\theta|x)p(x|θ)p(x|θ)p(x|\theta) Но все уравнение основано на: p(θ|x)=p(x|θ).p(θ)p(x)p(θ|x)=p(x|θ).p(θ)p(x)p(\theta|x) = {p(x|\theta) . p(\theta) \over p(x)} выглядит …

18 bayesian  interpretation  prior  likelihood  posterior 

Закрыто. Этот вопрос не по теме . В настоящее время не принимает ответы. Хотите улучшить этот вопрос? Обновите вопрос, чтобы он соответствовал теме перекрестной проверки. Закрыто 3 года назад . Как я могу добавить новую переменную во фрейм данных, которая будет иметь процентильный ранг одной из переменных? Я могу сделать …

18 r  quantiles 

Кто-нибудь знает R, эквивалентный SAS PROC FREQ? Я пытаюсь создать сводную описательную статистику для нескольких переменных одновременно.

18 r  descriptive-statistics  sas 

Я считаю, что простые упражнения по анализу данных часто могут помочь проиллюстрировать и уточнить статистические концепции. Какие упражнения по анализу данных вы используете для обучения статистическим понятиям?

18 teaching 

Я хочу протестировать многоступенчатую модель пути (например, A прогнозирует B, B прогнозирует C, C прогнозирует D), где все мои переменные представляют собой отдельные наблюдения, вложенные в группы. До сих пор я делал это с помощью множественного уникального многоуровневого анализа в R. Я бы предпочел использовать методику, такую ​​как SEM, которая …

18 r  multilevel-analysis  sem  path-model 

Locked . Этот вопрос и его ответы заблокированы, потому что вопрос не по теме, но имеет историческое значение. В настоящее время он не принимает новые ответы или взаимодействия. Я хотел бы использовать R, чтобы построить что-то вроде этого: Казалось бы, возможно, но очень сложно отслеживать координаты, ширину, высоту и т. …

18 r  data-visualization  tables 

Контекст: Из вопроса об обмене стеками по математике (могу ли я построить программу) кто-то имеет набор точек и хочет подогнать к нему кривую, линейную, экспоненциальную или логарифмическую. Обычный метод состоит в том, чтобы начать с выбора одного из них (который определяет модель), а затем выполнить статистические вычисления.х - уИкс-Yx-y Но …

18 regression  predictive-models  model-selection  curve-fitting