Статистика и большие данные

Из ответа на предыдущий вопрос я был направлен на последовательность Халтона для создания набора векторов, которые покрывали равномерное пространство выборки довольно равномерно. Но страница в Википедии упоминает, что более высокие простые числа часто очень сильно коррелируют в начале ряда. Это, кажется, имеет место для любой пары старших чисел с относительно …

13 sampling  small-sample  quasi-monte-carlo 

Например, кто-то хочет предсказать цены на жилье и имеет две входные характеристики: длину и ширину дома. Иногда, один также включает в себя «производные» полиномиальные входные объекты, такие как площадь, которая является длиной * шириной. 1) Какой смысл включать производные функции? Разве нейронная сеть не должна изучать связь между длиной, шириной …

13 machine-learning  neural-networks 

Я читал на этом сайте, что, по-видимому, Kinect каким-то образом использует алгоритм случайных лесов для машинного обучения. Кто-нибудь может объяснить, для чего он использует случайные леса и как работает их подход?

13 machine-learning  random-forest  application 

Я заинтересован в использовании квантильной регрессии для некоторых из моих моделей, но хотел бы получить некоторые разъяснения о том, что я могу достичь с помощью этой методологии. Я понимаю , что я могу получить более надежный анализ IV / DV отношений , особенно когда сталкивается с выбросами и гетероскедастичностью, но …

13 predictive-models  quantile-regression 

Изучая курс выборки, я встречаю следующие два утверждения: 1) Ошибка выборки приводит к большей изменчивости, ошибки выборки приводят к смещению. 2) Из-за ошибки несэмплирования выборка часто является более точной, чем CENSUS. Я не знаю, как понять эти два утверждения. Какова основная логика для получения этих двух утверждений?

13 estimation  sampling  survey  bias 

Можете ли вы порекомендовать книгу с хорошей информацией, которая может быть использована для разработки системы рекомендаций?

13 machine-learning  references  recommender-system 

Я использую обобщенную линейную модель в SPSS, чтобы посмотреть на различия в среднем количестве гусениц (ненормальное, используя распределение Твиди) на 16 различных видах растений. Я хочу провести несколько сравнений, но я не уверен, стоит ли мне использовать коррекционный тест Сидака или Бонферрони. В чем разница между двумя тестами? Один лучше …

13 multiple-comparisons  post-hoc  bonferroni 

В Википедии есть преобразование Фишера от ранга Спирмена до приблизительного z-показателя. Возможно, эта z-оценка отличается от нулевой гипотезы (ранг корреляции 0)? Эта страница имеет следующий пример: 4, 10, 3, 1, 9, 2, 6, 7, 8, 5 5, 8, 6, 2, 10, 3, 9, 4, 7, 1 rank correlation 0.684848 "95% …

13 correlation  spearman-rho 

Я хочу приспособить смешанную модель, используя lme4, nlme, пакет байсовой регрессии или любой доступный. Смешанная модель в соглашениях о кодировании Asreml-R прежде чем углубляться в детали, мы можем захотеть узнать подробности о соглашениях asreml-R для тех, кто не знаком с кодами ASREML. y = Xτ + Zu + e ........................(1) …

13 r 

Моя задача - проверить, есть ли изменение ковариационной матрицы из 6 переменных. Значения 6 переменных измеряются дважды от одного и того же субъекта (3 года между измерениями). Как я могу это сделать? Я делал большую часть своей работы, используя SAS.

13 hypothesis-testing  repeated-measures  multivariate-analysis  covariance-matrix 

У меня есть информация о распределении антропометрических размеров (таких как размах плеч) для детей разных возрастов. Для каждого возраста и измерения у меня есть среднее стандартное отклонение. (У меня также есть восемь квантилей, но я не думаю, что смогу получить от них то, что хочу.) Для каждого измерения я хотел …

13 normal-distribution  quantiles  gaussian-mixture  aggregation 

Закрыто. Этот вопрос не по теме . В настоящее время он не принимает ответы. Хотите улучшить этот вопрос? Обновите вопрос, чтобы он соответствовал теме перекрестной проверки. Закрыто 4 года назад . Есть ли пакет R, который я могу использовать, чтобы выяснить, существуют ли отношения между переменными? Обычно, когда я ищу …

13 r  data-visualization  correlation  eda 

Я узнал, что, используя vif()метод carупаковки, мы можем вычислить степень мультиколлинеарности входных данных в модели. Из википедии , если vifзначение больше, чем 5тогда, мы можем считать, что вход страдает от проблемы мультиколлинеарности. Например, я разработал модель линейной регрессии с использованием lm()метода и vif()дает следующее. Как мы можем видеть, входы ub, …

13 multicollinearity 

У меня есть несколько точек данных, каждая из которых содержит 5 векторов агломерированных дискретных результатов, результаты каждого вектора, сгенерированные различным распределением (конкретный вид, в котором я не уверен, мое лучшее предположение - Вейбулл, с параметром формы, изменяющимся где-то в пределах экспоненциальной степени) закон (от 1 до 0, примерно).) Я собираюсь …

13 distributions  clustering  feature-selection  kolmogorov-smirnov  k-means 

Я хочу применить PCA к набору данных, который состоит из переменных смешанного типа (непрерывных и двоичных). Чтобы проиллюстрировать процедуру, я вставил минимальный воспроизводимый пример в R ниже. # Generate synthetic dataset set.seed(12345) n <- 100 x1 <- rnorm(n) x2 <- runif(n, -2, 2) x3 <- x1 + x2 + rnorm(n) …

13 r  pca