Статистика и большие данные

Я использую plm()для оценки моделей с фиксированными эффектами формы y ~ x + time + time:fixed_trait где fixed_traitпеременная, которая варьируется между людьми, но постоянна внутри людей. Смысл взаимодействия timeс ним fixed_traitзаключается в том, чтобы позволить эффекту fixed_traitизменяться во времени. (Я работаю здесь из недавнего буклета Пола Эллисона о фиксированных эффектах. …

16 r 

Мне нужно спрогнозировать следующие 4 переменные для 29-й единицы времени. У меня есть исторические данные примерно за 2 года, где 1 и 14 и 27 - все один и тот же период (или время года). В конце я делаю разложение в стиле Оахака-Блиндера на WWW , wdwdwd , wcwcwc и …

16 time-series  forecasting  multivariate-analysis  var 

Это то, что я вижу в качестве специального метода, и это мне кажется очень подозрительным, но, возможно, я что-то упустил. Я видел, как это делалось в множественной регрессии, но давайте просто сделаем это просто: yi=β0+β1xi+εiyi=β0+β1xi+εi y_{i} = \beta_{0} + \beta_{1} x_{i} + \varepsilon_{i} Теперь возьмите остатки от установленной модели ei=yi−(β^0+β^1xi)ei=yi−(β^0+β^1xi) …

16 regression  residuals 

Больше общего вопроса. Я использую rbf SVM для прогнозного моделирования. Я думаю, что моя текущая программа определенно нуждается в ускорении. Я использую Scikit Learn с грубым, чтобы точный поиск сетки + перекрестная проверка. Каждый запуск SVM занимает около минуты, но со всеми итерациями я все еще нахожу его слишком медленным. …

16 machine-learning  svm  predictive-models  scikit-learn  kernel-trick 

Я сталкивался с некоторыми основными способами измерения сложности нейронных сетей: Наивный и неформальный: подсчитайте количество нейронов, скрытых нейронов, слоев или скрытых слоев VC-измерение (Эдуардо Д. Сонтаг [1998] "VC-измерение нейронных сетей" [ pdf ].) Конечно-гранулированная и асимптотическая вычислительная сложность измеряется эквивалентностью TC0dTCd0TC^0_d . Есть ли другие альтернативы? Это предпочтительно: Если показатель …

16 neural-networks  theory  vc-dimension  pac-learning 

Я знаю, что pdf степенного закона распределения p(x)=α−1xmin(xxmin)−αp(x)=α−1xmin(xxmin)−α p(x) = \frac{\alpha-1}{x_{\text{min}}} \left(\frac{x}{x_{\text{min}}} \right)^{-\alpha} Но что это означает интуитивно, если, например, цены на акции следуют распределению по степенному закону? Значит ли это, что потери могут быть очень высокими, но нечастыми?

16 distributions  power-law 

Здравствуйте, статистические гуру и мастера программирования R, Я заинтересован в моделировании захвата животных в зависимости от условий окружающей среды и дня года. Как часть другого исследования, у меня есть подсчеты по ~ 160 дней за три года. В каждый из этих дней у меня есть температура, количество осадков, скорость ветра, …

16 r  mixed-model  autocorrelation  bugs  panel-data 

Я ищу различные способы объяснить моим студентам (в курсе элементарной статистики), что такое двусторонний тест и как рассчитывается его значение P. Как вы объясните своим ученикам двухсторонний тест?

16 hypothesis-testing  p-value  teaching 

Существует ли «правило» для определения минимального размера выборки, необходимого для правильности t-теста? Например, необходимо провести сравнение между двумя популяциями. Существует 7 точек данных из одной совокупности и только 2 точки данных из другой. К сожалению, эксперимент очень дорог и требует много времени, и получение большего количества данных не представляется возможным. …

16 t-test  sample-size  small-sample  wilcoxon-mann-whitney 

Закрыто. Этот вопрос не по теме . В настоящее время не принимает ответы. Хотите улучшить этот вопрос? Обновите вопрос, чтобы он соответствовал теме перекрестной проверки. Закрыто 6 лет назад . Я ищу большой (> 1000) текстовый корпус для загрузки. Желательно с мировыми новостями или какими-то репортажами . Я нашел только …

16 dataset 

Предположим, что у нас есть две точки (на следующем рисунке: черные кружки), и мы хотим найти значение для третьей точки между ними (крестик). Действительно, мы собираемся оценить это на основе наших экспериментальных результатов, черные точки. Простейший случай - нарисовать линию, а затем найти значение (т. Е. Линейную интерполяцию). Если у …

16 estimation  interpolation 

Есть ли хорошие книги, в которых объясняются такие важные понятия теории вероятностей, как функции распределения вероятностей и кумулятивные функции распределения? Пожалуйста, избегайте ссылок на такие книги, как «Математическая статистика и анализ данных» Джона Райса, которые начинаются с простых концепций перестановок, а затем внезапно (во 2-й главе) совершают скачок, предполагая знания …

16 probability  self-study  distributions  references  theory 

У меня есть набор данных, я хочу создать кластеры на этих данных на основе только одной переменной (нет пропущенных значений). Я хочу создать 3 кластера на основе этой одной переменной. Какой алгоритм кластеризации использовать, k-means, EM, DBSCAN и т. Д.? Мой главный вопрос заключается в том, при каких обстоятельствах я …

16 clustering 

Я пытался написать алгоритм для предложения ставок в 1X2 (взвешенных) играх. По сути, в каждой игре есть набор матчей (домашние и выездные команды): 1: дом побеждает X: привлечь 2: прочь побеждает Для каждого совпадения и символа ( 1, Xи 2) я назначу процент, который представляет шансы / вероятность того, что …

16 optimization 

Я несколько раз пытался «действовать самостоятельно», но с ограниченным успехом. Я обычный пользователь SPSS и имею некоторый опыт работы с SAS. Был бы признателен указатель или два от кого-то, кто имеет аналогичный фон и теперь использует R.

16 r  references