Статистика и большие данные

У меня есть выборка населения зарегистрированных максимумов амплитуды сигнала. Население составляет около 15 миллионов образцов. Я составил гистограмму населения, но не могу угадать распределение с такой гистограммой. EDIT1: файл с необработанными значениями образца находится здесь: необработанные данные Может ли кто-нибудь помочь оценить распределение по следующей гистограмме:

13 distributions  histogram 

Я наблюдаю регрессионную модель, которая регрессирует доходность фондовых индексов в годовом исчислении по годичным (12 месяцев) доходностям одного и того же фондового индекса, кредитному спреду (разница между среднемесячным значением безрисковых облигаций и корпоративных облигаций). доходности), инфляция в годовом исчислении и индекс промышленного производства в годовом сопоставлении. Это выглядит следующим образом …

13 regression  time-series  autocorrelation 

Я ищу хорошие ссылки на использование данных о направлении (мера направления в градусах) в качестве независимой переменной в регрессии; в идеале это также было бы полезно для иерархических нелинейных моделей (данные вложены). Я также заинтересован в данных о направлении в целом. Я нашел текст Мардии, который собираюсь получить, но удивился, …

13 circular-statistics 

Сегодня меня спросили, что-то похожее на это. Интервьюер хотел знать, какова вероятность того, что опцион «при деньгах» окажется в деньгах, когда волатильность стремится к бесконечности. Я сказал 0%, потому что нормальные распределения, которые лежат в основе модели Блэка-Шоулза и гипотезы случайного блуждания, будут иметь бесконечную дисперсию. И поэтому я решил, …

13 normal-distribution  variance 

Я ищу методы, которые можно использовать для оценки модели погрешности измерения "OLS". yi=Yi+ey,iyi=Yi+ey,iy_{i}=Y_{i}+e_{y,i} xi=Xi+ex,ixi=Xi+ex,ix_{i}=X_{i}+e_{x,i} Yi=α+βXiYi=α+βXiY_{i}=\alpha + \beta X_{i} Где ошибки независимы, нормальны с неизвестными отклонениями σ2yσy2\sigma_{y}^{2} и σ2xσx2\sigma_{x}^{2} . «Стандартный» OLS не будет работать в этом случае. В Википедии есть несколько непривлекательных решений - эти два фактора заставляют вас предполагать, …

13 regression  estimation  errors-in-variables 

Предположим, что X∼N(μx,σ2x)X∼N(μx,σx2)X \sim \mathcal{N}(\mu_x, \sigma^2_x) и Y∼N(μy,σ2y)Y∼N(μy,σy2)Y \sim \mathcal{N}(\mu_y, \sigma^2_y) z=min(μx,μy)z=min(μx,μy)z = \min(\mu_x, \mu_y)zzz Простая оценка где и являются примерами средних значений и , например, смещена (хотя и непротиворечива). Это имеет тенденцию к недоразвитию .min(x¯,y¯)min(x¯,y¯)\min(\bar{x}, \bar{y})x¯x¯\bar{x}y¯y¯\bar{y}XXXYYYzzz Я не могу думать о непредвзятой оценке для . Один существует?zzz Спасибо за …

13 random-variable  unbiased-estimator  minimum 

Это мой первый пост. Я действительно благодарен за это сообщество. Я пытаюсь проанализировать данные продольного счета, которые укорочены до нуля (вероятность того, что переменная отклика = 0 равна 0), а среднее значение! = Дисперсия, поэтому для пуассона было выбрано отрицательное биномиальное распределение. Функции / команды, которые я исключил: р Функция …

13 r  stata  count-data  panel-data  truncation 

Может кто-нибудь сказать мне разницу между использованием aov()и lme()для анализа продольных данных и как интерпретировать результаты этих двух методов? Ниже я анализирую один и тот же набор данных aov()и получаю lme()2 разных результата. Таким образом aov(), я получил значительный результат во времени при взаимодействии с лечением, но при использовании линейной …

13 r  mixed-model  repeated-measures  panel-data 

Я экспериментирую с классификацией данных по группам. Я довольно новичок в этой теме, и пытаюсь понять вывод некоторых из анализа. Используя примеры из Quick-R , предлагается несколько Rпакетов. Я попытался использовать два из этих пакетов ( fpcс помощью kmeansфункции и mclust). Один из аспектов этого анализа, который я не понимаю, …

13 r  clustering 

Мне нужна формула для вероятности события в n-вариативном распределении Бернулли X∈{0,1}nX∈{0,1}nX\in\{0,1\}^n с заданными вероятностями P(Xi=1)=piP(Xi=1)=piP(X_i=1)=p_i для одного элемента и для пар элементов P(Xi=1∧Xj=1)=pijP(Xi=1∧Xj=1)=pijP(X_i=1 \wedge X_j=1)=p_{ij} . Эквивалентное я мог бы дать среднее значение и ковариация XXX . Я уже узнал, что существует много распределений, имеющих свойства, так же как существует …

13 multivariate-analysis  discrete-data 

Я хотел бы получить коэффициенты для задачи LASSO ||Y−Xβ||+λ||β||1.||Y−Xβ||+λ||β||1.||Y-X\beta||+\lambda ||\beta||_1. Проблема в том, что функции glmnet и lars дают разные ответы. Для функции glmnet я спрашиваю коэффициенты вместо просто λ , но я все еще получаю разные ответы.λ/||Y||λ/||Y||\lambda/||Y||λλ\lambda Это ожидается? Какова связь между ларами и glmnet λ ? Я понимаю, …

13 r  machine-learning  regression  lasso  regularization 

Данные: я недавно работал над анализом стохастических свойств пространственно-временного поля ошибок прогноза производства энергии ветра. Формально можно сказать, что это процесс индексируются дважды во времени (сtиh) и один раз в пространстве (p), гдеH- это количество времени просмотра вперед (равно примерно24, регулярно выбирается),T- это число «время прогноза» (т. е. время выдачи …

13 forecasting  data-mining  stochastic-processes  spatial  spatio-temporal 

Я недавно закончил со степенью магистра по медицинскому и биологическому моделированию, сопровождаемый инженерной математикой в ​​качестве фона. Несмотря на то, что моя образовательная программа включала в себя значительное количество курсов по математической статистике (список приведен ниже), которыми я руководил с довольно высокими оценками, я часто полностью терял взгляд на теорию …

13 mathematical-statistics  bioinformatics  computational-statistics 

В ответ на растущее число статистиков и исследователей, которые критикуют полезность тестирования нулевых гипотез (NHT) для науки в качестве совокупного усилия, Целевая группа Американской психологической ассоциации по статистическому выводу избежала прямого запрета на NHT, но вместо этого предположила, что исследователи сообщить размеры эффекта в дополнение к значениям р, полученным из …

13 bayesian  confidence-interval  effect-size  inference 

У меня есть набор игроков. Они играют друг против друга (попарно). Пары игроков выбираются случайным образом. В любой игре один игрок выигрывает, а другой проигрывает. Игроки играют друг с другом ограниченное количество игр (некоторые игроки играют больше игр, некоторые меньше). Итак, у меня есть данные (кто выигрывает у кого и …

13 goodness-of-fit  ranking  rating