Статистика и большие данные

Большинство стандартных дистрибутивов в R имеют семейство команд - pdf / pmf, cdf / cmf, квантиль, случайные отклонения (например, dnorm, pnorm, qnorm, rnorm). Я знаю, что достаточно просто использовать некоторые стандартные команды для воспроизведения этих функций для дискретных равномерных распределений, но есть ли уже предпочтительное встроенное семейство функций для моделирования …

28 r  distributions  uniform 

Посмотри на эту картину: Если мы возьмем образец из красной плотности, то ожидается, что некоторые значения будут меньше 0,25, тогда как невозможно получить такой образец из синего распределения. Как следствие, расстояние Кульбака-Лейблера от красной плотности до голубой плотности равно бесконечности. Тем не менее, эти две кривые не настолько различны, в …

28 kullback-leibler 

Если вспомнить, когда вы впервые начали анализ временных рядов. Какие инструменты, пакеты R и интернет-ресурсы вы хотели бы знать? Я пытаюсь спросить: с чего начать? В частности, есть ли ресурсы для R, которые действительно сводят его к тому, кто «новичок» в анализе временных рядов с R.

28 r  time-series 

Какой метод проверки сходимости вы предпочитаете при использовании цепочки Маркова Монте-Карло для байесовского вывода и почему?

28 bayesian  mcmc 

У меня есть R-скрипты для чтения больших объемов данных CSV из разных файлов, а затем выполнять задачи машинного обучения, такие как SVM для классификации. Существуют ли какие-либо библиотеки для использования нескольких ядер на сервере R. или Каков наиболее подходящий способ достижения этого?

28 r  parallel-computing  multicore 

Был уже запрос на видео по математической статистике , но он явно просил людей видео, которые обеспечивают строгое математическое представление статистики. то есть, видео, которые могут сопровождать курс, который использует учебник, упомянутый в этом обсуждении ... Так что в то же время мне интересно, что вы посоветуете для stat / …

28 references 

Пользователи часто испытывают желание разбить значения осей, чтобы представить данные разных порядков величины на одном графике (см. Здесь ). Хотя это может быть удобно, это не всегда предпочтительный способ отображения данных (в лучшем случае может вводить в заблуждение). Каковы альтернативные способы отображения данных, которые различаются на несколько порядков? Я могу …

28 data-visualization  logarithm 

Locked . Этот вопрос и его ответы заблокированы, потому что вопрос не по теме, но имеет историческое значение. В настоящее время он не принимает новые ответы или взаимодействия. Повторяющаяся тема: Я только что установил последнюю версию R. Какие пакеты я должен получить? Какие пакеты R вы не могли себе представить …

28 r 

Я хочу представить переменную как число от 0 до 1. Переменная является неотрицательным целым числом без внутренней границы. Я отображаю 0 на 0, но что я могу сопоставить 1 или числам от 0 до 1? Я мог бы использовать историю этой переменной, чтобы обеспечить пределы. Это будет означать, что мне …

28 normalization 

В 5.5 « Глубокое обучение» (Йен Гудфеллоу, Йошуа Бенжио и Аарон Курвилль) говорится, что Любая потеря, состоящая из отрицательного логарифмического правдоподобия, является кросс-энтропией между эмпирическим распределением, определенным обучающим набором, и распределением вероятности, определенным моделью. Например, среднеквадратическая ошибка - это кросс-энтропия между эмпирическим распределением и гауссовой моделью. Я не могу понять, …

28 machine-learning  normal-distribution  cross-entropy 

Как было объявлено в https://www.youtube.com/watch?v=xAoljeRJ3lU , Matplotlib меняет цветовую карту по умолчанию с jet на viridis. Однако я не очень хорошо понимаю это. Может потому что я дальтоник? Оригинальная струя цветовой карты выглядит очень сильной, я чувствую контраст: Хотя новой цветовой карте viridis не хватает этого контраста: Может кто-нибудь объяснить, …

28 data-visualization 

Из книги Дэвида Салсбурга « Дама, пробующая чай» : Хотя читатель может не верить этому, литературный стиль играет важную роль в математических исследованиях. Некоторые авторы математики, кажется, не в состоянии создавать статьи, которые легко понять. Другие, кажется, получают извращенное удовольствие от создания множества строк символической записи, настолько наполненных деталями, что …

28 references  communication 

Случайная прогулка , которая определяется как , где является белым шумом. Обозначает, что текущая позиция является суммой предыдущей позиции + непредсказуемый термин.Yt=Yt−1+etYt=Yt−1+etY_{t} = Y_{t-1} + e_tetete_t Вы можете доказать, что средняя функция , так какμt=0μt=0\mu_t = 0 E(Yt)=E(e1+e2+...+et)=E(e1)+E(e2)+...+E(et)=0+0+...+0E(Yt)=E(e1+e2+...+et)=E(e1)+E(e2)+...+E(et)=0+0+...+0E(Y_{t}) = E(e_1+ e_2+ ... +e_t) = E(e_1) + E(e_2) +... +E(e_t) = …

28 time-series  self-study  mathematical-statistics  stochastic-processes  random-walk 

Ответы (определения), определенные в Википедии, возможно, немного загадочны для тех, кто не знаком с высшей математикой / статистикой. В математических терминах, статистическая модель обычно считается как пара ( S,PS,пS, \mathcal{P} ), где SSS есть множество возможных наблюдений, т.е. выборочного пространства, и есть множество вероятностных распределений на . SPп\mathcal{P}SSS В вероятности …

28 distributions  model  terminology 

Я только что просмотрел эту замечательную книгу: « Прикладной многомерный статистический анализ» Джонсона и Вихерна . Ирония в том, что я до сих пор не могу понять мотивацию использования многомерных (регрессионных) моделей вместо отдельных одномерных (регрессионных) моделей. Я просмотрел статьи 1 и 2 stats.statexchange , в которых объясняется (а) различие …

28 regression  multiple-regression  inference  multivariate-regression