Статистика и большие данные

Вопросы и ответы для людей, интересующихся статистикой, машинным обучением, анализом данных, интеллектуальным анализом данных и визуализацией данных

2
Могу ли я проверить достоверность ранее предоставленных данных?
проблема Я пишу функцию R, которая выполняет байесовский анализ для оценки апостериорной плотности с учетом информированного априора и данных. Я хотел бы, чтобы функция отправляла предупреждение, если пользователю необходимо пересмотреть предыдущее. В этом вопросе мне интересно узнать, как оценить априор. Предыдущие вопросы охватывали механизм постановки информированных приоров ( здесь и …

1
Быстрое вычисление / оценка линейной системы низкого ранга
Линейные системы уравнений распространены в вычислительной статистике. Одна особая система, с которой я столкнулся (например, в факторном анализе), это система A x = bAx=bAx=b где Здесь D - диагональная матрица n × n со строго положительной диагональю, Ω - симметричная положительная полуопределенная матрица m × m (с m ≪ n …

2
Как оценить параметры для фильтра Калмана
В предыдущем вопросе я спросил о подгонке распределений к некоторым негауссовым эмпирическим данным. Мне было предложено в автономном режиме, чтобы я мог попробовать предположение, что данные гауссовские и сначала подходят для фильтра Калмана. Затем, в зависимости от ошибок, решите, стоит ли разрабатывать что-то более изощренное. В этом есть смысл. Итак, …



3
Метод случайных следов
Я встречал следующую методику рандомизированных следов у М. Сигера, «Обновления низкого ранга для разложения Холецкого», Университет Калифорнии в Беркли, Тех. Реп, 2007. tr(A)=E[xTAx]tr⁡(A)=E[xTAx]\operatorname{tr}(\mathbf{A}) = {E[\mathbf{x}^T \mathbf{A} \mathbf{x}]} где .x∼N(0,I)x∼N(0,I)\mathbf{x} \sim N(\mathbf{0},\mathbf{I}) Как человек без глубоких математических знаний, мне интересно, как можно достичь этого равенства. Кроме того, как мы можем интерпретировать …

2
Обоснование использования AUC?
Особенно в области компьютерной науки, ориентированной на информатику, AUC (область под характеристической кривой оператора приемника) является популярным критерием для оценки классификаторов. Каковы основания для использования AUC? Например, есть ли конкретная функция потерь, для которой оптимальным решением является классификатор с лучшим AUC?

3
В чем разница между ITT и ATE?
У меня возникают проблемы с пониманием различных оценок, которые можно использовать при оценке воздействия. Я знаю, что оценщик «намерение лечить» (ITT) сравнивает различия между подходящими лицами без программы и подходящими лицами с программой, независимо от соответствия. Тем не менее, я думал, что средний эффект лечения (ATE) также измерял то же …

2
Оптимизация среднего отклонения портфеля Марковица в R
У меня есть 5 серий общей доходности в иностранной валюте на развивающихся рынках, для которых я прогнозирую будущие доходности за один период (1 год). Я хотел бы построить портфель из пяти рядов, оптимизированный по Марковицу, используя исторические дисперсии и ковариации (1) и мой собственный прогноз ожидаемой доходности. Есть ли у …
10 r 


2
Рекомендуемая процедура для факторного анализа на дихотомических данных с R
Мне нужно провести факторный анализ набора данных, состоящего из дихотомических переменных (0 = да, 1 = нет), и я не знаю, нахожусь ли я на правильном пути. Используя tetrachoric()я создаю корреляционную матрицу, по которой я бегу fa(data,factors=1). Результат довольно близок к результатам, которые я получаю при использовании MixFactor , но …

6
Лучший способ взаимодействия с сеансом R, работающим в облаке
Locked . Этот вопрос и его ответы заблокированы, потому что вопрос не по теме, но имеет историческое значение. В настоящее время он не принимает новые ответы или взаимодействия. У меня R работает на Amazon EC2, используя модифицированную версию биокондуктора AMI . В настоящее время я использую putty для ssh на …
10 r 

2
Продольные данные: временные ряды, повторные измерения или что-то еще?
Проще говоря, у меня есть модель множественной регрессии или ANOVA, но переменная отклика для каждого человека является криволинейной функцией времени. Как я могу сказать, какие из переменных правой стороны ответственны за существенные различия в формах или вертикальных смещениях кривых? Это проблема временного ряда, проблема повторных измерений или что-то еще? Каковы …

3
Детское статистическое образование в разных странах?
Мне интересно знать, какой уровень статистики дети изучают в разных странах мира. Не могли бы вы предложить данные / ссылки, которые проливают свет на то, что происходит в этом отношении? Я начну. Израиль: студенты, изучающие углубленную математику, изучают более или менее - среднее значение, стандартное отклонение, гистограмма, нормальное распределение, очень …
10 dataset  teaching 

1
Использование эксцесса для оценки значимости компонентов из независимого анализа компонентов
В PCA собственные значения определяют порядок компонентов. В ICA я использую куртоз для получения заказа. Какие существуют общепринятые методы для оценки количества (если у меня есть порядок) компонентов, которые отличаются от предыдущих знаний о сигнале?

Используя наш сайт, вы подтверждаете, что прочитали и поняли нашу Политику в отношении файлов cookie и Политику конфиденциальности.
Licensed under cc by-sa 3.0 with attribution required.