Вопросы с тегом «multiple-comparisons»

Мы знаем, что мы должны применять поправки Бенджамини-Хохберга для проверки нескольких гипотез к экспериментам, основанным на одном наборе данных, чтобы контролировать частоту ложных открытий, иначе все эксперименты, которые дают положительный результат, могут быть ложными. Но почему мы не применяем этот же принцип ко всем экспериментам с начала времен, независимо от …

24 hypothesis-testing  multiple-comparisons  bonferroni  false-discovery-rate 

У меня есть p значений из многих тестов, и я хотел бы знать, есть ли на самом деле что-то существенное после исправления для множественного тестирования. Сложность: мои тесты не являются независимыми. Метод, о котором я думаю (вариант метода продукта Фишера, Зайкин и др., Genet Epidemiol , 2002), нуждается в корреляции …

24 correlation  multiple-comparisons  statistical-significance  genetics 

Я прочитал следующую статью: Perneger (1998) Что не так с корректировками Бонферрони . В заключение автор сказал, что корректировка Бонферрони в лучшем случае имеет ограниченное применение в биомедицинских исследованиях и не должна использоваться при оценке доказательств конкретной гипотезы: Сводные моменты: Корректировка статистической значимости для количества тестов, которые были выполнены на …

23 hypothesis-testing  multiple-comparisons  bonferroni 

Я использую JMP для изучения различий в растительном покрове в группах форм роста (деревья, кустарники, кустарники и т. Д.) До и после трех обработок с контролем. Размер моей выборки небольшой (n = 5), и большинство моих дистрибутивов обычно не распространяются. Для нормального распределения я использовал ANOVA для анализа различий (процентное …

23 multiple-comparisons  nonparametric  tukey-hsd 

Эндрю Гельман (Andrew Gelman) написал обширную статью о том, почему байесовское тестирование AB не требует множественной коррекции гипотез: почему мы (обычно) не должны беспокоиться о множественных сравнениях , 2012. Я не совсем понимаю: почему байесовские методы не требуют множественных исправлений тестирования? A ~ Distribution1 + Common Distribution B ~ Distribution2 …

22 hypothesis-testing  bayesian  multiple-comparisons 

Я выполняю независимых статистических тестов с одинаковой нулевой гипотезой и хотел бы объединить результаты в одно значение. Кажется, что есть два «принятых» метода: метод Фишера и метод Стоуффера .NNNppp Мой вопрос о методе Стоуффера. Для каждого отдельного теста я получаю z-оценку . Под нулевой гипотезой, каждый из них распределяются со …

22 hypothesis-testing  chi-squared  p-value  multiple-comparisons  combining-p-values 

Когда мы проводим эксперименты (на небольших размерах выборки (обычно размер выборки на группу лечения составляет около 7-8)) в двух группах, мы используем t-критерий для проверки на разницу. Однако, когда мы выполняем ANOVA (очевидно, для более чем двух групп), мы используем что-то вроде Bonferroni (LSD / # парных сравнений) или Tukey …

22 anova  multiple-comparisons  post-hoc  bonferroni  fishers-lsd 

У меня есть два вопроса относительно того, когда использовать настройку Бонферрони: Целесообразно ли использовать корректировку Бонферрони во всех случаях множественного тестирования? Если кто-то выполняет тест на наборе данных, то он разбивает этот набор на более мелкие уровни (например, разбивает данные по полу) и выполняет те же тесты, как это может …

21 multiple-comparisons  bonferroni  type-i-and-ii-errors 

После выполнения анализа главных компонентов (PCA) я хочу спроецировать новый вектор на пространство PCA (т.е. найти его координаты в системе координат PCA). Я рассчитал PCA на языке R, используя prcomp. Теперь я должен быть в состоянии умножить свой вектор на матрицу вращения PCA. Должны ли главные компоненты в этой матрице …

21 r  pca  r  variance  heteroscedasticity  misspecification  distributions  time-series  data-visualization  modeling  histogram  kolmogorov-smirnov  negative-binomial  likelihood-ratio  econometrics  panel-data  categorical-data  scales  survey  distributions  pdf  histogram  correlation  algorithms  r  gpu  parallel-computing  approximation  mean  median  references  sample-size  normality-assumption  central-limit-theorem  rule-of-thumb  confidence-interval  estimation  mixed-model  psychometrics  random-effects-model  hypothesis-testing  sample-size  dataset  large-data  regression  standard-deviation  variance  approximation  hypothesis-testing  variance  central-limit-theorem  kernel-trick  kernel-smoothing  error  sampling  hypothesis-testing  normality-assumption  philosophical  confidence-interval  modeling  model-selection  experiment-design  hypothesis-testing  statistical-significance  power  asymptotics  information-retrieval  anova  multiple-comparisons  ancova  classification  clustering  factor-analysis  psychometrics  r  sampling  expectation-maximization  markov-process  r  data-visualization  correlation  regression  statistical-significance  degrees-of-freedom  experiment-design  r  regression  curve-fitting  change-point  loess  machine-learning  classification  self-study  monte-carlo  markov-process  references  mathematical-statistics  data-visualization  python  cart  boosting  regression  classification  robust  cart  survey  binomial  psychometrics  likert  psychology  asymptotics  multinomial 

Я рецензирую статью, в которой было выполнено> 15 отдельных тестов хи-квадрат 2х2. Я предположил, что им нужно исправить множественные сравнения, но они ответили, что все сравнения были запланированы, и поэтому в этом нет необходимости. Я чувствую, что это не должно быть правильно, но я не могу найти никаких ресурсов, которые …

20 hypothesis-testing  multiple-comparisons 

Какой метод является предпочтительным для проведения специальных тестов для внутрисубъектных тестов? Я видел опубликованную работу, где используется HSD Тьюки, но обзор Keppel и Maxwell & Delaney предполагает, что вероятное нарушение сферичности в этих конструкциях делает ошибочный термин ошибочным, и этот подход проблематичным. Maxwell & Delaney предлагают подход к проблеме в …

20 r  repeated-measures  multiple-comparisons  post-hoc  sphericity 

Я слышал, что когда многие спецификации регрессионных моделей (скажем, в OLS) рассматриваются как возможности для набора данных, это вызывает многочисленные проблемы сравнения, а значения p и доверительные интервалы перестают быть надежными. Одним из крайних примеров этого является ступенчатая регрессия. Когда я могу использовать сами данные, чтобы помочь определить модель, и …

20 regression  frequentist  multiple-comparisons 

Я прочитал эту замечательную статью Дэвида Колкхуна: исследование уровня ложных открытий и неправильного толкования р-значений (2014). По сути, он объясняет, почему частота ложных обнаружений (FDR) может достигать даже если мы контролируем ошибку типа I с α = 0,05 .30 %30%30\%α = 0,05αзнак равно0,05\alpha=0.05 Однако я все еще не понимаю, что …

19 hypothesis-testing  statistical-significance  p-value  multiple-comparisons  false-discovery-rate 

Насколько консервативна коррекция множественных тестов Бенджамини-Хохберга относительно общего числа сравнений? Например, если у меня есть список из 18 000 функций для двух групп, и я выполняю тест Вилкоксона, чтобы получить p-значение. Я корректирую это значение p, используя Бенджамини-Хохберга, и практически ничего не получается. Я знаю, что коррекция Бонферрони может быть …

19 multiple-comparisons  p-value 

Это упражнение дается в теории вероятностей: Логика науки Эдвин Джейнс, 2003. Существует частичное решение здесь . Я разработал более общее частичное решение, и мне было интересно, если кто-то еще решил его. Я подожду немного, прежде чем опубликовать свой ответ, чтобы дать другим возможность. Итак, предположим, что у нас есть nnn …

19 independence  likelihood-ratio  hypothesis-testing  multiple-comparisons