Andrew Gelman escreveu um extenso artigo sobre o motivo pelo qual o teste Bayesiano AB não exige correção de múltiplas hipóteses: Por que geralmente não precisamos nos preocupar com comparações múltiplas , 2012. Não entendo bem: por que os métodos bayesianos não exigem várias correções de...
Quando realizamos experimentos (em amostras pequenas (geralmente o tamanho da amostra por grupo de tratamento é de 7 a 8)) em dois grupos, usamos um teste t para testar a diferença. No entanto, quando realizamos uma ANOVA (obviamente para mais de dois grupos), usamos algo como Bonferroni (LSD / #...
Tenho duas perguntas sobre quando usar um ajuste Bonferroni: É apropriado usar um ajuste Bonferroni em todos os casos de testes múltiplos? Se alguém realiza um teste em um conjunto de dados, divide-o em níveis mais refinados (por exemplo, divide os dados por sexo) e realiza os mesmos testes, como...
Depois de executar a análise de componentes principais (PCA), quero projetar um novo vetor no espaço do PCA (ou seja, encontrar suas coordenadas no sistema de coordenadas do PCA). Eu calculei o PCA na linguagem R usando prcomp. Agora eu devo poder multiplicar meu vetor pela matriz de rotação PCA....
Estou revendo um artigo que realizou mais de 15 testes separados 2x2 Chi Square. Sugeri que eles precisam corrigir várias comparações, mas eles responderam dizendo que todas as comparações foram planejadas e, portanto, isso não é necessário. Sinto que isso não deve estar correto, mas não consigo...
Qual é o método preferido para a realização de post-hocs para testes dentro dos sujeitos? Vi trabalhos publicados nos quais o HSD de Tukey é empregado, mas uma revisão de Keppel e Maxwell & Delaney sugere que a provável violação da esfericidade nesses projetos torna o termo do erro incorreto e...
Ouvi dizer que quando muitas especificações de modelo de regressão (por exemplo, no OLS) são consideradas como possibilidades para um conjunto de dados, isso causa vários problemas de comparação e os valores de p e os intervalos de confiança não são mais confiáveis. Um exemplo extremo disso é a...
Olhando para uma situação de ANOVA entre grupos, o que você obtém fazendo esse teste de ANOVA primeiro e depois o pós-hoc (Bonferroni, Šidák, etc.) ou testes de comparações planejadas? Por que não pular a etapa ANOVA completamente? Entendo que, em tal situação, o único benefício da ANOVA entre os...
Quão conservadora é a correção de testes múltiplos de Benjamini-Hochberg em relação ao número total de comparações? Por exemplo, se eu tiver uma lista de 18.000 recursos para dois grupos e executar um teste de Wilcoxon para obter um valor-p. Eu ajusto esse valor-p usando Benjamini-Hochberg e quase...
Eu li este excelente artigo de David Colquhoun: Uma investigação sobre a taxa de falsas descobertas e a má interpretação dos valores-p (2014). Em essência, ele explica por que a taxa de falsas descobertas (FDR) pode chegar a , apesar de controlarmos o erro do tipo I com30 %30%30\% .α =...
Descobrindo estatísticas de Reading Field usando o SPSS (3ª edição) Fiquei impressionado com os testes post-hoc na ANOVA. Para aqueles que desejam controlar a taxa de erro do tipo I, ele sugere Bonferroni ou Tukey e diz (p. 374): Bonferroni tem mais poder quando o número de comparações é...
Tanto na literatura sobre a taxa de erro familiar (FWER) quanto na taxa de falsas descobertas (FDR), métodos particulares de controle da FWER ou FDR são considerados apropriados para testes dependentes ou independentes. Por exemplo, no artigo de 1979 "Um procedimento simples de teste múltiplo...
Realizei uma avaliação baseada em computador de diferentes métodos de ajuste de um tipo específico de modelo usado nas ciências paleo. Eu tinha um conjunto de treinamento amplo e, por isso, aleatoriamente (amostragem aleatória estratificada), anotei um conjunto de testes. Ajustei métodos diferentes...
Gostaria de calcular a medida de semelhança entre dois conjuntos de pontos ordenados - os de Usuário em comparação com os de Professor : Os pontos são curvas no espaço 3D, mas eu estava pensando que o problema seria simplificado se os plotasse em duas dimensões, como na figura. Se os pontos se...
Eu li que controlar o FDR é menos rigoroso do que controlar o FWER, como na Wikipedia : Os procedimentos de controle de FDR exercem um controle menos rigoroso sobre a descoberta falsa em comparação com os procedimentos da taxa de erro familiar (FWER) (como a correção de Bonferroni). Isso aumenta...
Os testes de permutação (também chamados de teste de randomização, teste de re-randomização ou teste exato) são muito úteis e úteis quando a suposição de distribuição normal exigida por, por exemplo, t-testnão é atendida e quando a transformação dos valores pela classificação do teste...
Estou analisando um conjunto de dados usando um modelo de efeitos mistos com um efeito fixo (condição) e dois efeitos aleatórios (participante devido ao design do sujeito e ao par). O modelo foi gerado com o lme4pacote: exp.model<-lmer(outcome~condition+(1|participant)+(1|pair),data=exp). Em...
Recebi dados para analisar um estudo que analisava os efeitos de um tratamento sobre os níveis de ferro em quatro momentos diferentes (antes do tratamento, o dia em que o tratamento terminou, 4 semanas após o tratamento e 2-4 meses após o tratamento). Não há grupo de controle. Eles estão olhando...
Eu entendo o procedimento e o que ele controla. Então, qual é a fórmula para o valor de p ajustado no procedimento BH para comparações múltiplas? Só agora eu percebi que o BH original não produzia valores p ajustados, apenas ajustava a condição de (não) rejeição:
Para avaliar o desempenho de um novo algoritmo classificador, estou tentando comparar a precisão e a complexidade (grande O no treinamento e classificação). No Machine Learning: uma revisão , recebo uma lista completa de classificadores supervisionados, também uma tabela de precisão entre os...