Estou tentando automatizar a detecção de outlier em séries temporais e usei uma modificação da solução proposta por Rob Hyndman aqui . Digamos, eu avalio as visitas diárias a um site de vários países. Para alguns países onde as visitas diárias são de algumas centenas ou milhares, meu método parece...
Uma estatística típica de processamento de imagem é o uso dos recursos de textura Haralick , que são 14. Eu estou pensando sobre o 14º desses recursos: Dado um mapa de adjacência (que podemos simplesmente ver uma distribuição empírica de dois números inteiros i , j < 256 ), ele é definido como:...
Estou trabalhando com alguns dados do mundo real e os modelos de regressão estão produzindo alguns resultados contra-intuitivos. Normalmente confio nas estatísticas, mas, na realidade, algumas dessas coisas não podem ser verdadeiras. O principal problema que estou vendo é que um aumento em uma...
Os sistemas lineares de equações são difundidos nas estatísticas computacionais. Um sistema especial que encontrei (por exemplo, na análise fatorial) é o sistema A x = bAx=bAx=b onde Aqui é uma matriz diagonal com uma diagonal estritamente positiva, é uma matriz semi-definida positiva simétrica...
Quais técnicas / abordagens são úteis no teste de software estatístico? Estou particularmente interessado em programas que fazem estimativas paramétricas usando a máxima probabilidade. Comparar resultados com os de outros programas ou fontes publicadas nem sempre é possível, pois na maioria das...
No PCA, faz diferença se escolhermos os principais componentes da matriz de covariância inversa OU se deixarmos cair autovetores da matriz de covariância correspondentes a grandes valores próprios? Isso está relacionado à discussão neste post
Estou trabalhando no livro de ESL da Hastie e estou tendo dificuldades com a pergunta 2.3. A questão é a seguinte: Estamos considerando uma estimativa de vizinho mais próximo na origem, e a distância mediana da origem ao ponto de dados mais próximo é dada por essa equação. Não faço ideia por...
Me deparei com o seguinte problema de simulação: dado um conjunto de números reais conhecidos, uma distribuição em é definida por onde indica a parte positiva de . Embora eu possa pensar em um amostrador Metropolis-Hastings visando essa distribuição, pergunto-me se existe um amostrador direto...
Fiquei pensando: como os espaços de Hilbert e a análise funcional são úteis para o aprendizado de máquina? Eu pensei que o aprendizado de máquina fosse uma mistura de estatística, ciência da computação e otimização. Como a análise funcional se relaciona com
Quando podemos diferenciar a função de custo e encontrar parâmetros resolvendo equações obtidas por meio de diferenciação parcial com relação a cada parâmetro e descobrir onde a função de custo é mínima. Também acho que é possível encontrar vários locais onde as derivadas são zero, assim podemos...
Li os classificadores algébricos: uma abordagem genérica para validação cruzada rápida, treinamento on-line e paralelo e fiquei impressionado com o desempenho dos algoritmos derivados. No entanto, parece que além de Naive Bayes (e GBMs) não existem muitos algoritmos adaptados à estrutura. Existem...
Eu tenho a seguinte distribuição discreta, onde são constantes conhecidas:α,βα,β\alpha,\beta p(x;α,β)=Beta(α+1,β+x)Beta(α,β)for x=0,1,2,…p(x;α,β)=Beta(α+1,β+x)Beta(α,β)for x=0,1,2,… p(x;\alpha,\beta) = \frac{\text{Beta}(\alpha+1, \beta+x)}{\text{Beta}(\alpha,\beta)} \;\;\;\;\text{for } x =...
Então, digamos que você jogue uma moeda 10 vezes e chame esse 1 de "evento". Se você executar 1.000.000 desses "eventos", qual a proporção de eventos com cabeças entre 0,4 e 0,6? A probabilidade binomial sugere que isso seja cerca de 0,65, mas meu código do Mathematica está me dizendo cerca de...
Preciso implementar a detecção de anomalias em vários conjuntos de dados de séries temporais. Eu nunca fiz isso antes e estava esperando por alguns conselhos. Estou muito confortável com o python, então prefiro que a solução seja implementada (a maior parte do meu código é python para outras partes...
Percebo que existem 3 parâmetros de ajuste no modelo de árvores de reforço, ou seja, o número de árvores (número de iterações) parâmetro de encolhimento número de divisões (tamanho de cada árvore constituinte) Minha pergunta é: para cada um dos parâmetros de ajuste, como devo encontrar seu...
Estou tentando entender como usar o teorema de Bayes para calcular um posterior, mas estou ficando preso à abordagem computacional, por exemplo, no seguinte caso, não está claro para mim como tirar o produto do anterior e da probabilidade e calcular o posterior: Neste exemplo, estou interessado em...
O espírito dessa pergunta vem do "Monte Carlo comum", também conhecido como "bom e velho Monte Carlo" Suponha que eu tenha uma variável aleatória , comμ : = E [ X ]XXX μ:=E[X]σ2:=Var[X]μ:=E[X]σ2:=Var[X]\mu := E[X]\\ \sigma^2:=Var[X] Ambos são valores desconhecidos, porque a função de...
Eu tenho uma pergunta sobre clusters que estou pensando em tratar com uma abordagem de mistura não paramétrica (eu acho). Estou trabalhando na explicação do comportamento humano. Cada linha do meu banco de dados contém: o ID de alguém alguns parâmetros do ambiente X (exemplo: temperatura,...
Antecedentes do problema: Como parte da minha pesquisa, escrevi dois algoritmos que podem selecionar um conjunto de recursos de um conjunto de dados (dados de expressão gênica de pacientes com câncer). Esses recursos são então testados para ver quão bem eles podem classificar uma amostra invisível...
Meu entendimento da abordagem de bootstrap é baseado na estrutura de Wasserman (quase literalmente): Seja uma estatística ( é a amostra iid retirada da distribuição ). Suponha que queremos estimar - a variação de dada .Tn= g(X1, . . . ,Xn)Tn=g(X1,...,Xn)T_n = g(X_1, ...,...