Não encontrei uma definição de função de perda no wiki no contexto de aprendizado de máquina. este é menos formal, porém, é claro o suficiente. Na sua essência, uma função de perda é incrivelmente simples: é um método de avaliar quão bem seu algoritmo modela seu conjunto de dados. Se suas...
Nos comentários abaixo de um post meu , Glen_b e eu estávamos discutindo como distribuições discretas necessariamente têm média e variação dependentes. Para uma distribuição normal, faz sentido. Se eu disser a você , você não tem idéia do que é, e se eu disser a , você não tem idéia do que é ....
Estou implementando validação cruzada e calculando métricas de erro como RMSE, , MAE, MSE, etc.R2R2R^2 RMSE e MAE podem ter o mesmo
Estou tentando lidar com uma análise de tempo para evento usando resultados binários repetidos. Suponha que o tempo do evento seja medido em dias, mas, no momento, discretizamos o tempo em semanas. Quero aproximar um estimador de Kaplan-Meier (mas permitir covariáveis) usando resultados binários...
Eu li muitos artigos que testam o k-means com muitos conjuntos de dados que normalmente não são distribuídos como o conjunto de dados da íris e obtêm bons resultados. Como entendo que o k-means é para dados normalmente distribuídos, por que o k-means está sendo usado para dados não distribuídos...
Estou lendo e esta é a definição que obtive do livro de DeGroot: Isso significa que os parâmetros são os mesmos? Por exemplo, suponha que X seja lognormalmente distribuído e Y seja normalmente distribuído onde Y = log (X). Isso está dizendo que X e Y têm a mesma média e DPs, embora sejam...
Eu quero comparar o desvio absoluto médio com o desvio padrão, em geral, com esta definição: MAD=1n−1∑1n|xi−μ|,SD=∑n1(xi−μ)2n−1−−−−−−−−−−−√MAD=1n−1∑1n|xi−μ|,SD=∑1n(xi−μ)2n−1MAD = \frac{1}{n-1}\sum_1^n|x_i - \mu|, \qquad SD = \sqrt{\frac{\sum_1^n(x_i-\mu)^2}{n-1}} onde .μ=1n∑n1xiμ=1n∑1nxi\mu...
Este post diz Um PDF é usado para especificar a probabilidade da variável aleatória cair dentro de um determinado intervalo de valores, em vez de assumir qualquer valor. É verdade? este é o PDF da distribuição normal padrão. φ(x)=12π−−√e−x2/2φ(x)=12πe−x2/2\varphi(x) = \frac{1}{\sqrt{2\pi}}...
De acordo com a Lei da variância total, Var(X)=E(Var(X∣Y))+Var(E(X∣Y))Var(X)=E(Var(X∣Y))+Var(E(X∣Y))\operatorname{Var}(X)=\operatorname{E}(\operatorname{Var}(X\mid Y)) + \operatorname{Var}(\operatorname{E}(X\mid Y)) Ao tentar provar isso,
Por que a média do valor mais alto de 100 extrai de uma distribuição normal diferente do percentil 98% da distribuição normal? Parece que, por definição, eles devem ser os mesmos. Mas... Código em R: NSIM <- 10000 x <- rep(NA,NSIM) for (i in 1:NSIM) { x[i] <-
Percebo que a análise estatística de dados financeiros é um tópico imenso, mas é exatamente por isso que é necessário fazer minha pergunta enquanto tento entrar no mundo da análise financeira. Como neste momento não sei quase nada sobre o assunto, os resultados das minhas pesquisas no Google são...
O que são tabelas dinâmicas e como elas podem ser úteis na análise de
Estou coletando dados textuais em torno de press releases, postagens em blogs, resenhas etc. dos produtos e desempenho de determinadas empresas. Especificamente, estou olhando para ver se há correlações entre certos tipos e / ou fontes desse conteúdo "textual" com avaliações de mercado dos...
Minha pergunta é sobre validação cruzada quando há muito mais variáveis que observações. Para fixar idéias, proponho restringir a estrutura de classificação em uma dimensão muito alta (mais recursos do que observação). Problema: Suponha que, para cada variável , você tenha uma medida de...
Às vezes, quero fazer um teste exato examinando todas as combinações possíveis dos dados para criar uma distribuição empírica com a qual posso testar minhas diferenças observadas entre as médias. Para encontrar as combinações possíveis, eu normalmente usaria a função combn. A função escolher pode...
Na (grande parte) da literatura química analítica, o teste padrão para detectar valores extremos em dados univariados (por exemplo, uma sequência de medições de algum parâmetro) é o teste Q de Dixon. Invariavelmente, todos os procedimentos listados nos livros didáticos calculam uma quantidade dos...
Me deparei com um problema interessante hoje. Você recebe uma moeda e x dinheiro, você dobra o dinheiro se tiver cara e perder a metade se coroa em qualquer sorteio. Qual é o valor esperado do seu dinheiro em n tentativas Qual é a probabilidade de obter mais do que o valor esperado em (1) Foi...
Imagine isso: Você tem uma amostra de 1000 equipes, cada uma com 10 membros. Você mediu o funcionamento da equipe perguntando a cada membro da equipe quão bem eles acham que sua equipe está funcionando usando uma escala numérica confiável com vários itens. Você deseja descrever até que ponto a...
Bem, sou engenheiro de dia. Embora a maior parte do meu trabalho gire em torno da modelagem, geralmente fazemos coisas bem básicas. Um modelo "Avançado" seria uma simulação de Monte Carlo validada usando testes R2. Atualmente, na minha área, existem muitas pesquisas usando análise logística e...
Uma das questões mais importantes no uso da análise fatorial é sua interpretação. A análise fatorial geralmente usa rotação fatorial para aprimorar sua interpretação. Após uma rotação satisfatória, a matriz de carga fatorada rotada L ' terá a mesma capacidade de representar a matriz de correlação e...