As classes previstas da regressão logística (binária) são determinadas usando um limite nas probabilidades de associação à classe geradas pelo modelo. Pelo que entendi, normalmente 0,5 é usado por padrão. Mas variar o limite alterará as classificações previstas. Isso significa que o limiar é um...
Estou trabalhando em um pequeno corpus (200M) de texto, que quero explorar com algumas análises de cluster. Quais livros ou artigos sobre esse assunto você recomendaria?
Contexto: Sou um programador com alguma experiência (meio esquecida) em estatística de cursos da uni. Recentemente me deparei com http://akinator.com e passei algum tempo tentando fazê-lo falhar. E quem não era? :) Eu decidi descobrir como isso poderia funcionar. Depois de pesquisar no Google e...
Quero usar o BIC para a seleção do modelo HMM: BIC = -2*logLike + num_of_params * log(num_of_data) Então, como conto o número de parâmetros no modelo HMM. Considere um HMM simples de 2 estados, onde temos os seguintes dados: data = [1 2 1 1 2 2 2 1 2 3 3 2 3 2 1 2 2 3 4 5 5 3 3 2 6 6 5 6 4 3 4...
Estou muito interessado no potencial da análise estatística para simulação / previsão / estimativa de funções, etc. No entanto, eu não sei muito sobre isso e meu conhecimento matemático ainda é bastante limitado - eu sou um estudante de graduação em engenharia de software. Estou procurando um...
Estou tentando criar um SVM a partir de dados de treinamento em que um grupo é representado mais que o outro. No entanto, os grupos serão igualmente representados nos eventuais dados do teste. Portanto, eu gostaria de usar o class.weightsparâmetro da e1071interface do pacote R libsvmpara equilibrar...
Atualmente trabalhando no Octave, mas devido à documentação insuficiente, o progresso é muito lento. Qual idioma é fácil de aprender e usar, e bem documentado para resolver problemas de aprendizado de máquina? Estou procurando um protótipo em um pequeno conjunto de dados (milhares de exemplos),...
Eu tenho 2 questões gerais / mais teóricas. 1) Estou curioso para saber como os SVMs lidam com interações variáveis ao criar modelos preditivos. Por exemplo, se eu tenho dois recursos f1 e f2 e o destino depende de f1, f2 e digamos f1 * f2 (ou alguma função h (f1, f2)), o SVM se encaixa (não...
Suponha que eu esteja construindo um modelo preditivo no qual estou tentando prever vários eventos (por exemplo, o lançamento de um dado e o lançamento de uma moeda). A maioria dos algoritmos com os quais estou familiarizado trabalha apenas com um destino, por isso estou me perguntando se existe...
Tenho algumas perguntas sobre as anotações usadas na Seção 9.2 Falta de superioridade inerente a qualquer classificador na Classificação de padrões de Duda, Hart e Stork . Primeiro, deixe-me citar um texto relevante do livro: Para simplificar considerar um problema de duas categorias, onde o...
Nota: esta pergunta é um repost, pois minha pergunta anterior teve que ser excluída por razões legais. Ao comparar o PROC MIXED do SAS com a função lmedo nlmepacote no R, deparei-me com algumas diferenças bastante confusas. Mais especificamente, os graus de liberdade nos diferentes testes...
Qual é / são as diferenças entre estes modelos de representação de texto: Conjunto de palavras e modelo de espaço
Ultimamente, tenho visto muitos trabalhos sobre representações esparsas, e a maioria deles usa a norma ℓpℓp\ell_p e faz alguma minimização. Minha pergunta é, qual é o ℓpℓp\ell_p norma, e o ℓp,qℓp,q\ell_{p, q} norma mista? E como eles são relevantes para a
Executei um SVM em um determinado conjunto de dados e fiz a seguinte observação: Se eu alterar o número de recursos para a construção do classificador, o número de vetores de suporte resultantes também será alterado. Eu gostaria de saber como explicar esse tipo de
Então, eu tenho uma matriz de cerca de 60 x 1000. Estou vendo como 60 objetos com 1000 recursos; os 60 objetos são agrupados em 3 classes (a, b, c). 20 objetos em cada classe, e sabemos a verdadeira classificação. Gostaria de fazer um aprendizado supervisionado neste conjunto de 60 exemplos de...
Eu tenho dados com um número mínimo de recursos que não mudam e alguns recursos adicionais que podem mudar e ter um grande impacto no resultado. Meu conjunto de dados fica assim: Os recursos são A, B, C (sempre presente) e D, E, F, G, H (às vezes presentes) A = 10, B = 10, C = 10 outcome = 10 A =...
Eu sou novo no kernels e encontrei um problema ao tentar kernelizar o kNN. Preliminares Estou usando um kernel polinomial: K(x,y)=(1+⟨x,y⟩)dK(x,y)=(1+⟨x,y⟩)dK(\mathbf{x},\mathbf{y}) = (1 + \langle \mathbf{x},\mathbf{y} \rangle)^d O kNN euclidiano típico usa a seguinte métrica de...
Eu sou novo no aprendizado de máquina. Eu apliquei regressão logística e floresta aleatória em um mesmo conjunto de dados. Então, recebo importância variável (coeficiente absoluto para regressão logística e importância variável para floresta aleatória). Estou pensando em combinar os dois para obter...
Eu estava usando a kmeansinstrução de R para executar o algoritmo k-means no conjunto de dados de íris de Anderson. Eu tenho uma pergunta sobre alguns parâmetros que obtive. Os resultados são: Cluster means: Sepal.Length Sepal.Width Petal.Length Petal.Width 1 5.006000 3.428000 1.462000...
Estou tentando entender como usar o aprendizado de máquina para prever séries temporais financeiras 1 ou mais etapas no futuro. Tenho séries temporais financeiras com alguns dados descritivos e gostaria de formar um modelo e depois usá-lo para prever n passos adiante. O que tenho feito até agora...