Entendo como um Modelo Markov Oculto é usado em sequências genômicas, como encontrar um gene. Mas não entendo como chegar a um determinado modelo de Markov. Quero dizer, quantos estados o modelo deve ter? Quantas transições possíveis? O modelo deve ter um loop? Como eles saberiam que seu modelo é...
Possui corpus de mais de um milhão de documentos Para um determinado documento, deseja encontrar documentos semelhantes usando cosseno como no modelo de espaço vetorial d1⋅d2/(||d1||||d2||)d1⋅d2/(||d1||||d2||)d_1 \cdot d_2 / ( ||d_1|| ||d_2|| ) Todos os tf foram normalizados usando frequência...
Acabei de ler o artigo de Geoff Hinton sobre a transformação de autoencodificadores Hinton, Krizhevsky e Wang: transformando codificadores automáticos . Em Redes Neurais Artificiais e Machine Learning, 2011. e gostaria muito de brincar com algo assim. Mas, depois de ler, não consegui obter...
Meus dados incluem respostas de pesquisa binárias (numéricas) e nominais / categóricas. Todas as respostas são discretas e no nível individual. Os dados têm forma (n = 7219, p = 105). Algumas coisas: Estou tentando identificar uma técnica de agrupamento com uma medida de similaridade que...
Estou procurando projetar um sistema que, com um parágrafo de texto, possa categorizá-lo e identificar o contexto: É treinado com parágrafos de texto gerados pelo usuário (como comentários / perguntas / respostas) Cada item do conjunto de treinamento será marcado com. Assim, por exemplo...
É muito comum recomendar que tenhamos dados do produto do usuário que tenham uma etiqueta como, por exemplo, "clique". Para aprender o modelo, preciso de dados de clique e sem clique. A abordagem mais simples de gerar é obter pares usuário-produto que não são encontrados nos dados de cliques. No...
Digamos que estamos prevendo as vendas de uma loja e meus dados de treinamento têm dois conjuntos de recursos: Um sobre as vendas da loja com as datas (o campo "Loja" não é exclusivo) Um sobre os tipos de loja (o campo "Loja" é exclusivo aqui) Portanto, a matriz seria algo como...
Foi-me atribuída esta tarefa para analisar os logs do servidor de nosso aplicativo, que contém logs de exceção, logs de banco de dados, etc. Sou novo no aprendizado de máquina, usamos o Spark com pesquisa elástica e o Sparks MLlib (ou PredictionIO). O resultado seria poder prever com base nos logs...
Fechado . Esta questão precisa ser mais focada . No momento, não está aceitando respostas. Deseja melhorar esta pergunta? Atualize a pergunta para que ela se concentre apenas em um problema editando esta postagem . Fechado há 4 anos . Estou
Eu tenho um quadro de dados pandas (X11) como este: Na verdade, eu tenho 99 colunas até dx99 dx1 dx2 dx3 dx4 0 25041 40391 5856 0 1 25041 40391 25081 5856 2 25041 40391 42822 0 3 25061 40391 0 0 4 25041 40391 0 5856 5 40391 25002 5856 3569 Eu quero criar colunas adicionais para valores de...
Eu aprendo melhor através da experimentação e exemplo. Estou aprendendo sobre redes neurais e tenho (o que acho) um bom entendimento de classificação e regressão e também aprendizado supervisionado e não supervisionado, mas me deparei com algo que não consigo descobrir; Se eu quisesse treinar uma...
Eu sou um novato no XGBoost, então perdoe minha ignorância. Aqui está o código python: import pandas as pd import xgboost as xgb df = pd.DataFrame({'x':[1,2,3], 'y':[10,20,30]}) X_train = df.drop('y',axis=1) Y_train = df['y'] T_train_xgb = xgb.DMatrix(X_train, Y_train) params = {"objective":...
Costumo usar Nose, Tox ou Unittest ao testar meu código python, especialmente quando ele precisa ser integrado a outros módulos ou outras partes do código. No entanto, agora que me vi usando R mais que python para modelagem e desenvolvimento de ML. Percebi que realmente não testei meu código R (e,...
Eu tenho um conjunto de dados contendo dados sobre temperatura, precipitação e produtividade de soja de uma fazenda por 10 anos (2005 - 2014). Gostaria de prever os rendimentos para 2015 com base nesses dados. Observe que o conjunto de dados possui valores DIARIOS para temperatura e precipitação,...
Eu tenho tentado entender os diferentes algoritmos de clustering k-means, principalmente implementados no statspacote da Rlinguagem. Entendo o algoritmo de Lloyd e o algoritmo on-line de MacQueen. A maneira como eu os entendo é a seguinte: Algoritmo de Lloyd: Inicialmente, são escolhidas...
Há uma pergunta semelhante aqui no CrossValidated, e eu li as respostas. Minha pergunta é um pouco diferente. Não quero apenas visualizar meus dados e, de fato, o que quero visualizar não é fácil de visualizar com nenhum dos pacotes. Eu tenho dois conjuntos de pontos ( coordenadas ) no meu...
Hoje, em uma palestra, foi afirmado que a direção das arestas em uma rede Bayes realmente não importa. Eles não precisam representar causalidade. É óbvio que você não pode mudar nenhuma borda em uma rede Bayes. Por exemplo, seja com V = { v 1 , v 2 , v 3 } e E = { ( v 1 , v 2 ) , ( v 1 , v 3 ) , (...
Estou procurando informações sobre como deve ser organizado um projeto de aprendizado de máquina do Python. Para projetos usuais do Python, existe o Cookiecutter e para o R ProjectTemplate . Esta é a minha estrutura de pastas atual, mas estou misturando Jupyter Notebooks com o código Python real e...
Eu tenho uma tabela SQL grande que é essencialmente um log. Os dados são bastante complexos e estou tentando encontrar uma maneira de identificar anomalias sem que eu entenda todos os dados. Encontrei muitas ferramentas para a detecção de anomalias, mas a maioria delas exige um tipo de...
O pacote de intercalação de R funciona com 180 modelos. O autor adverte que parte do pacote pode ser intratávelmente lenta ou menos precisa do que os modelos de primeira escolha. O autor não está errado sobre isso. Tentei treinar os modelos Boruta e evtree e tive que desistir depois que eles...