O processamento de linguagem natural (PNL) é um subcampo da inteligência artificial que envolve a transformação ou extração de informações úteis de dados de linguagem natural. Os métodos incluem aprendizado de máquina e abordagens baseadas em regras.
Estou desenvolvendo um site interno para uma ferramenta de gerenciamento de portfólio. Há muitos dados de texto, nomes de empresas etc. Fiquei realmente impressionado com a capacidade de alguns mecanismos de pesquisa responderem rapidamente às consultas com "Você quis dizer: xxxx". Eu preciso ser...
Estou pensando em trabalhar em um projeto de PNL, em qualquer linguagem de programação (embora o Python seja a minha preferência). Quero pegar dois documentos e determinar como eles são
A PNL de Stanford, demonstrada aqui , fornece uma saída como esta: Colorless/JJ green/JJ ideas/NNS sleep/VBP furiously/RB ./. O que significam as tags Part of Speech? Não consigo encontrar uma lista oficial. É o próprio sistema de Stanford ou eles estão usando tags universais? (O que é JJ, por...
Preciso encontrar uma maneira bastante eficiente de detectar sílabas em uma palavra. Por exemplo, Invisível -> in-vi-sib-le Existem algumas regras de silabificação que podem ser usadas: V CV VC CVC CCV CCCV CVCC * onde V é uma vogal e C é uma consoante. Por exemplo, Pronúncia (5...
Quando uso cada um? Além disso ... a lematização do NLTK depende de partes do discurso? Não seria mais preciso se
No cliente de email do iOS, quando um email contém uma data, hora ou local, o texto se torna um hiperlink e é possível criar um compromisso ou visualizar um mapa simplesmente tocando no link. Não funciona apenas para e-mails em inglês, mas também em outros idiomas. Eu amo esse recurso e gostaria de...
Estou começando a usar o NLTK e não entendo como obter uma lista de palavras do texto. Se eu usar nltk.word_tokenize(), recebo uma lista de palavras e pontuação. Eu preciso apenas das palavras. Como posso me livrar da pontuação? Também word_tokenizenão funciona com várias frases: pontos são...
Qual é a diferença entre um analisador de constituency e um analisador de dependência ? Quais são os diferentes usos dos
Fechado . Esta pergunta é baseada em opinião . Atualmente não está aceitando respostas. Quer melhorar esta questão? Atualize a pergunta para que possa ser respondida com fatos e citações editando este post . Fechado há 6 anos . Melhore esta questão...
Eu tentei PorterStemmer e Snowball, mas ambos não funcionam em todas as palavras, perdendo algumas muito comuns. Minhas palavras de teste são: " gatos administrando comunidades de cactos cactos cactos ", e ambas acertam menos da metade. Veja também: Algoritmo de derivação que produz palavras...
Estou trabalhando em um problema de análise de sentimento, os dados se parecem com este: label instances 5 1190 4 838 3 239 1 204 2 127 Portanto, meus dados estão desequilibrados, visto que 1190 instancesestão marcados com 5. Para a classificação, estou usando o SVC do scikit . O problema é...
Eu tenho um aplicativo .NET onde, dado um substantivo, quero prefixar corretamente essa palavra com "a" ou "an". Como eu faria isso? Antes de pensar, a resposta é simplesmente verificar se a primeira letra é uma vogal, considere frases como: um erro honesto um carro
Tenho alguns problemas para criar um novo modelo para Stanford Parser. Também baixei a última versão de Stanford: http://nlp.stanford.edu/software/lex-parser.shtml E aqui, Genia Corpus em 2 formatos, xml e ptb (Penn Treebank). Standford Parser pode treinar com arquivos ptd; aí baixei Genia...
Estou lendo o artigo abaixo e tenho alguns problemas em entender o conceito de amostragem negativa. http://arxiv.org/pdf/1402.3722v1.pdf Alguém pode ajudar por favor?
É possível usar o Stanford Parser no NLTK? (Não estou falando sobre Stanford
Como está atualmente, esta pergunta não se encaixa em nosso formato de perguntas e respostas. Esperamos que as respostas sejam apoiadas por fatos, referências ou experiência, mas esta pergunta provavelmente irá solicitar debate, argumentos, pesquisas ou discussão extensa. Se...
Fechadas. Esta pergunta não atende às diretrizes do Stack Overflow . Atualmente não está aceitando respostas. Quer melhorar esta questão? Atualize a pergunta para que esteja no tópico do Stack Overflow. Fechado há 5 anos . Melhore esta questão...
Achei que muitas vezes a resposta ao meu título é ir e ler a documentação, mas eu li o livro NLTK, mas não dá a resposta. Sou meio novo em Python. Tenho .txtmuitos arquivos e quero poder usar as funções de corpus que o NLTK fornece para o corpus nltk_data. Eu tentei, PlaintextCorpusReadermas...
Há um problema que estamos tentando resolver, onde queremos fazer uma pesquisa semântica em nosso conjunto de dados, ou seja, temos dados específicos do domínio (exemplo: sentenças falando sobre automóveis) Nossos dados são apenas um monte de frases e o que queremos é dar uma frase e recuperar as...