No momento, estou tentando abrir um arquivo com pandas e python para fins de aprendizado de máquina. Seria ideal para todos eles em um DataFrame. Agora, o arquivo tem 18 GB de largura e minha RAM tem 32 GB, mas continuo recebendo erros de memória. De sua experiência é possível? Se você não conhece...
Desenvolvi um modelo de aprendizado de máquina com Python (Anaconda + Flask) na minha estação de trabalho e tudo corre bem. Mais tarde, tentei enviar esse programa para outra máquina, onde, é claro, tentei configurar o mesmo ambiente, mas o programa não foi executado. Copiei o programa para outras...
Eu tenho um quadro de dados pandas (X11) como este: Na verdade, eu tenho 99 colunas até dx99 dx1 dx2 dx3 dx4 0 25041 40391 5856 0 1 25041 40391 25081 5856 2 25041 40391 42822 0 3 25061 40391 0 0 4 25041 40391 0 5856 5 40391 25002 5856 3569 Eu quero criar colunas adicionais para valores de...
Estou usando o Spark (1.5.1) de um notebook IPython em um macbook pro. Após a instalação de ignição e Anaconda, eu começo IPython de um terminal executando: IPYTHON_OPTS="notebook" pyspark. Isso abre uma página da Web listando todos os meus notebooks IPython. Eu posso selecionar um deles, abrindo-o...