Estou analisando dados de um arquivo Excel que tem espaço em branco extra em alguns títulos de coluna. Quando eu verifico as colunas do dataframe resultante, com df.columns, vejo: Index(['Year', 'Month ', 'Value']) ^ # Note the unwanted trailing space on 'Month ' Consequentemente, não posso...
A documentação diz: http://pandas.pydata.org/pandas-docs/dev/basics.html "Valores contínuos podem ser discretizados usando as funções cut (bins baseados em valores) e qcut (bins baseados em quantis de amostra)" Parece muito abstrato para mim ... posso ver as diferenças no exemplo abaixo, mas o...
Tenho dois dataframes de pandas e gostaria de exibi-los no bloco de notas Jupyter. Fazendo algo como: display(df1) display(df2) Mostra um abaixo do outro: Eu gostaria de ter um segundo dataframe à direita do primeiro. Há uma pergunta semelhante , mas parece que uma pessoa está satisfeita...
Questões Como faço para usar pd.concat? Qual é o levelsargumento para? Qual é o keysargumento para? Existem vários exemplos para ajudar a explicar como usar todos os argumentos? A concatfunção do Pandas é o canivete suíço dos utilitários em fusão. A variedade de situações em que é útil é...
Vou converter um Django QuerySet em um pandas da DataFrameseguinte maneira: qs = SomeModel.objects.select_related().filter(date__year=2012) q = qs.values('date', 'OtherField') df = pd.DataFrame.from_records(q) Funciona, mas existe uma maneira mais eficiente?
Tenho dataframe python pandas, em que uma coluna contém o nome do mês. Como posso fazer uma classificação personalizada usando um dicionário, por exemplo: custom_dict = {'March':0, 'April':1, 'Dec':3}
É possível adicionar alguma meta-informação / metadados a um DataFrame do pandas? Por exemplo, o nome do instrumento usado para medir os dados, o instrumento responsável, etc. Uma solução alternativa seria criar uma coluna com essas informações, mas parece um desperdício armazenar uma única...
Desejo obter linhas de grade horizontais e verticais em meu gráfico, mas apenas as linhas de grade horizontais aparecem por padrão. Estou usando uma pandas.DataFrameconsulta sql em python para gerar um gráfico de linha com datas no eixo x. Não sei por que eles não aparecem nas datas e tentei...
Estou criando um mapa de calor a partir de uma pivot_table pandas conforme abaixo: table2 = pd.pivot_table(df,values='control',columns='Year',index='Region',aggfunc=np.sum) sns.heatmap(table2,annot=True,cmap='Blues') Ele cria um mapa de calor conforme mostrado abaixo. Você pode ver que os...
Estou tentando transformar uma célula do pandas contendo uma lista em linhas para cada um desses valores. Então, pegue isto: Se eu gostaria de descompactar e empilhar os valores na nearest_neighborscoluna de forma que cada valor fosse uma linha dentro de cada opponentíndice, qual seria a...
Eu tenho um arquivo de temperatura com registros de temperatura de muitos anos, em um formato como
Digamos que eu tenha um log de atividade do usuário e desejo gerar um relatório de duração total e o número de usuários únicos por dia. import numpy as np import pandas as pd df = pd.DataFrame({'date': ['2013-04-01','2013-04-01','2013-04-01','2013-04-02', '2013-04-02'], 'user_id': ['0001',...
Eu tenho um quadro de dados de vários índices com colunas 'A' e 'B'. Existe uma maneira de selecionar linhas filtrando em uma coluna do multi-índice sem redefinir o índice para um índice de coluna única? Por exemplo. # has multi-index (A,B) df #can I do this? I know this doesn't work...
Ambiente: Python 2.7, matplotlib 1.3, IPython notebook 1.1, linux, chrome. O código está em uma única célula de entrada, usando--pylab=inline Quero usar notebook IPython e pandas para consumir um stream e atualizar dinamicamente um gráfico a cada 5 segundos. Quando eu apenas uso a instrução...
Tenho notado um desempenho muito fraco ao usar iterrows de pandas. Isso é algo experimentado por outras pessoas? É específico para iterrows e essa função deve ser evitada para dados de um determinado tamanho (estou trabalhando com 2-3 milhões de linhas)? Essa discussão no GitHub me levou a...
Fiquei preso em algo que parece que deveria ser relativamente fácil. O código que trago abaixo é um exemplo baseado em um projeto maior no qual estou trabalhando. Não vi motivo para postar todos os detalhes, então aceite as estruturas de dados que trago como estão. Basicamente, estou criando um...
Estou explorando a mudança para python e pandas como um usuário SAS de longa data. No entanto, ao executar alguns testes hoje, fiquei surpreso que python ficou sem memória ao tentar pandas.read_csv()um arquivo csv de 128 MB. Ele tinha cerca de 200.000 linhas e 200 colunas de dados principalmente...
Como posso exportar uma lista de DataFrames para uma planilha do Excel? Os documentos para o to_excelestado: Observações Se passar um objeto ExcelWriter existente, a planilha será adicionada à pasta de trabalho existente. Isso pode ser usado para salvar diferentes DataFrames em uma pasta...
Quando há um DataFrame como o seguinte: import pandas as pd df = pd.DataFrame([1, 1, 1, 1, 1], index=[100, 29, 234, 1, 150], columns=['A']) Como posso classificar esse dataframe por índice com cada combinação de índice e valor de coluna intacta?
Estou fazendo alguma prática de código e aplicando mesclagem de quadros de dados enquanto faço isso, recebendo um aviso do usuário /usr/lib64/python2.7/site-packages/pandas/core/frame.py:6201: FutureWarning: classificação porque o eixo de não concatenação não está alinhado. Uma versão futura...