Estou tentando filtrar um dataframe PySpark que tem Nonecomo valor de linha: df.select('dt_mvmt').distinct().collect() [Row(dt_mvmt=u'2016-03-27'), Row(dt_mvmt=u'2016-03-28'), Row(dt_mvmt=u'2016-03-29'), Row(dt_mvmt=None), Row(dt_mvmt=u'2016-03-30'), Row(dt_mvmt=u'2016-03-31')] e posso...
Eu tenho um arquivo de texto salvo no S3 que é uma tabela delimitada por tabulação. Quero carregá-lo no pandas, mas não consigo salvá-lo primeiro porque estou executando em um servidor heroku. Aqui está o que tenho até agora. import io import boto3 import os import pandas as...
Em vários projetos de código aberto, vi pessoas fazerem os.path.abspath(os.path.realpath(__file__))para obter o caminho absoluto para o arquivo atual. No entanto, acho isso os.path.abspath(__file__)e os.path.realpath(__file__)produzo o mesmo resultado.
Eu tenho um problema que o Jupyter não pode ver a variável env no arquivo bashrc, há uma maneira de carregar essas variáveis no jupyter ou adicionar a variável custome a ele?
Pelo que recolhi até agora, existem várias maneiras diferentes de despejar um gráfico do TensorFlow em um arquivo e, em seguida, carregá-lo em outro programa, mas não consegui encontrar exemplos / informações claras sobre como eles funcionam. O que eu já sei é o seguinte: Salve as variáveis do...
Estou tentando compartilhar dois eixos de subtramas, mas preciso compartilhar o eixo x depois que a figura foi criada. Então, por exemplo, eu crio esta figura: import numpy as np import matplotlib.pyplot as plt t= np.arange(1000)/100. x = np.sin(2*np.pi*10*t) y =
Quero ver uma imagem no caderno Jupyter. É um arquivo .png de 9,9 MB. from IPython.display import Image Image(filename='path_to_image/image.png') Recebo o erro abaixo: IOPub data rate exceeded. The notebook server will temporarily stop sending output to the client in order to avoid crashing...
No boto eu costumava especificar minhas credenciais ao me conectar ao S3 da seguinte maneira: import boto from boto.s3.connection import Key, S3Connection S3 = S3Connection( settings.AWS_SERVER_PUBLIC_KEY, settings.AWS_SERVER_SECRET_KEY ) Eu poderia então usar o S3 para realizar minhas...
Eu tenho um problema quando tento usar o pip de alguma forma. Estou usando o Ubuntu 16.04.4 Devo dizer que já usei e nunca tive problema, mas a partir de hoje quando uso qualquer comando sempre recebo o mesmo erro (como exemplo usando pip --upgrade). Traceback (most recent call last): File...
Recebo um dicionário como entrada e gostaria de retornar um dicionário cujas chaves serão os valores de entrada e cujo valor serão as chaves de entrada correspondentes. Os valores são únicos. Por exemplo, digamos que minha entrada seja: a = dict() a['one']=1 a['two']=2 Eu gostaria que minha...
Fechadas. Esta pergunta não atende às diretrizes do Stack Overflow . Atualmente não está aceitando respostas. Quer melhorar esta questão? Atualize a pergunta para que esteja no tópico do Stack Overflow. Fechado há 5 anos . Melhore esta questão...
Python classifica por valor de byte por padrão, o que significa que é vem depois de z e outras coisas igualmente engraçadas. Qual é a melhor maneira de classificar alfabeticamente em Python? Existe uma biblioteca para isso? Não consegui encontrar nada. De preferência, a classificação deve ter...
Este código abre o url e anexa o /namesno final e abre a página e imprime a string para test1.csv: import urllib2 import re import csv url = ("http://www.example.com") bios = [u'/name1', u'/name2', u'/name3'] csvwriter = csv.writer(open("/test1.csv", "a")) for l in bios: OpenThisLink = url + l...
Atualmente, tenho uma matriz de matriz nx3. Eu quero plotar as três colunas como três eixos. Como eu posso fazer isso? Pesquisei no Google e algumas pessoas sugeriram o uso do Matlab , mas estou realmente tendo dificuldade em entender. Eu também preciso que seja um gráfico de dispersão. Alguém...
Estou tentando fazer alguma herança de classe em Python. Eu gostaria que cada classe e classe herdada tivessem boas docstrings. Então eu acho que para a classe herdada, eu gostaria que: herdar a docstring da classe base talvez anexe documentação extra relevante ao docstring Existe alguma...
Obviamente Python é mais amigável, uma busca rápida no google mostra muitos resultados que dizem que, como Python é compilado por byte é geralmente mais rápido. Eu até descobri isso que afirma que você pode ver uma melhoria de mais de 2.000% nas operações baseadas em dicionário. Qual é a sua...
Em outra pergunta , a resposta aceita sugeria substituir uma instrução if (muito barata) no código Python por um bloco try / except para melhorar o desempenho. Deixando de lado as questões de estilo de codificação, e supondo que a exceção nunca seja disparada, quanta diferença faz (em termos de...
Existe uma maneira em python de transformar um try / except em uma única linha? algo como... b = 'some variable' a = c | b #try statement goes here Onde bé uma variável declarada e cnão é ... então clançaria um erro e ase tornaria b...
client = paramiko.SSHClient() stdin, stdout, stderr = client.exec_command(command) Existe alguma maneira de obter o código de retorno do comando? É difícil analisar todos os stdout / stderr e saber se o comando foi concluído com êxito ou
De forma interativa, como em uma sessão Ipython ou em um script, como você pode determinar qual back-end está sendo usado pelo