Estou baixando wgetusando um link lento. Às vezes, a barra de progresso fica assim: 15% [+++++++++++++++===> ] 10,582,848 --.-K/s in 82s Qual é o significado de
Atualmente, tenho um script de shell em execução em um servidor Linux que está usando o wget in oder para baixar uma página da Web remota. Isso, por sua vez, é executado por uma tarefa agendada para ser executada em determinados horários. Alguém pode confirmar que a adição da -qopção não apenas...
Fiquei me perguntando se wgetera possível fazer o download de um RPM e depois canalizá-lo sudo rpm -ipara instalá-lo, em uma única linha? Eu percebo que eu poderia simplesmente correr: wget -c <URL> sudo rpm -i <PACKAGE-NAME>.rpm para instalar o pacote, mas eu queria saber se seria...
Eu me deparei com este site que fala sobre isso. Então, ao baixar o site inteiro, obtendo a versão compactada, qual é o comando certo? Eu testei este comando, mas não sei se o wget realmente está recebendo a versão compactada em gzip: wget --header="accept-encoding: gzip" -m -Dlinux.about.com -r...
Se eu tentar o wget em uma página da web, estou recebendo a página como html. É possível recuperar apenas o texto de um arquivo sem o html associado? (Isso é necessário para mim, pois algumas das páginas HTML contêm o programa c que está sendo baixado com tags html. Tenho que abri-lo no navegador e...
Como usar o wget para baixar arquivos do Onedrive? (e arquivos em lote e pastas inteiras, se
Estou interessado em um único comando que baixaria o conteúdo de um torrent (e talvez participe como uma semente após o download, até que eu o pare). Geralmente, existe um daemon cliente-torrent que deve ser iniciado separadamente antecipadamente e um cliente para controlar (como...
Estou tentando baixar arquivos deste site . O URL é: http://www.ncbi.nlm.nih.gov/geo/download/?acc=GSE48191&format=file Quando eu uso este comando: wget http://www.ncbi.nlm.nih.gov/geo/download/?acc=GSE48191&format=file Eu recebo apenas o index.html?acc=GSE48191que é algum tipo de...
Gostaria basicamente de canalizar um wgetcomando para um arquivo em um servidor remoto por SSH. Como posso fazer isso? Sei que poderia simplesmente sshentrar no servidor e fazer o download do arquivo, mas prefiro usar a máquina local para fazer o download e
Encontrei apenas puf (Buscador de URLs paralelo), mas não consegui ler URLs de um arquivo; algo como puf < urls.txt também não funciona. O sistema operacional instalado no servidor é o
Estou executando milhares de processos de segundo plano curl em paralelo no seguinte script bash START=$(date +%s) for i in {1..100000} do curl -s "http://some_url_here/"$i > $i.txt& END=$(date +%s) DIFF=$(( $END - $START )) echo "It took $DIFF seconds" done Eu tenho 49Gb Corei7-920...
I sshed para o meu servidor e correu wget -r -np zzz.aaa/bbb/ccce começou a trabalhar. Em seguida, minha conexão com a Internet (em minha casa) foi interrompida e fiquei preocupado ao supor que ela wgethavia sido interrompida hupporque a sshconexão foi perdida e, portanto, o terminal morreu. Mas...
Estou escrevendo um script que envolve o download e a manipulação de um arquivo, e quero garantir que o arquivo não esteja incompleto (devido, por exemplo, a uma queda de conexão) antes de trabalhar
Gostaria de rastrear links em www.website.com/XYZ e fazer o download apenas dos links em www.website.com/ABC. Estou usando o seguinte comando wget para obter os arquivos que desejo: wget -I ABC -r -e robots=off --wait 0.25 http://www.website.com/XYZ Isso funciona perfeitamente quando eu uso o...
Quero usar wget(de um script php) para baixar arquivos de imagem, mas não quero baixar arquivos com um determinado tamanho. Posso limitar o tamanho do arquivo wget? Se não, qual é a melhor
Eu estou correndo wgetassim: wget --mirror --adjust-extension --convert-links --no-cookies http://tshepang.net -o log-main Recebo várias dessas mensagens: Last-modified header missing -- time-stamps turned off. Suponho que isso significa que as páginas continuam sendo baixadas novamente,...
Se você usar a expansão entre chaves wget, poderá buscar imagens numeradas em seqüência com facilidade: $ wget 'http://www.iqandreas.com/sample-images/100-100-color/'{90..110}'.jpg' Ele busca os 10 primeiros arquivos numerados 90.jpgpara 99.jpgficarem bem, mas 100.jpgretorna um erro 404: Arquivo...
Por exemplo, eu tenho um link http://www.abc.com/123/def/ghi/jkl.mno. Quero fazer o download usando wgetor curle obter o nome do arquivo de saída como def_ghi_jkl.mno, onde a parte def_ghié retirada do link. Vou colocar esse wgetcomando em um script para baixar vários arquivos, para que ele não...
Eu tenho um site em um servidor que é basicamente um monte de páginas HTML, imagens e sons. Perdi minha senha para esse servidor e preciso pegar tudo o que está armazenado lá. Posso ir página por página e salvar tudo, mas o site tem mais de 100 páginas. Estou usando o OSX. Eu tentei usar,...
Quero simplesmente poder explorar um sistema de arquivos dropbox, sem muita carga adicional na CPU, memória, armazenamento (ou seja, sem salvar localmente as cópias dos arquivos remotos). Parece que o cliente oficial consome muitos recursos (e faria operações desnecessárias como a sincronização) -...