Como obter uma lista completa dos símbolos de ação do Yahoo Finance? [fechadas]

Pesquisei infinitamente no Google por um método de obter uma lista completa (e atualizada diariamente) de todos os símbolos do Yahoo disponíveis em http://finance.yahoo.com

O Yahoo tem informações sobre ações, futuros, etc. para várias bolsas em todo o mundo, e eu gostaria de uma lista combinada de todos os símbolos disponíveis através deles. Eu tentei YQL, mas eles têm uma restrição de cláusula "where symbol = (ou in)", então não posso selecionar * a partir de símbolos.

Então, basicamente, obter informações detalhadas para um único símbolo ou vários símbolos de uma vez é fácil, mas simplesmente não consigo descobrir como obter uma lista de todos os tickers disponíveis.

Alguém pode ajudar por favor?

Há um bom wrapper C # para a API Yahoo.Finance em http://code.google.com/p/yahoo-finance-managed/ que o levará até lá. Infelizmente, não há uma maneira direta de baixar a lista de cotações, mas o seguinte cria a lista iterando através dos grupos alfabéticos:

        AlphabeticIDIndexDownload dl1 = new AlphabeticIDIndexDownload();
        dl1.Settings.TopIndex = null;
        Response<AlphabeticIDIndexResult> resp1 = dl1.Download();

        writeStream.WriteLine("Id|Isin|Name|Exchange|Type|Industry");

        foreach (var alphabeticalIndex in resp1.Result.Items)
        {
            AlphabeticalTopIndex topIndex = (AlphabeticalTopIndex) alphabeticalIndex;
            dl1.Settings.TopIndex = topIndex;
            Response<AlphabeticIDIndexResult> resp2 = dl1.Download();

            foreach (var index in resp2.Result.Items)
            {
                IDSearchDownload dl2 = new IDSearchDownload();
                Response<IDSearchResult> resp3 = dl2.Download(index);


                int i = 0;
                foreach (var item in resp3.Result.Items)
                {
                    writeStream.WriteLine(item.ID + "|" + item.ISIN + "|" + item.Name + "|" + item.Exchange + "|" + item.Type + "|" + item.Industry);
                }

            }
        }

Deu-me uma lista de cerca de 75.000 títulos em cerca de 4 minutos.

Eu tive um problema parecido. yahoo não oferece isso, mas você pode obter um olhando as declarações document.write na lista de nyse.com e encontrando o arquivo .js onde eles simplesmente armazenam a lista de empresas começando com a letra fornecida como uma matriz js literal. você também pode obter arquivos csv bem organizados em nasdaq.com aqui: http://www.nasdaq.com/screening/companies-by-name.aspx?letter=0&exchange=nasdaq&render=download (substitua exchange = nasdaq por exchange = nyse para símbolos nyse).

Consegui fazer algo semelhante usando este URL:

http://query.yahooapis.com/v1/public/yql?q=select%20 *% 20from% 20yahoo.finance.industry% 20where% 20id% 20in% 20 (selecione% 20industry.id% 20de% 20yahoo.finance .sectors) & env = store% 3A% 2F% 2Fdatatables.org% 2Falltableswithkeys

Ele baixa uma lista completa de símbolos de ações usando a API YQL do Yahoo, incluindo o nome do estoque, símbolo de ação e ID do setor. O que parece não ter nenhum tipo de modificador de símbolo de ação. Por exemplo, para Rogers Communications Inc, ele apenas baixa RCI, não RCI-A.TO, RCI-B.TO, etc. Eu não encontrei uma fonte para essas informações ainda - se alguém souber de uma maneira de automatizar o download, eu gostaria de ouvir. Além disso, seria bom encontrar uma maneira de fazer o download de algum tipo de relação entre o símbolo da ação e a bolsa em que é negociado, já que alguns são negociados em várias bolsas, ou talvez eu só queira ver coisas na TSX ou algo assim .

NASDAQ Stock lists ftp://ftp.nasdaqtrader.com/symboldirectory

Os 2 arquivos nasdaqlisted.txt e otherlisted.txt são | tubo separado. Isso deve lhe dar uma boa lista de todas as ações.

Posso ajudar com uma lista de símbolos para ações (dos Estados Unidos e não dos Estados Unidos) e para ETFs.

O Yahoo fornece um Calendário de ganhos que lista todas as ações que anunciam os ganhos de um determinado dia. Isso inclui ações fora dos EUA.

Por exemplo, aqui está hoje: http://biz.yahoo.com/research/earncal/20120710.html

a última parte do URL é a data (no formato AAAAMMDD) para a qual você deseja o Calendário de ganhos. Você pode fazer um loop por vários dias e raspar os símbolos de todas as ações que relataram ganhos nesses dias.

Não há garantia de que o Yahoo tenha dados para todas as ações que relatam lucros, especialmente porque algumas ações não existem mais (falência, aquisição, etc.), mas este é provavelmente um ponto de partida decente.

Se você estiver familiarizado com o R, pode usar o pacote qmao para fazer isso. (Veja esta postagem ) se você tiver problemas para instalá-lo.

ec <- getEarningsCalendar(from="2011-01-01", to="2012-07-01") #this may take a while
s <- unique(ec$Symbol)
length(s)
#[1] 12223
head(s, 20) #look at the first 20 Symbols
# [1] "CVGW"    "ANGO"    "CAMP"    "LNDC"    "MOS"     "NEOG"    "SONC"   
# [8] "TISI"    "SHLM"    "FDO"     "FC"      "JPST.PK" "RECN"    "RELL"   
#[15] "RT"      "UNF"     "WOR"     "WSCI"    "ZEP"     "AEHR"   

Isso não inclui quaisquer ETFs, futuros, opções, títulos, forex ou fundos mútuos.

Você pode obter uma lista de ETFs do yahoo aqui: http://finance.yahoo.com/etf/browser/mkt Isso mostra apenas os primeiros 20. Você precisa do URL do link "Mostrar todos" na parte inferior da página . Você pode raspar a página para descobrir quantos ETFs existem e, em seguida, construir um URL.

L <- readLines("http://finance.yahoo.com/etf/browser/mkt")
# Sorry for the ugly regex
n <- gsub("^(\\w+)\\s?(.*)$", "\\1", 
          gsub("(.*)(Showing 1 - 20 of )(.*)", "\\3",  
               L[grep("Showing 1 - 20", L)]))
URL <- paste0("http://finance.yahoo.com/etf/browser/mkt?c=0&k=5&f=0&o=d&cs=1&ce=", n)
#http://finance.yahoo.com/etf/browser/mkt?c=0&k=5&f=0&o=d&cs=1&ce=1442

Agora, você pode extrair os Tickers da tabela dessa página

library(XML)
tbl <- readHTMLTable(URL, stringsAsFactors=FALSE)
dat <- tbl[[tail(grep("Ticker", tbl), 1)]][-1, ]
colnames(dat) <- dat[1, ]
dat <- dat[-1, ]
etfs <- dat$Ticker # All ETF tickers from yahoo
length(etfs)
#[1] 1442
head(etfs)
#[1] "DGAZ" "TAGS" "GASX" "KOLD" "DWTI" "RTSA"

Essa é toda a ajuda que posso oferecer, mas você poderia fazer algo semelhante para obter alguns dos futuros que eles oferecem rascunhando estas páginas (esses são apenas os futuros dos EUA)

http://finance.yahoo.com/indices?e=futures , http://finance.yahoo.com/futures?t=energy , http://finance.yahoo.com/futures?t=metals , http: //finance.yahoo.com/futures?t=grains , http://finance.yahoo.com/futures?t=livestock , http://finance.yahoo.com/futures?t=softs , http: // finance.yahoo.com/futures?t=indices ,

E, para índices dos EUA e de outros países, você pode raspar essas páginas

http://finance.yahoo.com/intlindices?e=americas , http://finance.yahoo.com/intlindices?e=asia , http://finance.yahoo.com/intlindices?e=europe , http: //finance.yahoo.com/intlindices?e=africa , http://finance.yahoo.com/indices?e=dow_jones , http://finance.yahoo.com/indices?e=new_york , http: // finance.yahoo.com/indices?e=nasdaq , http://finance.yahoo.com/indices?e=sp , http://finance.yahoo.com/indices?e=other , http: // finance. yahoo.com/indices?e=treasury , http://finance.yahoo.com/indices?e=commodities

Venho pesquisando isso há alguns dias, seguindo pistas intermináveis ​​que chegaram perto, mas não exatamente, do que eu procurava.

Minha necessidade é de uma lista simples de 'símbolo, setor, indústria'. Estou trabalhando em Java e não quero usar nenhum código nativo da plataforma.

Parece que muitos outros dados, como citações, etc., estão prontamente disponíveis.

Finalmente, seguiu uma sugestão de olhar para 'finviz.com'. Parece apenas o bilhete. Tente usar o seguinte:

http://finviz.com/export.ashx?v=111&t=aapl,cat&o=ticker Isso volta como linhas, estilo csv, com uma linha de cabeçalho, ordenada pelo símbolo de ação. Você pode continuar adicionando tickers. No código, você pode ler o fluxo. Ou você pode permitir que o navegador pergunte se deseja abrir ou salvar o arquivo.

http://finviz.com/export.ashx?v=111&&o=ticker Mesmo estilo csv, mas extrai todos os símbolos disponíveis (muito, em trocas globais)

Substitua 'export' por 'screener' e os dados aparecerão no navegador.

Existem muitas outras opções que você pode usar, uma para cada elemento do screener no site.

Até agora, esta é a maneira programática mais poderosa e conveniente de obter os poucos dados que, de outra forma, eu não conseguiria obter facilmente. E, parece que este site pode ser uma fonte única para a maior parte do que você pode precisar, além de cotações em tempo real ou quase em tempo real.

A lista completa de símbolos / tickers / ações do Yahoo está disponível para download (formato Excel) no site abaixo. http://www.myinvestorshub.com/yahoo_stock_list.php

Lista atualizada até janeiro de 2016: http://investexcel.net/all-yahoo-finance-stock-tickers/

Uma solução alternativa que tive para isso era iterar os setores (o que na época você poderia fazer ... Não testei isso recentemente).

No entanto, você acaba sendo bloqueado ao fazer isso dessa forma, já que o YQL fica estrangulado por dia.

Use a API CSV sempre que possível para evitar isso.

Eu tive o mesmo problema, mas acho que tenho uma solução simples (o código é do meu aplicativo RoR): Extraia ids da indústria de yahoo.finance.sectors e adicione-os ao banco de dados:

    select = "select * from yahoo.finance.sectors"
    generate_query select
    @data.each do |data|
      data["industry"].each do |ind|
        unless ind.kind_of?(Array)
          unless ind["id"].nil?
            id = ind["id"].to_i
            if id > 0
              Industry.where(id: id).first_or_create(name: ind["name"]).update_attribute(:name, ind["name"])
            end
          end
        end
      end
    end

Extraia todos os comanies com seus símbolos com ids da indústria:

    ids = Industry.all.map{|ind| "'#{ind.id.to_s}'" }.join(",")
    select = "select * from yahoo.finance.industry where id in"
    generate_query select, ids
    @data.each do |ts|
      unless ts.kind_of?(Array) || ts["company"].nil?
        if ts["company"].count == 2 && ts["company"].first[0] == "name"
          t = ts["company"]
          Ticket.find_or_create_by_symbol(symbol: t["symbol"], name: t["name"] ).update_attribute(:name, t["name"])
        else
          ts["company"].each do |t|
            Ticket.find_or_create_by_symbol(symbol: t["symbol"], name: t["name"] ).update_attribute(:name, t["name"])
          end
        end
      end
    end
  end

Hellper de conexão:

def generate_query(select, ids = nil)
    if params[:form] || params[:action] == "sectors" || params[:controller] == "tickets"
      if params[:action] == "sectors" || params[:controller] == "tickets"
        if ids.nil?
          query= select
        else
          query= "#{select} (#{ids})"
        end
      else
        if params[:form][:ids]
          @conditions = params_parse params[:form][:ids]
          query = "#{select} (#{@conditions})"
        end
      end
      yql_execut(query)
    end
  end

  def yql_execut(query)
    # TODO: OAuth ACCESS (http://developer.yahoo.com/yql/guide/authorization.html)
    base_url = "http://query.yahooapis.com/v1/public/yql?&format=json&env=store%3A%2F%2Fdatatables.org%2Falltableswithkeys&q="
    dirty_data = JSON.parse(HTTParty.get(base_url +  URI.encode(query)).body)
    if dirty_data["query"]["results"] == nil
      @data, @count, @table_head = nil
    else
      @data = dirty_data["query"]["results"].to_a[0][1].to_a
      @count = dirty_data["query"]["count"]
      if @count == 1
        @table_head = @data.map{|h| h[0].capitalize}
      else
        @table_head = @data.to_a.first.to_a.map{|h| h[0].capitalize}
      end
    end
  end

Desculpe pela bagunça, mas esta é a primeira versão de teste para meu projeto e eu precisava muito rápido. Existem algumas variáveis ​​de helpers e outras coisas para meu aplicativo, desculpe por isso. Mas eu tenho uma pergunta: você tem muitos símbolos? Eu tenho 5500.