Livro sobre Probabilidade

32

Embora tenha passado em alguns cursos sobre teoria das probabilidades, tanto no ensino médio quanto na universidade, tenho dificuldade em ler os artigos da TCS quando se trata de probabilidade.

Parece que os autores dos trabalhos do TCS estão muito familiarizados com a probabilidade. Eles trabalham magicamente com fórmulas de probabilidade e provam teoremas com muita facilidade; enquanto eu tenho que trabalhar algumas horas boas para entender como uma fórmula foi derivada e como as identidades (ou desigualdades) são provadas.

Decidi resolver o meu problema de uma vez por todas: quero ler um livro de capa a capa.

Portanto, se você for solicitado a sugerir um e apenas um livro sobre probabilidade, que livro você recomendará?

incrível
fonte
3
+1 porque eu apreciaria uma boa referência. Além disso, posso sugerir que esse livro precisaria cobrir a inferência bayesiana?
Steve
4
@ Incrível: Você gostaria de esclarecer mais? Um livro de probabilidades em geral ou um livro de probabilidades focado na conexão com a ciência da computação teórica?
Yoshio Okamoto
@ Yoshio: Eu não procuro um livro em que a probabilidade no contexto do TCS seja explicada. Só preciso de um livro que, depois de lê-lo de capa a capa, possa me familiarizar com a probabilidade, para que a leitura e a desmistificação dos papéis do TCS funcionem como um encanto.
Incrível
@ Steve: Sim, a inferência bayesiana é apreciada. Recentemente, li um artigo ( Limites mais baixos para zero conhecimento na Internet ) no qual a inferência bayesiana era usada de maneira essencial e não conseguia descriptografar facilmente teoremas e lemas.
MS Dousti 01/04
11
como é que isso nunca se tornou CW?
Suresh Venkat

Respostas:

22

Você já tentou esses dois livros?

  1. Probabilidade e Computação: Algoritmos Aleatórios e Análise Probabilística de Mitzenmacher e Upfal.
  2. Algoritmos Randomizados por Motwani e Raghavan

Observe que esses dois livros abrangem muito mais do que algoritmos aleatórios, por exemplo, eles abrangem o Método Probabilístico, a Teoria das Cadeias de Markov, Martingales etc., é claro, com muitas aplicações no TCS. O primeiro livro é mais fácil de ler com muitos exemplos cujas provas foram elaboradas em detalhes. O segundo livro é realmente um clássico, não muito atualizado, mas ainda muito útil. Os dois têm muitos exercícios, então você terá bastante material para praticar o que aprendeu.

Dai Le
fonte
12

O livro de graduação canônico para teoria das probabilidades continua sendo Um Primeiro Curso em Probabilidade, de Sheldon Ross. O livro é uma excelente referência / atualização para todos os outros. Independentemente do que afirmam alguns revisores rabugentos da Internet, o livro aborda todos os tópicos mais importantes em probabilidade elementar de forma clara e com exemplos motivadores fortes.

Huck Bennett
fonte
11

Acho que a solução para o seu problema não é ler um livro de probabilidades, mas ler mais artigos no TCS.

A maioria dos trabalhos no TCS não usa ferramentas de probabilidade muito avançadas. A maioria deles usa uma pequena coleção de truques básicos e bem conhecidos de probabilidade. A razão pela qual você tem dificuldade em segui-los é que você ainda não está familiarizado com esse pacote de truques, e muitos desses documentos não se preocupam em explicar esses truques, porque eles assumem que o leitor os conhece. Alguns desses truques não são ensinados na maioria dos livros de probabilidade, pelo menos não na forma específica em que são usados ​​nos documentos do TCS.

{0,1}n

Assim, lendo mais artigos do TCS, você se familiarizará com o pacote de truques comuns e com a terminologia, e com o tempo eles serão mais fáceis de entender.

Dito isto, ler um livro sobre probabilidade é sempre uma boa ideia. Entre os livros sugeridos acima, conheço apenas "Probabilidade e computação: algoritmos aleatórios e análise probabilística" de Mitzenmacher e Upfal, e é uma leitura muito boa - em particular, ajudará você a se familiarizar com algumas das terminologias e truques usados ​​no TCS.

Ou Meir
fonte
Bem dito! Eu gostaria que pudéssemos reunir alguns itens deste "pacote de truques", para ajudar os recém-chegados ao campo. Talvez você possa iniciar um wiki da comunidade com um exemplo.
MS Dousti
11
Em relação ao exemplo de variáveis ​​aleatórias: Lembro-me de 6 anos atrás, quando tive a mesma pergunta: Por que os RVs do TCS não são definidos sobre reais? Eu procurei e encontrei a resposta: há mais em RVs do que aprendemos nas classes de probabilidade elementares. Aqui está um link para os interessados: en.wikipedia.org/wiki/… .
MS Dousti
9

Outro clássico da probabilidade orientada para a TCS / Combinatória é o método probabilístico de Alon e Spencer .

Yonatan
fonte
11
Esta é uma boa recomendação. Como Or Meir disse em sua resposta, o TCS usa um conjunto relativamente limitado de truques da teoria das probabilidades. O livro de Alon e Spencer concentra-se nesse pacote de truques sem se atolar em detalhes técnicos da teoria da probabilidade que não são tão relevantes para o TCS.
Timothy Chow
8

Vários tópicos relacionados em diferentes sites da SE:

  1. Livro de probabilidade
  2. Pré-requisitos da teoria da probabilidade
  3. Leitura complementar para estudos da teoria das probabilidades
  4. Que livro você recomendaria para não estatísticos (principalmente livros de estatística)

Embora não tenha lido nenhum desses livros, tive o luxo de dar uma olhada em alguns deles. Gostei da série de três volumes da HPS (Hoel, Port e Stone). Ele não esperava muitos antecedentes e havia uma clara distinção entre probabilidade de tópicos, estatística e processos estocásticos (um volume separado é dedicado a cada tópico). Além disso, cada volume é bastante curto.

Devo enfatizar que não conheço o conteúdo de nenhum dos livros listados. Convido outros membros a comentar sobre este post.

M.S. Dousti
fonte
6

Vários pôsteres nesta discussão recomendaram o conjunto de dois volumes de Feller . Um livro didático mais recente e também muito bom é Grimmett e Stirzaker . Além disso, aqui está uma bibliografia interessante de um estatístico profissional.

Mikhail Glushenkov
fonte
Eu tenho Feller, Grimmet e Stirzaker. Juntamente com o curso on-line "Fundamentos da Probabilidade" do MIT, ele provou ser uma boa porta de entrada para os conceitos de probabilidade de que você precisará como estudante avançado de nível sênior / júnior.
chazisop
4

Um livro muito bom:

Probabilidade de Leo Breiman

Sylvain Peyronnet
fonte
4
O prefácio diz: "Um pré-requisito é algum conhecimento da teoria variável real, como as idéias de medida, funções mensuráveis, e assim por diante Grosso modo, os primeiros. Sete capítulos da teoria da medida por Paul Halmos é fundo suficiente ... Sem conhecimento prévio a probabilidade é assumida, mas navegar por um livro elementar como o de William Feller (Vol. I) ... dá uma excelente sensação ao assunto ". Este deve ser um livro avançado !
MS Dousti 01/04
4

Matemática Concreta de Knuth et al. Muita probabilidade é descobrir o tamanho do seu universo e, a partir daí, descobrir em qual fração do seu universo você está interessado.

Chad Brewbaker
fonte
4

Um excelente livro introdutório de probabilidades para as pessoas da ciência da computação é Henk Tijms, Understanding Probability, Cambridge University Press, 2ª ed., 2007. Este livro se distingue de outros textos introdutórios de probabilidades pela ênfase em por que a probabilidade funciona e como aplicá-la.

Chris
fonte
4

Dos livros mencionados, concordo com o "Probability" de Brieman, o livro de Sheldon Ross "A First Course in Probability" O livro "Probability" de Hoel, Port e Stone de suas três séries de volumes. A maioria dos outros livros que eu não conheço ou não me parece apropriada. A estatística bayesiana não faz parte da teoria das probabilidades. "Um curso de teoria das probabilidades", de Kai Li Chung, foi o que aprendi junto com o volume II do livro de Feller "Uma introdução à teoria das probabilidades e suas aplicações", bons livros que aprendi. Feller é bom para heurísticas e problemas interessantes. Chung é bom para a matemática formal. Entretanto, Feller e Chung podem ser difíceis de ler, principalmente para o auto-estudo. Outro grande escritor de livros de probabilidade é Sid Resnick. Seu livro "Um caminho de probabilidade" é delicioso de ler. O "Cálculo de Probabilidade" de Neveu foi outro livro que usamos no meu curso de probabilidade de pós-graduação.

Michael Chernick
fonte
2

Um ótimo livro com inclinação EE: http://www.mhhe.com/engcs/electrical/papoulis/ um livro fantástico com inclinação CS: http://www.amazon.com/dp/0471333417/ .

user4563
fonte
Também gosto de Papoulis, embora não tenha certeza de que precisava de um aumento de 50% em massa, ou de um novo autor, para uma nova edição. Se você vir uma edição mais antiga (por exemplo, a segunda reimpressão publicada pela Dell e vendida em grandes quantidades), compre-a.
András Salamon
1

Este livro é usado para uma classe de probabilidade de introdução no MIT. http://vfu.bg/en/e-Learning/Math--Bertsekas_Tsitsiklis_Introduction_to_probability.pdf

Índice:

  • Espaço e probabilidade da amostra
  • Variáveis ​​aleatórias discretas
  • Variáveis ​​aleatórias gerais
  • Tópicos adicionais sobre variáveis ​​aleatórias e expectativas
  • Os processos de Bernoulli e Poisson
  • Cadeias de Markov
  • Teoremas de limite
sk8asd123
fonte