Matemática por trás de testes multivariados para otimização de sites

8

Estou procurando recursos teóricos (livros, tutoriais etc.) para aprender sobre como fazer boas inferências estatísticas, dados (muitos) de dados de conversão de sites multivariados.

Estou atrás da matemática envolvida e não consigo encontrar coisas boas que não sejam de marketing na web. O tipo de pergunta que quero responder: quanto impacto uma única variável (por exemplo, cor do texto) tem? qual é a correlação entre variáveis? que tipo de distribuição é usada para modelagem (gaussiana, binomial etc.)? Ao usar as estatísticas para analisar os resultados - o que deve ser considerado uma variável aleatória - o elemento da página da web que obtém variações diferentes ou o resultado binário de conversão ou não conversão de uma impressão?

Há muitas informações sobre os diferentes métodos de teste de otimização de sites e seus benefícios / armadilhas, muitas informações sobre estatísticas multivariadas em geral. Vocês conhecem os recursos que discutem estatísticas técnicas nesse contexto específico de otimização de sites ?

Obrigado por qualquer informação!

célula sanguínea
fonte
Estou lidando com questões semelhantes no meu trabalho diário ao vivo. Inclusive empurrar o teste simples para além dessas métricas binárias fáceis de usar e torná-lo utilizável em um ambiente comercial, só foi possível primeiro estudando métodos estatísticos independentes da área de aplicação e ENTÃO, agora armado com a mentalidade correta, aplique esses métodos à Web . Que eu saiba, não existe esse livro, mas acho que seria um best-seller. Boa sorte !
steffen

Respostas:

5

Esta página da Microsoft possui alguns recursos.

Sugiro que você leia pelo menos este artigo da página: " Experiências controladas na Web: pesquisa e guia prático " . Ele fornecerá um ponto de partida sobre as métricas a serem medidas e transmitidas, coisas a serem consideradas para experiências on-line (incluindo o design elementos de páginas da web) e as estatísticas relacionadas.

Aproveitar! -Al

Al R.
fonte
(+1) bons recursos. Especialmente Kohavi fez um ótimo trabalho escrevendo sobre a otimização que ele executou na amazon.
steffen
Coisas boas! Muito obrigado, definitivamente um recurso valioso.
bloodcell
0

Essas notas das palestras são mais sobre como otimizar a publicidade on-line do que sobre a otimização de um site, mas as referências lá (especialmente a aula 6) podem colocá-lo na direção certa.

http://www.stanford.edu/class/msande239/

Espero que ajude.

user765195
fonte