Estou trabalhando há dois meses para melhorar nosso tempo de resposta (principalmente do lado do servidor) em um novo fórum (um produto totalmente novo do ponto de vista técnico) que lançamos na Alemanha há alguns meses e eu sou um muito surpreso com os resultados que recebo. Monitoro nosso tempo de resposta usando logs do Apache e nossa própria implementação do beacon do Boomerang .
Usando minhas estatísticas, posso ver que nosso novo produto responde em cerca de 680 ms, enquanto nosso produto antigo estava respondendo em cerca de 1050 ms. Por outro lado, a Ferramenta para webmasters do Google nos diz que nossas páginas têm um tempo médio de resposta de cerca de 1500 ms hoje, onde eram 700 há três meses com nosso produto antigo.
Eu percebi que o GWT estava levando em consideração as métricas do lado do cliente, então adicionei algumas medidas em nosso farol do Boomerang e tudo parece bem. Também corri algumas páginas aleatórias no ySlow e no Page Speed do Google e tudo parece melhor do que era antes. Eventualmente, temos 82% da ferramenta Page Speed do Google, o que é bastante interessante para um site com alguns anúncios :)
Ultimamente, assinamos um contrato com a Akamai para usar dois de seus produtos: CDN para nossos arquivos estáticos (estávamos usando outra CDN antes, mas não era muito eficaz) e RMA para melhorar as rotas da Networks. Também introduzimos um novo mecanismo de cache agressivo para garantir que a maioria das páginas veiculadas nos rastreadores seja armazenada em cache por nossa grade do memcache. Depois de verificar minhas métricas, parece que essas alterações melhoraram de 650ms para cerca de 500ms, o que é bom (ainda não ótimo, mas definitivamente é uma melhoria). Porém, as ferramentas para webmasters continuam relatando um tempo médio de resposta crescente, onde vemos diminuindo ao mesmo tempo.
Você já teve o mesmo tipo de comportamento estranho em seus sites enquanto fazia melhorias no desempenho? Você tem alguma idéia de como monitorar o mesmo que o Google faz com o Desempenho do site nas Ferramentas do Google para webmasters, para que possamos melhorar nosso site e verificar constantemente se é isso que o Google deseja?
Edit 26/07/2011 : Obrigado por suas respostas, pessoal! No entanto, eu não era preciso o suficiente. O principal problema que temos não é a página Desempenho do site, mas a Estatísticas de rastreamento, por enquanto. Provavelmente, encontramos um problema do nosso lado com algumas páginas muito lentas (cerca de 3000 ms !!) e estamos tentando corrigi-las. Vou mantê-lo informado assim que tiver algumas informações. Obrigado novamente !