Nas ferramentas de desenvolvedor do Chrome, na guia rede, estou curioso para saber o que está acontecendo durante as lacunas. Se você olhar para a minha imagem abaixo, destaquei em laranja as áreas em que essas lacunas existem. Onde posso carregar grande parte da minha página do cache, é uma pena que essas grandes lacunas ocorram, pois elas compõem a maior parte do tempo de carregamento da página. O que exatamente está acontecendo neste momento?
EDITAR
Ok, encontrei esta resposta que resume essencialmente a minha pergunta, então uma pergunta diferente: alguém conhece um bom método para reduzir o tamanho dessas lacunas? Presumivelmente (ainda que extremo), se eu carregasse todo o meu CSS na página, não haveria um atraso depois de carregar o arquivo CSS antes que as imagens fossem carregadas.