O Google Desktop deve indexar um site sem visitar todas as páginas manualmente?

Alguma alma empreendedora descobriu como fazer o Google Desktop indexar um site sem ter que realmente visitar todas as páginas desse site com seu navegador? ou talvez tenha criado uma extensão que faça com que o navegador siga todos os links sem supervisão?

Por razões que estão além do meu entendimento ou controle, nosso site interno não possui um mecanismo de pesquisa e estou cansado de procurá-lo gradualmente em formulários pdf etc. Tenho certeza de que eventualmente teremos um, mas, enquanto isso, preciso encontrar coisas .

Eu segui a rota de primo pobre de espelhar o site na minha unidade local com http://gnuwin32.sourceforge.net/packages/wget.htm :

wget --mirror http://internal.domain.org/