Estou tentando usar o comando wget:

wget -p http://www.example.com 

para buscar todos os arquivos na página principal. Para alguns sites, ele funciona, mas na maioria dos casos, ele só faz o download do index.html. Eu tentei o comando wget -r, mas não funciona. Qualquer um sabe como buscar todos os arquivos em uma página, ou apenas me dá uma lista de arquivos e urls correspondentes na página?