Como criar um espelho http?

Como criar um espelho http?

Preciso criar um espelho de um diretório compartilhado por HTTP. O servidor de origem usa o módulo de índice Apache. Aqui está um exemplo de um diretório semelhante:http://apache.mirrors.pair.com/httpd/

O conteúdo não está disponível por FTP.

Eu possousar wgetpara baixar o espelho recursivamente. O efeito colateral é que neste caso existem index.html?....arquivos criados.

Gostaria de saber se existe um utilitário que pode fazer isso facilmente, sem a necessidade de limpar o diretório de destino manualmente?

Responder1

Acho que você está procurando uma opção de espelho para wget, -m.

wget -m http://www.example.com/

informação relacionada