$wget --random-wait -r -p -e robots=off -U mozilla http://www.example.com
onde,
-p diz para o wget incluir todos os arquivos, inclusive imagens.
-e robots=off não obedecer o arquivo robots.txt
-U mozilla identifica o wget como mozilla
--random-wait diz ao wget para experar um número aleatório de segundo, para não ser incluído em uma lista negra
Nenhum comentário:
Postar um comentário