
wget --spider を使用しています。大量の RAM メモリを消費しています。wget コマンドからの RAM メモリの使用を制限するにはどうすればよいでしょうか?
wget --spider -r -c http://www.example.org 2>&1 | grep '^--' | awk '{ print $3 }' | grep -v '\.\(css\|js\|png\|gif\|jpg\|JPG\)$' > example.txt
「-c」は --spider では機能しませんか? example.txt にリンクを入れて、別のときにリンクを含む txt を引き続き送信できるようにしたいのですが