Я использую wget --spider. Он потребляет много оперативной памяти. Как мне ограничить использование оперативной памяти из команды wget?
wget --spider -r -c http://www.example.org 2>&1 | grep '^--' | awk '{ print $3 }' | grep -v '\.\(css\|js\|png\|gif\|jpg\|JPG\)$' > example.txt
"-c" не работает с --spider? Я бы хотел поместить ссылки в example.txt и иметь возможность продолжить кормить txt ссылками в другое время