
我的一個朋友在公共伺服器上放置了一堆 mkv 文件,我如何使用一個 wget 命令下載所有這些文件?
我努力了
wget -r [path]
它只是獲取索引文件 robots.txt 並跳過 mkvs。我也嘗試過
wget -r -A.mkv
如果我嘗試直接獲取單個文件,它工作正常,我在這裡做錯了什麼?手冊頁很長,所以可能我只是跳過了相關選項,在這種情況下我深表歉意。
答案1
我的猜測:你的答案在這裡:http://www.robotstxt.org/
wget 的手冊頁有一個解決方法,但是忽略 robots.txt 並不是一件好事,所以我不推薦它(你可以自己找)。您可以透過查看文字來驗證這是否是實際問題
curl http://somedomain.com/robots.txt