Un amigo mío puso un montón de archivos mkv en un servidor público, ¿cómo puedo descargarlos todos con un comando wget?
Yo he tratado
wget -r [path]
que simplemente toma el archivo de índice, robots.txt y omite los mkvs. yo también lo intenté
wget -r -A.mkv
Si intento obtener un archivo individual directamente, funciona bien, ¿qué estoy haciendo mal aquí? La página de manual es muy larga, por lo que posiblemente me salté la opción correspondiente, en cuyo caso me disculpo.
Respuesta1
Mi conjetura: tu respuesta está aquí:http://www.robotstxt.org/
La página de manual de wget tiene una solución alternativa, pero no es bueno ignorar robots.txt, por lo que no lo recomiendo (puedes buscarlo tú mismo). Puede verificar si este es el problema real viendo el texto
curl http://somedomain.com/robots.txt