Wget: recuperación de URL recursivas de la lista de URL

Wget: recuperación de URL recursivas de la lista de URL

Tengo una lista de URL en un archivo de texto. Cada una de estas URL apunta a una página con otra lista de URL. ¿Qué comando WGET puedo usar para recuperar las URL de las páginas que se han vinculado desde las URL de mi archivo txt?

NOTA: No quiero descargar archivos, solo enviar la lista de URL a un archivo txt.

Respuesta1

(no probado):

wget -r -l 1 -i file

wgetEl comando tiene muchas opciones... En este caso:

  • -rsignifica recursivo
  • -l 1significa solo un nivel de recursividad (pruebe con 2 si uno no fuera suficiente)
  • -i filesignifica que el archivo contiene una lista de URL de puntos de partida

información relacionada