Obtenga varias páginas de la búsqueda de Google

Obtenga varias páginas de la búsqueda de Google

Estoy escribiendo un script bash para obtener algunos datos de la búsqueda de Google. Utilicé lynxpara la consulta y redireccioné los resultados a un archivo para su posterior análisis. El problema es que todo lo que obtengo es una sola página, ¿cómo puedo lynxobtener la siguiente página/número de páginas?


Utilicé grep y cut para aislar la URL y que fuera del tipo "www.google.com/search?q=....." pero cuando intento reenviarla a lynx no abre la página siguiente. solo muestra el enlace sin abrirlo, ¿alguna sugerencia? TNX

Respuesta1

Supongo que necesitarás revisar todos los enlaces en la parte inferior de la página, los resultados de la búsqueda no se condensan en una sola página.

Debería analizar y descargar cada uno de los resultados por sí solo.

información relacionada