Google 検索からデータを取得するための bash スクリプトを作成しています。クエリに使用し、結果をファイルにリダイレクトして後で解析します。問題は、取得できるのは 1 ページだけであることです。次のページまたはページ数を取得するにはlynxどうすればよいでしょうか。lynx
grep と cut を使用して URL を「www.google.com/search?q=.....」のような URL に分離しましたが、その後、それを lynx に再送信しようとすると、次のページが開かず、開かずにリンクだけが表示されます。何かアドバイスはありますか? TNX
答え1
検索結果は 1 ページにまとめられていないため、ページの下部にあるすべてのリンクを調べる必要があると思います。
それぞれの結果を個別に解析してダウンロードする必要があります。