wget を使用してデータセットをダウンロードする方法

Question

データセットをダウンロードしたいこのウェブサイト（青い「新しいノートブック」ボタンの近くに「ダウンロード（5GB）」と表示されているところ）。そのリンクを新しいタブで開くと（このリンク) すぐにダウンロードが開始されます。ターミナル経由でこれを実行するにはどうすればよいですか?

Answer 1

素晴らしい Javascript の世界へようこそ。ここでは、多数の Javascript が介入してダウンロードを「保護」するため、単一のリンクをクリックすることが困難になります。

コマンドラインからダウンロードする最も簡単な方法は、おそらくブラウザで Web 開発者ツールを有効にし (ブラウザが何であるかはわかりませんので、詳細はお伝えできません)、リンクをクリックして、「ネットワーク」タブで何が起こっているかを確認し、実際のダウンロードの URL を特定し、Web 開発者ツールによって提供されるメニュー項目を使用して、たとえば curl コマンドとしてこれをコピーすることです。

このリンクには、限られた時間のみ機能することを保証するヘッダーが含まれる可能性があることに注意してください。