
Morning Edition ポッドキャストを毎日自動的にダウンロードしたいのですが、私は Apple 製品を所有していません。flareget をダウンロードしてインストールしましたが、これを実行する方法がわかりません。私はそのツールに縛られているわけではありません。私は長年 Firefox を使用していますが、現在は Chrome を試用しています。
プログラムのURLは次のとおりです。 http://www.npr.org/programs/morning-edition/
RSSアドレスは次のとおりです:http://www.npr.org/rss/rss.php?id=3
問題は、RSS に MP3 へのリンクではなく、個々のストーリーの Web ページへのリンクが含まれていることです。
<rss xmlns:npr="http://www.npr.org/rss/" xmlns:nprml="http://api.npr.org/nprml" xmlns:itunes="http://www.itunes.com/dtds/podcast-1.0.dtd" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:dc="http://purl.org/dc/elements/1.1/" version="2.0">
<channel>
<title>
Morning Edition : NPR
</title>
<link>
http://www.npr.org/templates/story/story.php?storyId=3
</link>
<description>
Morning Edition gives its audience news, analysis, commentary, and coverage of arts and sports. Stories are told through conversation as well as full reports. It's up-to-the-minute news that prepares listeners for the day ahead.
</description>
<language>en</language>
<copyright>Copyright 2015 NPR - For Personal Use Only</copyright>
<generator>NPR API RSS Generator 0.94</generator>
<lastBuildDate>Fri, 06 Nov 2015 12:45:00 -0500</lastBuildDate>
<image>
<url>http://media.npr.org/images/podcasts/primary/npr_generic_image_300.jpg?s=200</url>
<title>Morning Edition</title>
<link>http://www.npr.org/templates/story/story.php?storyId=3</link>
</image>
<item>
<title>Russian Airliner Crash Update</title>
<description>
The latest information on the Russian airliner that crashed in Egypt. All 224 people on board were killed.
</description>
<pubDate>Fri, 06 Nov 2015 12:45:00 -0500</pubDate>
<link>
http://www.npr.org/2015/11/06/455019224/russian-airliner-crash-update?utm_medium=RSS&utm_campaign=morningedition
</link>
<guid>
http://www.npr.org/2015/11/06/455019224/russian-airliner-crash-update?utm_medium=RSS&utm_campaign=morningedition
</guid>
<content:encoded>
<![CDATA[
<p>The latest information on the Russian airliner that crashed in Egypt. All 224 people on board were killed.</p>
]]>
</content:encoded>
<dc:creator>Corey Flintoff</dc:creator>
</item>
...
ブラウザで開くとhttp://www.npr.org/2015/11/06/455019224/russian-airliner-crash-update?utm_medium=RSS&utm_campaign=morningedition
、そのページにストーリーの mp3 ファイルへのリンクがあります。
http://pd.npr.org/anon.npr-mp3/npr/me/2015/11/20151106_me_egypt_plane_crash_probe_russia.mp3?dl=1
簡単に識別できるパターンがあることはわかりますが、どのツールを使用すればよいのか、またはそれらをどのように使用して目的の動作を実行すればよいのかがわかりません。
すべてのストーリーのオーディオファイルは次のように始まります:
http://pd.npr.org/anon.npr-mp3/npr/me/
年ごとのフォルダを追加します
http://pd.npr.org/anon.npr-mp3/npr/me/2015
そして今月は1つ
http://pd.npr.org/anon.npr-mp3/npr/me/2015/11
今日のショーのmp3はすべて
yyyymmdd_me*.mp3
末尾は?dl=1
必要ないようです。
答え1
ダウンロードしたい .mp3 URL が見つかるまでサイト内を移動し、それらの URL を正確にダウンロードする Web ロボットを作成する必要があります。
の場合perl
、明らかな解決策は、libwww-perlパッケージ(別名LWP
)。
についてはpython
、機械化するまたはスクレイピーPython ライブラリ。
これらの Python ライブラリは両方とも、Debian および Ubuntu 用に および としてパッケージ化されているpython-mechanize
ので、パッケージをインストールします ( Web サイトの などの指示にはpython-scrapy
従わないでください)。pip install
他の言語にも同様のライブラリがあります。