Hadoop & Spark – warum keine Ubuntu-Pakete?

Hadoop & Spark – warum keine Ubuntu-Pakete?

Ich möchte Hadoop & Spark mit installieren aptitude, nicht mit dem langwierigen und komplizierten Prozess, der in beschrieben wirdWie installiere ich Hadoop?.

hadoop-ubuntuscheint seit fast 2 Jahren tot zu sein.

Ich wundere michWarumHadoop und Spark wurden nicht für Ubuntu gepackt (abgesehen vom üblichen „Es gibt keine Freiwilligen“).

PS. Mein Ziel ist die lokale Entwicklung und die Bereitstellung auf einem Spark-Server.

Antwort1

Es gibt ein Repo, das Hadoop- und Spark-Pakete für Ubuntu enthält: http://bigtop.apache.org Ich glaube, es ist nicht immer auf dem neuesten Stand, aber neuer als 2 Jahre.

# curl http://www.apache.org/dist/bigtop/bigtop-1.0.0/repos/debian8/bigtop.list > /etc/apt/sources.list.d/bigtop.list 
# apt-key adv --keyserver keyserver.ubuntu.com --recv-keys 3A367EA0FA08B173
# aptitude update
# aptitude install spark-python

Bis jetzt sind ihre Pakete ziemlich alt (Hadoop 2.6.0, Spark 1.3.1)

verwandte Informationen