
Я хочу установить Hadoop и Spark с помощью aptitude
, а не длительного и сложного процесса, описанного вКак установить Hadoop?.
hadoop-ubuntu
судя по всему, он мертв уже почти 2 года.
Я думаюпочемуHadoop и Spark не были упакованы для Ubuntu (кроме обычного «нет добровольцев»).
P.S. Моя цель — разработка локально и развертывание на сервере Spark.
решение1
Существует репозиторий, содержащий пакеты hadoop и spark для Ubuntu: http://bigtop.apache.org Я считаю, что это не всегда последняя новинка, но и не старше 2 лет.
# curl http://www.apache.org/dist/bigtop/bigtop-1.0.0/repos/debian8/bigtop.list > /etc/apt/sources.list.d/bigtop.list
# apt-key adv --keyserver keyserver.ubuntu.com --recv-keys 3A367EA0FA08B173
# aptitude update
# aptitude install spark-python
на данный момент их пакеты довольно старые (hadoop 2.6.0, spark 1.3.1)