Ubuntu通过apt-get安装apache spark

Question

我需要安装spark并在一台机器上以独立模式运行它,并寻找通过apt-get安装它的直接方式

我在这里通过pip找到了如何通过pyspark执行此操作

我找不到用一个终端命令安装spark的方法.

安装pyspark安装所有的spark软件吗？

我发现说明了如何安装的火花,这是更复杂

有没有办法通过apt-get使用类似的一个终端命令安装spark？

编辑

我发现这解释了如何使用apt-get安装spark,我得到以下错误

E:无法找到包火花核E:无法找到包spark-master E:无法找到包spark-worker E:无法找到包spark-history-server E:无法找到包spark-python

谢谢

Answer 1

在安装 pyspark 之前，您必须安装 Java8。这在以下位置进行了描述

• http://www.webupd8.org/2014/03/how-to-install-oracle-java-8-in-debian.html
• http://www.webupd8.org/2012/09/install-oracle-java-8-in-ubuntu-via-ppa.html

要在 Ubuntu 上全自动安装 Java8，请执行以下操作

$ apt-get update
$ apt-get -y install software-properties-common
$ add-apt-repository -y ppa:webupd8team/java
$ echo debconf shared/accepted-oracle-license-v1-1 select true | debconf-set-selections
$ echo debconf shared/accepted-oracle-license-v1-1 seen true | debconf-set-selections
$ apt-get update
$ apt-get -y install oracle-java8-installer

（参见https://new Fivefour.com/docker-java8-auto-install.html）

之后你就可以简单地运行pip install pyspark.