概述
我需要安装spark并在一台机器上以独立模式运行它,并寻找通过apt-get安装它的直接方式
我通过pip here找到了如何通过pyspark执行此操作
安装pyspark安装所有的spark软件吗?
我找到了instructions如何安装spark,它更复杂
有没有办法通过apt-get使用类似的一个终端命令安装spark?
编辑
我发现this解释了如何使用apt-get安装spark,我收到以下错误
E: Unable to locate package spark-core E: Unable to locate package
spark-master E: Unable to locate package spark-worker E: Unable to
locate package spark-history-server E: Unable to locate package
spark-python
谢谢
> http://www.webupd8.org/2014/03/how-to-install-oracle-java-8-in-debian.html
> http://www.webupd8.org/2012/09/install-oracle-java-8-in-ubuntu-via-ppa.html
在Ubuntu上进行Java8的全自动安装
$apt-get update
$apt-get -y install software-properties-common
$add-apt-repository -y ppa:webupd8team/java
$echo debconf shared/accepted-oracle-license-v1-1 select true | debconf-set-selections
$echo debconf shared/accepted-oracle-license-v1-1 seen true | debconf-set-selections
$apt-get update
$apt-get -y install oracle-java8-installer
(见https://newfivefour.com/docker-java8-auto-install.html)
之后你可以简单地运行pip install pyspark.
总结
以上是编程之家为你收集整理的python – Ubuntu通过apt-get安装apache spark全部内容,希望文章能够帮你解决python – Ubuntu通过apt-get安装apache spark所遇到的程序开发问题。
如果您也喜欢它,动动您的小指点个赞吧