如何从anaconda发行版的tar文件安装pyspark？
从anaconda发行版的tar文件安装pyspark可以按照以下步骤进行：
- 首先，从Anaconda官方网站（https://www.anaconda.com/products/individual）下载适用于您操作系统的Anaconda发行版的tar文件。
- 打开终端或命令提示符，并导航到下载的tar文件所在的目录。
- 使用以下命令解压缩tar文件：tar -xvf Anaconda3-xxxx.tar.gz其中，"Anaconda3-xxxx.tar.gz"应替换为您下载的tar文件的实际名称。
- 解压缩完成后，进入解压缩后的目录：cd Anaconda3-xxxx
- 运行以下命令以安装Anaconda：./Anaconda3-xxxx.sh根据提示，按照默认设置或根据您的需求进行安装。
- 安装完成后，激活Anaconda环境：source ~/.bashrc
- 创建一个新的conda环境并激活它：conda create --name myenv conda activate myenv
- 使用conda安装pyspark：conda install pyspark
- 安装完成后，您可以使用pyspark命令启动pyspark。
请注意，以上步骤假设您已经正确安装了Anaconda发行版的tar文件，并且已经配置好了环境变量。如果您遇到任何问题，请参考Anaconda官方文档或寻求相关支持。
相关·内容
1回答
如何从anaconda发行版的tar文件安装pyspark？
python、pyspark、anaconda
我需要为蟒蛇安装pyspark。我的机器没有互联网连接，因此，这将无法工作。它超时了。我也试过了它试着去上网。我不明白pyspark-2.3.1.tar
如何在anaconda下安装这个<e
浏览 17提问于2018-07-25得票数 0
1回答
如何让Python库在Spark YARN上工作
python、apache-spark、pyspark
如果我想使用python库来完成特定的任务，比如NLTK或BeautifulSoup，我可以在本地机器上使用Spark来完成，但是同样的事情在Spark on YARN上就不起作用了。下面是一个示例代码：from pyspark.sql.types import StringType
def html_parsingorg.apache.spark.sql.execution.python.BatchEvalPythonExec$$anonfu
浏览 8提问于2017-02-22得票数 1
5回答
从.tar.gz向Anaconda安装模块
python-3.x、anaconda
当我想将模块安装到Anaconda时，我运行conda install。但是，现在我有了一个.tar.gz文件，并希望安装这个文件。怎么做？
浏览 15提问于2017-07-18得票数 36
回答已采纳
1回答
在员工节点上安装火花模块
python、numpy、apache-spark、pyspark
我可以从ipython笔记本上运行pyspark，但是一旦我添加了第二个工作节点，我的代码就会停止运行并返回一个错误。我很确定这是因为我的主节点上的模块对worker节点不可见。我试着导入numpy，但是它没有工作，即使我通过anaconda在我的工人身上安装了numpy。我用同样的方式安装在主人和工人身上。
但是，按照乔希·罗森的建议，我确保在工作节点上安装了库。包括我的
浏览 6提问于2015-06-25得票数 6
回答已采纳
1回答
如何使用虚拟环境(包括python3解释器)来打包吡火花代码？
python-3.x、pyspark、virtualenv、hadoop-yarn、python-venv
我正试图让我的火花放电应用程序在纱线集群上运行。应用程序使用某些需要python3的库。然而，纱线集群使用python2，没有安装python3。是否有一种方法可以用python3和所有核心python3库来打包我的pyspark应用程序。
我一直遵循这些步骤来创建虚拟环境。#environment --conf spark.yarn.appMasterEnv.PYSPARK_PYTHON=.Pyspark应用程序最初是因为这个原因而失败的。我手动地将
浏览 3提问于2020-02-12得票数 5
4回答
pyspark: pip安装找不到版本
pip、pyspark
我正在尝试使用pip install安装pyspark，如下所示。但是我得到了以下错误。(python_virenv)edamame$ pip install pyspark Could not find a version that satisfiesthe requirement pyspark (from versions: )有谁知道吗？
浏览 7提问于2016-07-16得票数 6
2回答
在Ubuntu中安装lpsolve来使用python？
python、installation、lpsolve
阅读其他问题；不幸的是，这些问题与此无关。使用本教程：包含以下文件的文件：
教程说需要的文件
浏览 4提问于2015-03-15得票数 0
回答已采纳
1回答
使用没有互联网的conda安装python包
python、conda
我在公司防火墙后面，希望从.bz2文件中安装一个python包。我验证了我的python版本为3.6.5，并从下载了适当的包conda install path_to_.bz2file
我看到了几个例子，其中提到了提取和运行setup.py文件。提取后没有找到任何setup.py文件。可能与pypi不确定有关。我没有任何互联网连接在这台机器上，所以必须寻找离线<e
浏览 3提问于2020-08-09得票数 2
回答已采纳
1回答
在空隙环境中更新Anaconda包
python-2.7、updates、redhat、anaconda
出于监管方面的原因，我的公司部署了一个气隙很大的Red Hat环境，其中安装了Python Anaconda和R。如何在这样的环境中更新Anaconda包？我可以通过FTP将文件从我自己的机器移动到环境中，但不能从有空气间隙的环境中直接访问互联网。我通常会用下面这样的代码更新我的anaconda包：
conda update scipy
浏览 1提问于2015-01-14得票数 2
1回答
如何在anaconda python发行版中安装第三方工具
14.04、python、anaconda
我在位置安装了anaconda python发行版：现在我想安装一个第三方工具essentia。它不能使用pip安装。所以我必须下载并构建这些文件。指令是用此链接语言给出的。
但是安装并没有反映在anaconda发行版中。当我在anaconda中导入包时，它说没有找到模
浏览 0提问于2018-03-14得票数 0
3回答
jupyter中的PySpark SparkContext名称错误'sc‘
apache-spark、ipython、pyspark、anaconda、jupyter-notebook
我是pyspark的新手，我想在我的Ubuntu 12.04机器上使用Ipython notebook来使用pyspark。下面是pyspark和Ipython notebook的配置。Anaconda2 4.0.0和anaconda的路径：bin conda-meta envs etc Examplesimports inc
浏览 5提问于2016-04-23得票数 0
6回答
无法安装pyspark
python、pyspark
我正在尝试安装pyspark，如下所示：我得到了这个错误：已经安装了pypandoc
有什么办法可以安装pyspark吗？
浏览 6提问于2018-07-24得票数 15
1回答
Anaconda和不同的python构建相同的python版本。
python、anaconda、conda
不久前，当我想在Anaconda python发行版中使用Conda安装一个包时，我看到Conda希望将python包从2.7.10-0更新到2.7.10-1。它是相同的python版本(本例中为2.7.10)。检查频道的内容，我看到同一个python版本有多个包：python-2.7.10-1.tar.bz2 16.7Mpython-2.7.10-3.tar<
浏览 0提问于2016-03-10得票数 0
回答已采纳
5回答
在pip安装pyspark之后运行pyspark
pip、pyspark
我想安装pyspark在我家里的机器上。我做到了 pip install pysparkCould not find valid SPARK_HOME while searching ['/home/user', '/home/user
浏览 163提问于2017-09-19得票数 18
回答已采纳
8回答
ImportError:火花工作者上没有名为numpy的模块
python、numpy、apache-spark、pyspark
bin/pyspark --master yarn-client --num-executors 60，shell上的导入numpy很好，但是在kmeans中失败了。不知怎么的，执行者们没有安装过，这是我的感觉。我在任何地方都找不到好的解决办法，让工人们知道“无生气”的事。我试着设置PYSPARK_PYTHON，但这也不起作用。/pyspark/worker.py", line 98, in m
浏览 7提问于2016-02-05得票数 19
回答已采纳
1回答
将Anaconda Python版本从3.4升级到3.6 *脱机*？
python、anaconda、upgrade、offline
我在一个没有互联网接入的安全Linux (CentOS)环境中。安装的Anaconda的python版本是3.4，我需要将其升级到3.6。有没有一种简单的方法可以离线完成这项工作？
浏览 4提问于2018-11-17得票数 0
6回答
如何在anaconda中导入pyspark
python、apache-spark、anaconda、pyspark
我正在尝试导入和使用pyspark和蟒蛇。在安装spark并设置$SPARK_HOME变量之后，我尝试了：这不会起作用(当然)，因为我发现我需要告诉python在$SPARK_HOME/python/下查找pyspark。我尝试将$SPARK_HOME/python/的内容复制到ANACONDA_HOME/lib/python2.7/site-packages/，
浏览 2提问于2015-11-20得票数 16
1回答
Pip安装到一个文件夹，但jupyter从另一个文件夹提取包
python、pip、jupyter
作为开场白，我使用的是带有Anaconda发行版的Mac！(对mac来说是新手，所以请耐心听我说) 我的问题 我正在使用pip install来安装软件包(simpy、plotly等)。但是，包不能正确导入，看起来我的Anaconda发行版是从另一个文件夹中提取的。我如何重定向我的anaconda发行版以使用正
浏览 27提问于2021-03-23得票数 0
2回答
Apache Spark PySpark连接到MSSQL数据库JDBC
python、apache-spark、pyspark
我在Windows 10 64位操作系统上使用Python 3.7.3，我有Python的Anaconda发行版。我已经下载了Jar JDBC文件，并将其放入Spark文件夹(位于pyspark的Anaconda文件夹中)。"C:/Users/ypv0rfh/AppData/Local/Continuum/anaconda3/pkgs&#
浏览 37提问于2019-12-31得票数 1
1回答
Numpy不适用于64位窗口上的32位Python
python、numpy、activepython
32位安装在Windows 10 64位上.当我尝试import numpy时，我得到以下错误：
ActivePython 2.7.8.10 (ActiveState Software Inc.) based我已经安装了来自的
浏览 5提问于2015-08-30得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
活动推荐
腾讯云开发者
