我已经下载了Spark1.2.0(为Hadoop2.4预先构建)。在它的快速启动文档中，它说：
Using Scala version 2.10.4 (JavaHotSpot(TM) 64-Bit Server VM, Java 1.8.0_25)
我以前没有安装任何Scala发行版。
浏览 7提问于2014-12-21得票数 7
我有一个“myprogram.py”和我的“myprogram.scala”需要在我的spark机器上运行。我如何上传和启动它们？我一直使用shell进行转换和调用操作，但现在我想在spark机器上启动一个完整的程序，而不是每次都输入单个命令。此外，我相信这将使我更容易对我的程序进行更改，而不是开始在shell中输入命令。我在Ubuntu 14.04中进行了独立安装，在单机上，而不是集群上，使用的是spark 1.4.1。
我在网上浏览了spark文档，但我只在集群上找到了如何做到这一点的说明。请在这一点
浏览 2提问于2015-08-04得票数 1
1回答
为文本找到多个源
、、、
当我将Java程序编译成jar文件时。使用spark-submit运行时的错误消息如下所示： at org.apache.spark.deploy.SparkSubmit.org$apache$spark$deploy$SparkSubmit为什么代码仅在spark-submit模
浏览 14提问于2021-03-16得票数 1
回答已采纳
安装星火似乎有两种方法。通过从，下载预构建的火花版本(例如spark-2.4.5-bin-hadoop2.7.tgz)来安装火花时
- do I need to additionally install `java` command(I guess no, because I saw the downloaded Spark release contains `.在通过运行pip install pyspark安装Spark时，是否已经为pip install pyspark和Sca
浏览 3提问于2020-03-14得票数 0
django with spark on local machine (windows) 现在，我想使用spark在大数据规模上做到这一点。使用django作为后端框架处理请求，使用spark进行处理和建模 Django+pyspark on local machine (windows) and spark on remote cluster我设置了一个django项目，并在一个由两台linux机器和hdfs组成的集群上设置了spark。我使用pyspark创建了一个到linu
浏览 115提问于2019-06-25得票数 0
但是，当我尝试用start-all.sh启动集群时，遇到了一个问题:即，Spark安装在不同工作人员的不同目录中。但是，尽管每个工作人员的路径不同，但主服务器使用主服务器对$SPARK_HOME的定义对每个工作人员调用$SPARK_HOME。假设我不能在每个工作人员的同一路径上安装火花到主站，我如何才能让主程序识别不同的工作路径？
编辑#1 Hmm，找到了，强烈建议这是当前的实现--假设所有员工的$SPARK_HOME都是相同的。
浏览 0提问于2014-06-24得票数 2
现在我的spark+hadoop已经安装在linux服务器上了。如何将我的spark代码从eclipse启动到spark集群(在linux上)？
任何建议。
浏览 4提问于2015-11-08得票数 2
EigenValueDecomposition$.symmetricEigs(EigenValueDecomposition.scala:128) at org.apache.spark.mllib.linalg.distributed.RowMatrix.computeSVD(RowMatrix.scala:258) at org.apache.spark.mllib.linalg.distributed.RowMatrix.computeSVD(RowMatrix.scala库正常工作：
15/03/05 20:07:03 INFO
浏览 3提问于2015-03-10得票数 3
回答已采纳
IBM installer for Apache Spark，在我的例子中是IBM_Spark_DK_2.1.0.0_Linux_s390x.bin，它提供了以下选项来执行安装程序(我缩短了选项列表，使其更具可读性)：
whereinterface mode for the installer
浏览 3提问于2017-02-14得票数 0
1回答
我已经在本地windows机器上的linux中安装了Hadoop/YARN。在同一台windows机器(不在VM中)上，我已经安装了Spark。在windows上运行spark时，我可以读取HDFS中存储的文件(在linux中)。我想，这是因为Windows和linux用户是不同的，windows用户没有在Linux中编写文件的权限。
使用spark将文件从windows存储到HDFS (linux )的正
浏览 1提问于2018-09-16得票数 0
回答已采纳
2回答
我正在尝试安装一个内核，它能够执行星星之火，并遇到Toree。我安装了toree，当我运行内核列表时它会出现。我按照下面的页面进行安装：对如何在木星上得到火花笔记本有什么想法吗？
我知道这里没有太多的信息，如果需要更多的话。让我知道。
浏览 0提问于2016-03-29得票数 7
我需要在我的笔记本电脑上安装spark 1.0.0，它有64位操作系统Windows8，java(java版本"1.7.0_25")。我下载了"spark-1.0.0-bin-hadoop2“。但是我不知道如何安装spark 1.0.0。我也在谷歌上搜索了一下，但是我找不到。那么，您能告诉我在Windows8操作系统上的安装步骤，以及在这个过程中还需要什么其他东西吗？
浏览 2提问于2014-07-08得票数 1
我是Apache Spark的新手。我使用的是Windows操作系统，而spark安装在Linux操作系统上，它是远程的。是否可以使用Java API在Spark配置中添加ip地址和端口？请分享spark java示例。
提前谢谢。
浏览 1提问于2017-02-07得票数 0
我正在尝试在Mac上安装MLLib。在linux上，我只能通过这篇文章()来安装gfortran。我在我的Mac上安装了gfortran。BLAS: Failed to load implementation from: com.github.fommil.netlib.NativeRefBLAS
我不确定要按照什么步骤才能在Mac上成功安装我运行的是MacOS10.9和Spark 1.1.0 (预构建)。
浏览 1提问于2014-10-17得票数 0
1回答
我知道像pytesseract这样的解决方案是存在的，但不确定它们是否能很好地处理PySpark，因为tesseract-ocr需要安装在linux机器上。
浏览 1提问于2022-02-22得票数 0
我已经将Python包从默认通道安装到这个环境中；但是，当我尝试import pyarrow时，Python解释器给我一个未定义的符号错误： Import Error: /test-env/lib/python3.7/site-packages/pyarrow/lib.cpython-37m-x86_64-linux-gnu.so: undefined symbol: _ZNK5arrow6Status8ToStringB5cxx11Ev从SO上的其他线程来看，我推测这是由于编译器
浏览 167提问于2019-03-08得票数 5
3回答
我是spark的新手。我已经下载了为hadoop版本2.6预建的spark版本1.3.1。我解压并导航到该文件夹，然后键入以下命令：./bin/spark-shell，对于该命令，我得到一个错误，指出没有找到spark-shell命令。我使用git bash在windows上做了同样的事情，我得到了一个错误消息：在尝试运行spark之前，我还需要做什么吗？
浏览 1提问于2015-05-09得票数 4
回答已采纳
2回答
我在windows系统上使用cygwin构建spark。当我这样做的时候，我可以很好地构建，并且它在dos2unix spark/build/mvn[INFO] Spark Project GraphX ...............................SKIPPED
[INFO] Spark Pro
浏览 4提问于2015-09-24得票数 2
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
