在Zeppelin导入scala包(无jar)

文章/答案/技术大牛

发布

0回答

scala、apache-spark、apache-zeppelin

这是关于在Zeppelin笔记本上运行Spark/Scala的。为了更好地模块化和重组代码，我需要将现有的Scala类、包或函数导入到笔记本中，最好跳过创建jar文件(与PySpark中非常相似)。类似于：其中'myclass‘是在.scala文件中实现的。可能这个源代码需要驻留在Zeppelin的特定位置。

浏览 4提问于2018-07-14得票数 0

2回答

apache zeppelin附加存储库导入

java、scala、maven、apache-zeppelin、saddle

如何在zeppelin中导入额外的依赖项？我正在尝试在apache zeppelin中导入一个库(saddle)，但是...z.load("org.scala-saddle:saddle_2.10:1.3.0") 我也尝试过在图形用户界面中使用: 1.

浏览 0提问于2016-04-21得票数 3

1回答

在Zeppelin中执行spark中的scala代码

scala、apache-spark、apache-zeppelin

我想在Spark集群的Zeppelin上运行一个scala代码。例如:这是进入hdfs Spark“HelloWorldScala.scala”的代码： def main (arg: Array[String]):println("Print even numbers") } 我想在Zeppelin中

浏览 20提问于2020-02-07得票数 0

1回答

在齐柏林飞艇上安装CassandraInterpreter

scala、cassandra、cassandra-3.0、apache-zeppelin、datastax-java-driver

<init>(TemplateEngine.scala:170) at org.apache.zeppelin.cassandra.DisplaySystem$.<clinit>(DisplaySystem.scala) at org.apache.zeppe

浏览 1提问于2017-06-01得票数 1

回答已采纳

1回答

如何在Hortonworks中将外部jar库导入ZEPPELIN？

python、import、jar、dependencies、pyspark

我有一个HDP 2.5集群，我正在使用ZEPPELIN的%pyspark解释器来生成代码。我想使用一个库来帮助在python、java和scala中使用Spark中的时间序列分析，这里指定了：问题是我不知道如何导入和使用这个库到我的ZEPPELIN %pyspark解释器中。首先，我下载了名为“.jar -0.2.0-jar-with-Dependencies.jar”的jar文件。接下来，我将它保存在ZEPPELIN</e

浏览 1提问于2016-11-30得票数 4

2回答

Apache不能反序列化dataset："NoSuchMethodError“

scala、apache-spark、amazon-s3、apache-zeppelin

上面的两个命令在shell中工作得很好，只是在Zeppelin笔记本中就不行了(有关设置方式，请参阅 )。file:/Users/shafiquejamal/allfiles/scala/spark/zeppelin-0.7.2-/allfiles&

浏览 2提问于2017-08-20得票数 4

回答已采纳

1回答

如何告诉spark和zeppelin在AWS EMR中使用本地maven .m2目录？

maven、apache-spark、amazon-emr、apache-zeppelin

当我使用pyspark --package导入jar包时，EMR实例在/ .ivy /hadoop中创建了一个home目录。Zeppellin将在/var/lib/zeppelin/local-repo中创建一个名称为ID的目录我如何让pyspark、spark和zeppelin使用我本地的maven仓库(/usr/ .ivy我知道我可以使用pyspark --jars /local/p

浏览 2提问于2018-08-31得票数 0

1回答

-- SPARK_SUBMIT_OPTIONS中的文件在齐柏林飞艇中不起作用

pyspark、apache-zeppelin

我有一个python包，其中包含许多内置于.egg文件中的模块，我想在齐柏林飞艇笔记本中使用它。为了将这个包传递给zeppelin spark解释器，您可以通过conf/ zeppelin -env.sh中SPARK_SUBMIT_OPTIONS中的--files选项将其导出。当我通过SPARK_SUBMIT_OPTIONS中的-- .egg选项添加文件时，zeppelin notebook没有抛出错误，但我无法在zeppelin notebook中导

浏览 1提问于2017-02-03得票数 0

2回答

面向对象技术不是组件com的成员吗？

scala、orientdb、apache-zeppelin

我有一个OrientDB数据库，我想将它导入到齐柏林飞艇内的scala中。我正在学习提供的示例。然而，当我在齐柏林飞艇的笔记本上运行以下命令时import com.orientechnologies.orient.core.sql.query.OSQLSynchQuery

浏览 6提问于2016-04-19得票数 0

回答已采纳

1回答

在Windows 10或7中运行中的spark程序时出错

apache-zeppelin

，-r，：-l，C:\zeppelin\zeppelin-0.8.0-bin-all\zeppelin-0.8.0-bin-all/local-repo/spark，-g，火花调试 -警告:本地jar调试 -警告:本地jar C:\Users\vvellabo\10.120.44.23不存在，跳过。java:348)调试 -在org.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit

浏览 1提问于2018-07-29得票数 1

1回答

错误本地jar不存在

apache-zeppelin

java.lang.RuntimeException:警告:本地jar C：\齐柏林\齐柏林-0.8.0-bin-所有\bin\54480不存在，跳过。警告:本地jar C:\Zeppelin\zeppelin-0.8.0-bin-all\bin\10.10.10.122不存在，跳过。原生方法) at java.lang.Class.forName(Class.java:348) at org.apache.spark.util.Utils$.classForName(Utils.scala$.submi

浏览 1提问于2018-09-18得票数 0

2回答

ClassNotFoundException: org.apache.spark.repl.SparkCommandLine

scala、apache-spark、pyspark、apache-zeppelin

我是的新手，我尝试在本地运行它。我试着只运行一个简单的理智检查，看看sc是否存在，并得到下面的错误。我编译了它的火花和火花1.5 (我使用火花1.5)。:152) at org.apache.zeppelin.interpreter.ClassloaderInterpreter.open(ClassloaderInterpreter.java:74)在org.apache.zeppelin.interpreter.LazyOpenInterpreter.open(LazyOpenInterpreter.java:68)

浏览 1提问于2016-01-15得票数 6

1回答

无法在火花齐柏林飞艇中加载hivecontext

scala、apache-spark、hive、apache-zeppelin

除了我试图导入一个蜂箱上下文之外，一切都在正常工作。我在齐柏林飞艇的配置：System.getenv().get("SPARK_YARN_JAR")res1: String = /home/centos/zeppelin-R-rscala/interprete

浏览 2提问于2016-01-12得票数 1

回答已采纳

1回答

为什么齐柏林飞艇不支持--py-文件？

python、pyspark、apache-zeppelin

我有一个python包，它包含许多模块，内置到一个.egg文件中，我想在zeppelin笔记本中使用这个包。Acc到齐柏林文档，要将此包传递给齐柏林星火解释器，您可以通过conf/zeppelin-env.sh中的SPARK_SUBMIT_OPTIONS中的--file选项导出它。我对此有以下问题：在pyspark中，与-py- file一起提供的.egg文件正在工作(例如，我能够在pyspark中导入包中的模块)，而

浏览 3提问于2017-01-31得票数 7

1回答

无法在Apache Zeppelin中使用Cassandra解释器

cassandra、apache-zeppelin

在Zeppelin notebook中执行cassandra代码时，我在第一次运行时得到以下错误- java.io.IOException: Invalid argument at org.apache.zeppelin.cassandra.EnhancedSession.<init>(EnhancedSession.s

浏览 23提问于2020-04-30得票数 1

1回答

从Java调用Scala代码？

java、scala、interop、scala-java-interop

我正在使用Netbeans编写Scala和Java。 Netbeans为Scala项目生成了一个.jar文件。我尝试在Java项目中导入该文件。但是我无法将该.jar文件中的任何类导入到我的项目中。我还尝试将scala-library.jar ary.jar导入到java项目中，并且可以从该jar导入类。我想用Scala编写我的库，然后公开一个只

浏览 4提问于2009-09-03得票数 8

回答已采纳

2回答

在没有sbt的情况下创建和使用独立的黄曲柳jar

scala、sbt、scalaz

我希望创建独立的jar文件，并将其放入scalaz目录中，以使用没有sbt的scalaz。 sbt制作jar full/target/scala-2.9.1/scalaz-full_2.9

浏览 5提问于2011-11-17得票数 2

回答已采纳

1回答

齐柏林飞艇的星火RDD命令失败，但在星火壳中工作。

cassandra、apache-spark、spark-cassandra-connector、apache-zeppelin

已编译的齐柏林飞艇0.6快照，用:mvn-pflem-1.5 -Dspark.version=1.5.1 -Dhadoop.version=2.6.0 -Phadoop-2.4 -DskipTests干净包编译1.5.0-M2-SNAPSHOT.jar -Dspark.cassandra.connection.host=localhost" export ZEPPELIN_NOTEBOOK_DIR="/root-1.5.0-M2-SNAPSHOT.jar --deploy-mode clust

浏览 3提问于2015-10-15得票数 4

1回答

如何在Scala中导入Java包？

scala、import、package

我已经用编译好的Java类创建了一个jar文件。现在我想在Scala中导入它。但它不起作用。包名是se.mydomain.testproj，下面是一个小的Scala应用程序： println("Hello")} 我使用Eclipse并将jar文件添加到构建路径。在</

浏览 3提问于2011-11-06得票数 3

回答已采纳

2回答

如何在齐柏林飞艇上运行Spark来分析xml文件

scala、apache-spark、apache-zeppelin

齐柏林飞艇在开始导入com.databricks.spark.xml时需要一些参数吗？:1065)，org.apache.spark.repl.SparkIMain$Request.loadAndRun(SparkIMain.scala:1338)在org.apache.spark.repl.SparkIMain.loadAndRunReq(SparkIMain.scala:819) at org.apache.zeppelin.spark.SparkInterpreter.interp

浏览 2提问于2016-04-27得票数 1

回答已采纳

点击加载更多