我已经按照office文档安装了cdh6.2，并且运行正常。但我仍然希望编写pySpark代码并以色调运行它，而不是在pySpark-shell中编写pySpark代码。我已经在CHD的色调配置页面尝试了很多配置。0.6.0的livy，livy服务器日志： 19/05/09 18:01:25 INFO server.AccessManager: AccessControlManager acls
浏览 9提问于2019-05-09得票数 1
回答已采纳
我最近尝试在Hue UI中设置Spark Notebook。我在VirtualBox中运行Cloudera CDH 5.8。Spark notebook在Livy服务器上工作，我安装了livy服务器。我还从Hue.ini文件的黑名单中删除了spark。但是，我仍然不能在Hue UI中得到Spark Notebook。
更新:现在我可以访问
浏览 11提问于2016-08-10得票数 0
我正在尝试使用Hue在Oozie上运行一个简单的python脚本。我使用已安装的anaconda包裹，所以我还添加了Cloudera管理器，火花配置(火花服务高级配置段(安全阀门)用于火花-conf/火花-env.sh)export PYSPARK_PYTHON=/opt/cloudera/parcel
浏览 1提问于2017-10-20得票数 1
回答已采纳
4回答
当我给出属于Cloudera /admin的默认用户名和密码时，它不起作用。我现在无法登录到色调门户。有人能帮忙吗？
浏览 3提问于2015-09-06得票数 3
回答已采纳
我已经在Anaconda下安装了，当我尝试运行pyspark (从使用PySpark启动笔记本的部分)时，我会收到以下错误：
$ pyspark (最近一次调用)：File"/opt/cloudera/parcels/Anaconda/bin/jupyter"，第4行，从jupyter_core.command导入主ImportError:没有名为jupyter_core
浏览 4提问于2017-02-21得票数 1
回答已采纳
我已经在pyspark中使用SQLContext创建了一个数据帧。然而，当我调用lmplot时，它会导致一个错误。我不确定我错过了什么。下面是我的代码(我使用的是jupyter笔记本)：
df = s
浏览 0提问于2017-12-28得票数 0
我正在尝试将描述的share_jobs设置设置为false。
文档说要访问http://myserver:port/dump_config以找到色调配置的位置。正如您可能从/var/run/中猜到的那样，每次引导时都会重新创建目录，因此对hue.ini的更改不会被保存，并且似乎不会影响http://myserver:port/dump_config上列出的
浏览 9提问于2014-08-21得票数 0
回答已采纳
我尝试从笔记本电脑启动bin/spark-shell和bin/pyspark，并在yarn-client模式下连接到Yarn集群，但我收到了相同的错误/etc/hadoop/conf.cloudera.yarn1/topology.py 10.0.240.71
java.io.IOException: Cannotrun program "/etc/
浏览 2提问于2015-07-14得票数 5
1回答
我正在尝试使用色调蜂蜡来连接我公司的蜂巢数据库。首先，是否可以使用我的mac上安装的色调来连接远程Hive服务器？如果是这样，我该如何找到在我们的私有服务器上运行的Hive服务器的地址呢？我唯一能做的就是输入' hive‘并在hive shell中放置一些sql查询。我已经安装了HUE，但不知道如何将它连接到远程Hive服务器。任何建议都将不胜感激。
浏览 1提问于2017-10-31得票数 0
4回答
有没有人尝试/成功地在Hadoop上安装Hue而没有Cloudera？
我已经到了可以用hbase和hive可靠地复制hadoop集群的地步，并且可以在大约15分钟内将其全部设置好。我想让休和这一切一起，而不必回去重新做我的设置与Cloudera。
浏览 0提问于2013-12-14得票数 15
回答已采纳
1回答
我在大学里运行一个由16台机器组成的cloudera集群。几天前，一些机器出现故障，我不得不将它们的托管服务转移到其他机器上。其中一项服务就是色调。我试图移动服务器，但当我试图启动它时，我收到以下消息：
Command failed to start: com.cloudera.cmf.service.config.ConfigGenException: com.cloudera.cmf.service.config.ConfigGenException: Unable
浏览 1提问于2014-01-27得票数 1
我正在尝试在cloudera quickstartvm 5.5的配置单元中创建表，但它显示“日志初始化”并且需要很长时间，即使在很长一段时间后它也不能在配置单元中创建表，也不能将表导入到配置单元。我在stackoverflow中看到了很多关于同一问题的问题，但找不到答案。如果有人知道或得到了答案，请分享这方面的信息。提前谢谢..
浏览 0提问于2016-04-13得票数 1
我试图在我的Cloudera集群上使用Juputer笔记本电脑 (PySpark内核)运行一个示例的Spark结构化流应用程序，但是我似乎不能让它使用所需的包。：
1)编辑kernel.json
"PYSPARK_SUBMIT_A
浏览 1提问于2019-07-15得票数 1
Spark 1.2.1 (使用Scala2.10.3)是作为Ambari设置的一部分安装的。我已经安装了Livy-Server，以便能够使用Hue中的Spark。hue.ini文件中的可信内容如下：
# Host address of the Livy Server.", "type": "impala"},{"name": "Hive
浏览 3提问于2015-09-16得票数 0
回答已采纳
1回答
Apache端口从虚拟集群转发？
、、、、
虚拟集群是使用Vagrant创建的，并安装Cloudera管理工具。设置是一个主服务器、三个从服务器和一个客户端，客户端运行的是Hue服务器。通过Vagrant有7180端口，从主机转发到本地主机(NAT网络)-所以我可以访问本地主机的管理器:7180-小菜一碟。在客户机上，我有端口8888 (Hue，NAT网络)通过Vagrant转发到本地主机。我仍然只能通过VM的IP (主机专用网络)或主机名(
浏览 3提问于2013-11-08得票数 0
回答已采纳
我正在尝试在cloudera VM上的Pyspark中运行Python脚本$ which pyspark在启动spark之后，我尝试了：告诉我“没有定义'spark‘的名字”
$ ./bin
浏览 0提问于2017-02-24得票数 0
我需要在亚马逊EC2上运行太空火花脚本。脚本使用这样的库，如numpy，pandas等。问题是我在/usr/local/lib64/python2.7/site-packages中安装了numpy，默认情况下这个文件夹不在PYTHONPATH中。所以当我使用export PYTHONPATH=$PYTHONPATH:/usr/local/lib64/python2.7/site-packages时，通常<e
浏览 1提问于2015-08-05得票数 0
我想在SparkR上使用Jupyter笔记本，我想在我的Spark集群上安装Jupyter上的IR内核。
我可以找到在pySpark中使用Jupyter的帮助，但在SparkR中找不到帮助。我已经在AWS-EMR集群上创建了我的Spark集群。
浏览 1提问于2016-05-25得票数 0
我有一个Cloudera集群，在这个集群上，我将大量数据存储在一个作为Parquet存储的Hive表中。该表由整数batch_id进行分区。我插入一批新行的工作流程是首先将行插入到暂存表中，然后插入到大型累积表中。我正在使用一个本地模式的脚本来完成这个任务。我尝试在运行时设置不同的Hive配置值，但是没有效果：
设置hive.input.format = org.apache.
浏览 2提问于2018-02-27得票数 0
2回答
这是我第一次尝试在Oozie中运行一个包含Pyspark脚本的Spark。请注意，我在我的本地机器(有12G RAM的vm)中使用cdh5.13来构建工作流。(c_path_out)oozie.use.system.libpath=Truedryrun=False
nameNode=hdfs:
浏览 0提问于2019-01-01得票数 0
回答已采纳
云服务器
ICP备案
对象存储
实时音视频
云直播
腾讯云开发者
