首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

如何在Cloudera Quickstart下将Spark Notebook设置为Hue?

在Cloudera Quickstart下将Spark Notebook设置为Hue的步骤如下:

  1. 首先,确保已经安装和启动了Cloudera Quickstart虚拟机。
  2. 打开浏览器,输入Cloudera Quickstart虚拟机的IP地址,访问Cloudera Manager的Web界面。
  3. 在Cloudera Manager中,选择"Services"选项卡,然后选择"Hue"服务。
  4. 在Hue服务页面,点击"Actions"下拉菜单,选择"Add Role Instances"。
  5. 在弹出的对话框中,选择要将Spark Notebook添加到的主机,并选择要添加的角色为"Spark Notebook"。
  6. 点击"Continue"继续。
  7. 在下一个页面,可以选择将Spark Notebook添加到现有的Hue Load Balancer或创建一个新的Hue Load Balancer。
  8. 根据需求选择相应的选项,并点击"Continue"。
  9. 在下一个页面,可以选择要为Spark Notebook分配的资源。
  10. 根据需求选择相应的选项,并点击"Continue"。
  11. 在下一个页面,可以选择要为Spark Notebook分配的数据库。
  12. 根据需求选择相应的选项,并点击"Continue"。
  13. 在下一个页面,可以选择要为Spark Notebook分配的存储。
  14. 根据需求选择相应的选项,并点击"Continue"。
  15. 在下一个页面,可以选择要为Spark Notebook分配的网络配置。
  16. 根据需求选择相应的选项,并点击"Continue"。
  17. 在下一个页面,可以查看Spark Notebook的配置摘要。
  18. 确认配置无误后,点击"Continue"。
  19. Cloudera Manager将开始配置Spark Notebook,并在完成后显示成功消息。
  20. 现在,可以通过访问Hue的Web界面来使用Spark Notebook了。

请注意,以上步骤仅适用于Cloudera Quickstart环境下将Spark Notebook设置为Hue。对于其他环境或平台,请参考相应的文档或官方指南进行设置。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

何在Hue中添加Spark Notebook

、Impala、HBase、Solr等,在Hue3.8版本后也提供了Notebook组件(支持R、Scala及python语言),但在CDH中Hue默认是没有启用SparkNotebook,使用Notebook...在前面Fayson也介绍了《Livy,基于Apache Spark的开源REST服务,加入Cloudera Labs》、《如何编译Livy并在非Kerberos环境的CDH集群中安装》、《如何通过Livy...CDH集群提交作业》、《如何打包Livy和Zeppelin的Parcel包》和《如何在CM中使用Parcel包部署Livy及验证》,本篇文章Fayson主要介绍如何在Hue中添加Notebook组件并集成...测试版本 1.CM和CDH版本5.14.2 前置条件 1.Hue服务已安装且正常运行 2.Livy服务已安装且正常运行 2.Hue添加Notebook ---- 1.使用管理员登录CM控制台,进入Hue...2.创建Spark Notebook则需要依赖Livy服务,需要在集群中部署Livy服务并在Hue中配置Livy环境。

6.6K30

CDP私有云集群自动化部署

— 斯科特·汉塞尔曼 关键步骤 一旦我们设置了配置文件和自动化环境,Ansible 将在无需干预的情况构建和配置集群。在以下部分中,我们介绍: 设置自动化环境(“运行器”)。.../cloudera-labs/cloudera-deploy/main/quickstart.sh && chmod +x quickstart.sh && ..../quickstart.sh 否则,如果我们在 Docker 之外运行,我们克隆cloudera-deploy git 存储库,然后运行centos7-init.sh脚本,该脚本安装 Ansible.../centos7-init.sh 配置凭证 您可以在没有任何凭据的情况运行,但理想情况,我们将设置一个配置文件,其中包含云凭据(如果部署在公共云上)和 CDP 许可证文件(如果你想使用一个)的路径。...大多数配置设置设置合理的默认值,由 Cloudera Manager 或 playbook 本身设置,因此您只需要设置特定于您的环境的那些设置

1.9K30

0800-5.16.2-如何禁用Hue中Oozie的部分Action

为了防止业务用户使用存在风险的Action(:Shell Action可以通过编写Shell命令获取操OS的信息问题),现需要将Hue中部分存在风险的Action禁用,本篇文章主要介绍如何禁用Hue中...测试环境 1.Redhat7.4 2.CM和CDH版本5.16.2 禁用Oozie Action 1.登录Cloudera Manager控制台,进入Hue服务的配置界面 ?...2.在搜索栏输入“hue*.ini”,在检索到的配置项中增加如下配置: [notebook] [[interpreters]] [[[impala]]] name=Impala...2.hue.ini配置文件默认开启了所有的Shell Action及大部分的功能模块(:Files Browser、Indexs等),我们可以通过Hue的高级配置来Hue进行瘦身,只保留我们需要的功能模块配置...3.通过配置文件屏蔽功能是对所用用户生效,当然也可以在用户管理界面用户的Group进行权限设置,这个是针对用户group进行功能限制,界面如下: ?

1.4K30

0867-7.1.6-HueSpark Notebook与Livy集成问

1.文档编写目的 本篇文章主要介绍如何使用解决CDP7.1.6的Hue中的Spark Notebook与Livy无法进行集成的问题。...文档概述 1.Spark Notebook集成Livy 2.验证 3.总结 测试环境 1.操作系统Redhat7.6 2.CDP7.1.6 3.使用root用户操作 4.集群已启用Kerberos 2....修改配置 1.修改Hue的源码(Hue Server节点的都进行修改) [root@c1 ~]# cd /opt/cloudera/parcels/CDH/lib/hue/desktop/core/src...Submit Jar interface=livy-batch 6.修改Hue的配置 在Hue的配置中搜索hive-site.xml,添加如下配置设置访问hive的方式Kerberos...的Web UI页面,执行一条Spark SQL语句 4.总结 1.Hue本身是模拟用户来执行的, 再通过安全认证的方式访问Livy再去让Livy模拟用户,这样就会导致一个问题, Livy只会认为你是

92020

0648-6.2.0-配置Senty服务

1.1 启用Sentry服务前 1.确定安装Sentry服务的前置条件,参考《0634-6.2.0-如何在CDH中安装Sentry服务》的前置章节。 2.设置Hive的仓库目录权限。 ?...设置此参数会阻止对非服务用户访问Hive Metastore。这可以禁止Hive CLI,Spark和Sqoop应用程序与Hive服务的交互。...设置Hue以管理Sentry权限时,请确保正确设置了用户和组。连接到Sentry的每个Hue用户必须与服务器操作系统中的用户相同,以便Sentry可以对Hue用户进行身份验证。...1.从Cloudera Manager进入Sentry服务,点击“配置”,搜索“admin”,在“sentry.service.admin.group”属性中增加hive,huespark用户组,如果有请忽略该步骤...参考《如何在启用Sentry的CDH集群中使用UDF》。 提示:代码块部分可以左右滑动查看噢 天地立心,为生民立命,往圣继绝学,万世开太平。

1.2K40

HUE简介及编译

放弃不难,但坚持很酷~ 一、HUE简介 Hue是一个开源的Apache Hadoop UI系统,最早是由Cloudera Desktop演化而来,由Cloudera贡献给开源社区,它是基于Python...很早以前就听说过Hue的便利与强大,一直没能亲自尝试使用,下面先通过官网给出的特性,通过翻译原文简单了解一Hue所支持的功能特性集合: 默认基于轻量级sqlite数据库管理会话数据,用户认证和授权,可以自定义...,其NoteBook支持多种编程语言,比如py-spark、scala等 支持Pig编辑器,并能够提交脚本任务 支持Oozie编辑器,可以通过仪表板提交和监控Workflow、Coordinator和Bundle...停止hue 一般情况,直接使用Ctrl + c来停止hue服务 如果hue在后台运行的话,可以使用kill命令: ps -ef | grep hue | grep -v grep | awk '{print...# 121行,"_"去掉。

3.8K10

0536-5.15.0-如何使用Hue集成RDBMS数据库

1 文档编写目的 Hue是一个以Hadoop平台基础的Web客户端工具,Hue不仅可以集成大数据平台的Hive、Impala、HBase、Solr等组件,提供易于操作的Web界面。...同样在3.8版本以后还提供了Notebook组件(支持多种编程语言),可以参考Fayson前面的文章《如何在Hue中添加Spark Notebook》。...Hue同时也支持集成RDBMS数据库(Oracle、Postgresql、MySQL等),本篇文章Fayson以MySQL例介绍如何在Hue中集成MySQL数据库。...注意:name属性RDBMS数据库中的某个库名 2.在上面配置了librdbms的数据库配置信息后,要在Hue界面上能够看的到该库,还需要在hue*.ini配置中增加Notebook相关的配置信息,...3.完成上述配置后,使用hue管理员登录,用户组配置RDBMS访问权限 ? 选择有权限访问的Group ? 完成上述配置即可,登录Hue进行测试。

1K10

Step by Step 实现基于 Cloudera 5.8.2 的企业级安全大数据平台 - Kerberos的整合

一般我们 TGT 的存放文件,称为 Kerberos Confidential 文件,默认的存放目录/tmp,文件名则由 krb5cc 和用户的 id 组成,例如“/tmp/krb5cc_0”root...在Cloudera Manager Server上安装openldap-clients; Cloudera Manager创建了超级管理员principal,使其能够有权限在KDC中创建其他的principals...在 Cloudera Manager 上启用 Kerberos 的过程中,会自动做以下的事情: 集群中有多少个节点,每个账户就会生成对应个数的 principal ; 每个对应的 principal...A: 提交spark作业的时候需要指定 spark master = yarn mode = cluster Q: Beeline报错,Failed to find any Kerberos tgt。...A: 因为sudo权限下生成的credetial不能用于非sudo权限的beeline,也就是说不要在申请ticket的时候使用sudo,在执行beeline的时候使用非sudo。

80220

0721-5.10.0-CM接管rpm方式安装的无CM的CDH集群

Cloudera Manager来进行管理,本文档介绍如何使用Cloudera Manager来接管一个无Cloudera Manager管理的CDH集群。...修改/var/lib/zookeeper/version-2的属主zookeeper ? 设置堆栈大小 ?...Spark安装成功 ? 重启相关的服务 ? 重新部署客户端配置 ? 重启成功 ? 6.5添加Hive 1.在CM上添加Hive服务 ? 2.Hive选择依赖关系 ?...2.Oozie服务选择依赖关系 ? 3.选择角色,保持与之前一致 ? 4.设置数据库 ? 5.指定Oozie共享库目录和数据目录,与之前的安装保持一致 ? 6.启动Oozie服务 ?...6.8添加Hue 1.在CM上添加Hue ? 2.Hue选择依赖关系 ? 3.选择角色,与之前安装时一致 ? 4.设置数据库 ? 5.启动Hue ? 6.Hue服务添加成功 ? 7.访问Hue ?

1.1K20

CDH5.15和CM5.15的新功能

当然Cloudera在中间发布了CDH6的Beta版,参考《Cloudera Enterprise 6 Beta发布》,《如何在Redhat7.4安装CDH6.0.0_beta1》和《如何在CDH6.0.0...Manager可以Flume配置通过TLS与Kafka sources,sinks和channels进行通信。...spark.sql.parquet.int96TimestampConversion设置true,在读取由Impala写的parquet文件时,不会将UTC的任何调整应用到服务器的本地时区。...默认情况,新建复制计划只会使用5个连接。 如果你设置0或者更多,BDR将会按你设置的数字使用多线程。 如果你设置0或者更小,BDR将会使用单个连接以及单线程。 该功能支持的最低版本是5.15。...创建或编辑复制计划时,你可以复制计划配置中止,当出现快照差异比较失败时。 2.2.HDFS ---- 现在可以使用Cloudera ManagerHDFS启用不可变的快照。

1.9K20

0724-6.2.0-CM接管rpm方式安装的无CM的CDH集群

Spark Hive Oozie Impala Hue 前置准备 在安装前需要做一些前置准备,如下: 1.修改hosts文件以及hostname 2.禁用SELinux 3.关闭防火墙 4.设置交换分区...修改/var/lib/zookeeper/version-2的属主zookeeper ? 设置堆栈大小 ?...2.Hive选择依赖关系 ? 3.选择角色,与之前的安装保持一致 ? 4.设置数据库 ? 5.Hive的目录,确保与之前安装配置的一致 ? 6.启动Hive ? 7.Hive安装成功 ?...2.Oozie服务选择依赖关系 ? 3.选择角色,保持与之前一致 ? 4.设置数据库 ? 5.指定Oozie共享库目录和数据目录,与之前的安装保持一致 ? 6.启动Oozie服务 ?...6.8 添加Hue 1.在CM上添加Hue ? 2.Hue选择依赖关系 ? 3.选择角色,与之前安装时一致 ? 4.设置数据库 ? 5.启动Hue ? 6.Hue服务添加成功 ?

97840
领券