首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Apache Hue 介绍

    通过使用Hue,可以在浏览器端的Web控制台上与Hadoop集群进行交互,来分析处理数据,例如操作HDFS上的数据,运行MapReduce Job,执行Hive的SQL语句,浏览HBase数据库等等。...2.Hue能做什么 访问HDFS和文件浏览 通过web调试和开发hive以及数据结果展示 查询solr和结果展示,报表生成 通过web调试和开发impala交互式SQL Query spark调试和开发...Pig开发和调试 oozie任务的开发,监控,和工作流协调调度 Hbase数据查询和修改,数据展示 Hive的元数据(metastore)查询 MapReduce任务进度查看,日志追踪 创建和提交MapReduce...,Streaming,Java job任务 Sqoop2的开发和调试 Zookeeper的浏览和编辑 另外,Hue 还支持 数据库(MySQL,PostGres,SQlite,Oracle)的查询和展示...3.Hue的架构 Hue是一个友好的界面集成框架,可以集成各种大量的大数据体系软件框架,通过一个界面就可以做到查看以及执行所有的框架。

    5K10

    Hue集成HDFS

    相信大家在看了《Hue的安装,配置,编译》之后,都已经成功把Hue安装好了。 ? 接下来,小菌为大家分享的是如何在Hue上集成HDFS!...把数据同步到每台节点上之后,我们接着需要修改hue安装目录下的文件 3.修改hue.ini cd /export/servers/hue-3.9.0-cdh5.14.0/desktop/conf vim...启动Hue也很简单 直接输入以下命令即可 cd /export/servers/hue-3.9.0-cdh5.14.0/ build/env/bin/supervisor 然后,来到我们的Hue的UI...看到类似这样的效果,说明我们的Hue集成HDFS就成功了 当然,大家在启动Hue的时候可能会遇到端口被占用的情况,具体的解决方案可以去看看《Hue启动异常,提示address already in use...》 那么本次的分享就到这里了,受益的小伙伴或者对大数据技术感兴趣的朋友们记得关注小菌哟(^U^)ノ~YO

    1.3K20

    HUE简介及编译

    通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据,例如操作HDFS上的数据,运行MapReduce Job等等。...很早以前就听说过Hue的便利与强大,一直没能亲自尝试使用,下面先通过官网给出的特性,通过翻译原文简单了解一下Hue所支持的功能特性集合: 默认基于轻量级sqlite数据库管理会话数据,用户认证和授权,可以自定义为...二、源码下载 hue版本库:http://cloudera.github.io/hue/latest/,目前HUE最新版是4.3.0。...三、准备工作 我下载HUE-3.12.0版本: http://gethue.com/downloads/releases/3.12.0/hue-3.12.0.tgz 下载tgz包,使用tar -zxvf...五、HUE编译问题汇总 通过make apps报错来提示需要下载哪些相关工具包: 1. error: command 'gcc' failed with exit status 1 ?

    3.9K10

    hue介绍系列01

    Hue介绍 Hue是一个可快速开发和调试Hadoop生态系统各种应用的一个基于浏览器的图形化用户接口。 ...Hue作用  1,访问HDFS和文件浏览  2,通过web调试和开发hive以及数据结果展示  3,查询solr和结果展示,报表生成  4,通过web调试和开发impala交互式SQL Query  5...,spark调试和开发  6,Pig开发和调试  7,oozie任务的开发,监控,和工作流协调调度  8,Hbase数据查询和修改,数据展示  9,Hive的元数据(metastore)查询  10,MapReduce...,直接下载包,安装很容易报错,更新python与ambari自带的python形成冲突。...直接yum install hue 注意由于权限问题,需要在core-site.xml中自定义配置: hadoop.proxyuser.hue.hosts=* hadoop.proxyuser.hue.groups

    25310

    HUE 设置hive默认参数

    注,本次演示使用的集群为腾讯云EMR-V3.4.0,HUE版本为4.10.0。查阅HUE代码,发现hive链接的客户端都是在本地生产的,也就是在 hiveserver2.py 中来完成初始化的。...该文件在EMR集群上的路径为  /usr/local/service/hue/desktop/libs/notebook/src/notebook/connectors/hiveserver2.py ,...图片本次需求说明:在使用HUE的时候,用户提交的HIVE hql任务,默认执行引擎为mr;并且在指定的YANR队列中运行,避免抢占资源影响其他任务。...当前EMR集群已经配置为公平调度,并为hue用户设置了专用的队列“hue_pool”。...file_resources, functions=functions, database=database )在EMR集群的master节点上进行修改,修改完成后在控制台重启HUE

    2.5K50

    如何使用Hue通过数据文件创建Collections

    1.文档编写目的 ---- 在CDH5.9版本及更新版本中,Hue新增一个全新工具从数据文件中创建Apache Solr的Collections,可以通过该工具轻松的将数据加载到Solr的Collection...过去,将数据索引到Solr是相当困难。这项任务涉及到编写一个Solr的Schema和一个morphlines文件,然后将一个Job提交给YARN来建索引。...这种做法往往需要较长的时间,现在Hue的新功能可以以界面的方式在几分钟内为您启动一个YARN的作业来创建索引工作。本篇文章主要介绍如何使用Hue通过数据文件创建Collections。...2.进入Indexs界面 [dq8n6i52oj.jpeg] 3.点击“Create Index”,选择类型为“File” [b9x4zgle7t.jpeg] 4.选择HDFS上的数据文件 [s9ajl7dqog.jpeg...jwkcnj7izs.jpeg] 5.点击“Next”,进入下一步 [lwrs9ga8z6.jpeg] 6.点击“Submit”提交作业 [94eipwir40.jpeg] 等待作业执行成功 7.作业执行成功,可以看到数据已加载到

    2K60

    0536-5.15.0-如何使用Hue集成RDBMS数据

    Hue同时也支持集成RDBMS数据库(Oracle、Postgresql、MySQL等),本篇文章Fayson以MySQL为例介绍如何在Hue中集成MySQL数据库。...测试环境 1.CM和CDH版本为5.15.0 2 Hue集成RDBMS数据库 需要集成RDBMS数据库,需要在Hue的配置中添加librdbms部分添加数据库连接信息。...注意:name属性为RDBMS数据库中的某个库名 2.在上面配置了librdbms下的数据库配置信息后,要在Hue界面上能够看的到该库,还需要在hue*.ini配置中增加Notebook相关的配置信息,...3 Hue测试RDBMS 1.登录Hue,可以看到添加的MySQL数据库 ? 切换至MySQL查询界面 ? 2.执行SQL操作 ?...4 总结 1.Hue集成RDBMS数据库需要在librdbms和notebook两个部分都需要添加相应的配置,否则在Hue界面上无法显示。

    1K10
    领券