学习
实践
活动
专区
工具
TVP
写文章

大数据实战演练

专栏作者
152
文章
364289
阅读量
59
订阅数
国内网络编译,Ambari 2.7.6 全部模块源码编译笔记
该版本相对 2.7.5 版本以来,共有 26 个 contributors 提交了 114 个 commits 以及修改了 557 个文件。详情见:https://github.com/apache/ambari/compare/release-2.7.5...release-2.7.6
create17
2023-02-13
1100
如何禁止ambari-server.log中显示cloudera地址异常栈的解决方案分享
是的,今天就来说一下 ambari-server.log 日志中出现上述错误的原因及解决办法。
create17
2023-02-13
820
Ambari部署HDP时,Select Version时页面数据来源解析
如上图所示,Ambari 部署 HDP 时,Select Version 时页面数据是哪来的呢?今天就来解析下。
create17
2023-02-13
1040
Ambari 编译部署后,视图怎么没有了?
如上图所示,最近有学员问我:老师,Ambari 源码编译安装后,发现视图列表为空,这是怎么回事呢?
create17
2022-11-17
1850
hdp 不更新了,有没有办法将 Apache Hadoop 代替 hdp 并集成到 Ambari 中呢?
今天咱来聊一聊 Ambari 如何集成 Apache Hadoop 哈,自从 cloudera 公司将 hortonworks 公司收购后,hdp 就不迭代更新了,这对 Apache Ambari 也产生了很大影响,毕竟 Ambari 与 hdp 耦合性很强。
create17
2022-11-17
5391
Ambari 自定义服务集成 | quicklinks 快速链接不显示的排查方案
最近有两位学员都反馈在 Ambari 集成服务时,遇到了添加 quicklinks 快速链接不显示的问题。今天就给大家分享下如何排查解决这个问题。
create17
2022-11-17
1620
如何查看HDP各组件版本信息,两种办法
大家好,我是 create17。自从 2017 年就开始围绕 Ambari 做相关工作。期间做过 Ambari 安装部署、页面生产级别的汉化、Ambari 自定义服务集成、前端页面开发、后端 API 接口开发、Ambari Server HA、部分原生 bug 修改,以及 HDP 相关常用组件的基本使用。
create17
2022-11-17
3110
发现 Ambari HDP 服务告警项 UNKWN 了
发现 Zookeeper 服务告警项出现 UNKOWN,Response 显示:'ascii' codec can't decode byte 0xe6 in position 0: ordinal not in range(128)
create17
2022-11-17
930
五千字介绍 | 全网稀有的Ambari自定义服务集成实战(全)
自从 2020 年开始,我就发觉网上使用 Ambari 的同学多了很多,随着 cloudera 收购 hdp 并进入收费模式,越来越多的企业选择了 Ambari 来管理大数据平台,Ambari 集成第三方服务的需求也就变得越来越常见。
create17
2022-11-17
3210
有惊无险,继gitee图床不能用的解决方案简单一说
2022年5月下旬,gitee突然宣布仓库需要审核通过后才能上线,这也就导致我平时写博客用的gitee图床外链也芭比Q了。秉着多一事不如少一事的态度,我还是打算将我的gitee图床的仓库重新申请开放,但审核后通知:图床外链不能作为公共仓库,如下图所示:
create17
2022-11-17
4720
Ambari安装hive服务,数据库Connection Failed
因为写 ambari 相关的文章比较多,所以有很多使用 ambari 的朋友加我好友,发现有很多初学者都会卡在一个地方,就是安装依赖 mysql 的服务会提示:MYSQL Connection: Error ,像安装 hive、oozie、ranger 等等服务都会遇到这个问题。
create17
2022-11-17
1990
干货 | 5000字教你如何使用命令行查看应用日志以及YARN应用日志相关参数解析
对于从事大数据相关工作的朋友来说,在平时应该会跟 yarn 打过不少交道。像 MapReduce on yarn,Spark on yarn,Flink on yarn 等都是需要将应用运行在 yarn 上面的。但是对于应用运行日志的查看,yarn 却不像寻常服务那样方便,确实是有一些门槛的。而今天,我们就来好好梳理运行在 yarn 上面的应用日志相关参数及查看方式,最后以查看 Flink on yarn 日志示例。
create17
2022-11-17
3250
干货 | YARN 应用日志相关参数解析及如何使用命令行查看应用日志
对于从事大数据相关工作的朋友来说,在平时应该会跟 yarn 打过不少交道。像 MapReduce on yarn,Spark on yarn,Flink on yarn 等都是需要将应用运行在 yarn 上面的。但是对于应用运行日志的查看,yarn 却不像寻常服务那样方便,确实是有一些门槛的。而今天,我们就来好好梳理运行在 yarn 上面的应用日志相关参数及查看方式,最后以查看 Flink on yarn 日志示例。
create17
2022-11-17
4890
实操 | 10分钟带你轻松掌握 Kafka 源码编译环境搭建,调试无忧!
众所周知,要研究 Kafka,阅读 Kafka 源码是必不可少的环节。因此,本文将介绍如何使用 idea 加载 Kafka 源码并编译的具体步骤。由于 Kafka 核心模块是用 Scala 语言开发,用 Gradle 编译和构建的,因此下面先介绍相关环境的安装配置。
create17
2022-11-17
3500
我有好几种办法让你访问 github 速度起飞,不信进来看!
Github镜像就是一个跟 Github 一模一样的网站,他会定时同步 Github 上的资源,国内访问 Github 镜像的速度较快,也可以在镜像下载仓库,平时逛逛 Github 也可以用这个镜像,反正比较快,缺点就是不能登录。
create17
2022-11-17
1.6K0
推荐 | 颜值与功能双在线的 Elasticsearch 可视化工具:Cerebro
之前访问 Elasticsearch 集群,都是用的 head 插件,倒是也能用,看看集群状态或者索引列表都很方便,但是复杂查询的话,总感觉力不从心。
create17
2022-11-17
3120
推荐 | 颜值与功能双在线的 Zookeeper 可视化工具:PrettyZoo
今天在群里和群友大大讨论 kafka 的问题,因为用到 zookeeper 了嘛,之前一直用的 zookeeper cli 命令行,操作比较繁琐,要一遍遍的手敲命令,这时候有网友一句话点醒了我:你最好下载一个zk工具。大佬说的是啊,如果有好用的可视化工具,我肯定用。
create17
2022-11-17
3770
Ambari 注册主机失败解决方案汇总
今天又有朋友咨询我 ambari 相关的问题,注册主机步骤出错。他说他试了好几次,无奈只能加我好友来寻求帮助。
create17
2022-11-17
2400
idea 开发必不可少的插件汇总
此插件可用来方便显示maven的依赖树。在没有此插件时,如果想看maven的依赖树需要输入命令行:mvn dependency:tree 才可查看依赖。如果想看是否有依赖包冲突的话也需要输入命令行等等的操作;而如果安装Maven Helper插件就可免去命令行困扰,通过界面即可操作完成。
create17
2022-11-17
3560
【史上最全】Hadoop 核心 - HDFS 分布式文件系统详解(上万字建议收藏)
Hadoop 分布式系统框架中,首要的基础功能就是文件系统,在 Hadoop 中使用 FileSystem 这个抽象类来表示我们的文件系统,这个抽象类下面有很多子实现类,究竟使用哪一种,需要看我们具体的实现类,在我们实际工作中,用到的最多的就是HDFS(分布式文件系统)以及LocalFileSystem(本地文件系统)了。
create17
2022-11-17
2390
点击加载更多
活动推荐
社区活动
腾讯云 x ES 三周年有奖征文
参与活动,赢取限量周边礼品
腾讯云自媒体分享计划
入驻社区,可分享总价值百万资源包
邀请好友加入自媒体分享计划
邀请好友,同享奖励 30 / 100 / 180 元云服务器代金券
关注
腾讯云开发者公众号
10元无门槛代金券
洞察腾讯核心技术
剖析业界实践案例
扫码关注腾讯云开发者
领券