首页
学习
活动
专区
工具
TVP
发布

SmartSi

专栏作者
270
文章
583456
阅读量
53
订阅数
BookKeeper 简介
Apache BookKeeper 是企业级存储系统,旨在提供强大的持久性保证、一致性和低延迟。最初是由雅虎研究院(Yahoo! Research)开发,作为 Hadoop 分布式文件系统(HDFS)NameNode 的高可用(HA)解决方案,以解决严重的单点故障问题。
smartsi
2022-02-04
1.6K0
Kafka 删除 Apache ZooKeeper 的依赖
目前,Apache Kafka 使用 Apache ZooKeeper 来存储元数据,分区位置和主题配置之类的数据存储在 Kafka 之外一个单独的 ZooKeeper 集群中。2019 年,为了打破这种依赖关系并将元数据管理交由 Kafka,为此引入这个KIP-500 计划[1]。
smartsi
2022-01-18
1.1K0
大数据组件安装指南
安装篇 Flink 安装与启动 Hadoop 安装与启动 Hive 安装与配置 HBase 伪分布式模式安装与启动 ZooKeeper 集群模式安装与启动 ZooKeeper 伪集群模式安装与启动 使用Docker搭建Zookeeper集群 Kafka 安装与启动 Presto 安装与启动 Spark 安装与启动 Ranger 安装与启动 ElasticSearch 安装与启动 Solr 安装与启动 Redis 安装与启动 Zeppelin 安装与初体验 Grafana 安装与启动 Prometheu
smartsi
2021-01-20
4080
Kafka 监控工具之CMAK
CMAK(Cluster Manager for Apache Kafka) 是由 Yahoo 开源的 Kafka 集群管理平台。我们可能听到更多的是 kafka-manager。主要是因为误用了 Apache 的商标,所以才从 kafka-manager 改名为 CMAK。
smartsi
2020-10-27
4.3K0
使用Docker构建ZooKeeper镜像
这篇文章中我们将使用 Docker 创建 Zookeeper 镜像,包括如何将 Zookeeper 安装到容器,如何配置 ZooKeeper 应用程序以及如何在宿主机和容器之间共享数据卷。
smartsi
2020-08-31
2.6K0
使用Docker搭建Zookeeper集群
上述命令在后台运行一个名为 zookeeper-standalone 的容器。由于 Zookeeper 是’快速失败’,因此最好通过 --retart参数设置容器在意外停止时自动重启。默认是 no,表示不重启。-p 参数将宿主机端口 8080 与容器端口 8080 映射。通过如下命令查看运行中的 Zookeeper 容器:
smartsi
2020-08-17
6.3K2
HBase 伪分布式模式安装与启动
安装 HBase 之前默认我们已经完成了 Hadoop、ZooKeeper 安装,如果还没有安装可以参考如下博文:
smartsi
2019-11-28
2.5K0
深入理解HBase架构
在这篇博客文章中,我们主要深入看一下H Base 的体系结构以及在 NoSQL 数据存储解决方案主要优势。
smartsi
2019-11-28
1.6K0
ZooKeeper CLI
ZooKeeper 命令行界面(CLI)用于与 ZooKeeper 集合进行交互以进行开发。它有助于调试和解决不同的选项。要执行 ZooKeeper CLI 操作,首先打开 ZooKeeper 服务器(bin/zkServer.sh start),然后打开 ZooKeeper 客户端(bin/zkCli.sh)。客户端启动后,你就可以执行以下操作:
smartsi
2019-11-27
1.1K0
ZooKeeper ACL权限控制机制
ZooKeeper 的 ACL 权限控制和 Unix/Linux 操作系统的ACL有一些区别,我们可以从三个方面来理解 ACL 机制,分别是:权限模式(Scheme)、授权对象(ID)和权限(Permission),通常使用 scheme:id:perm 来标识一个有效的ACL信息。
smartsi
2019-11-26
2.7K0
ZooKeeper 伪集群模式安装与启动
要在你的计算机上安装 ZooKeeper 框架,请访问该链接并下载最新版本的ZooKeeper。 到目前为止,最新稳定版本的 ZooKeeper是3.4.12(ZooKeeper-3.4.12.tar.gz)。
smartsi
2019-11-26
2.1K0
ZooKeeper可视化监控ZKUI
ZKUI 提供了一个图形化管理界面,可以针对 ZooKeepr 的节点值进行 CRUD 操作,同时也提供了安全认证。
smartsi
2019-11-26
1.7K1
Kafka 安装与启动
Kafka 依赖 ZooKeeper,如果你还没有 ZooKeeper 服务器,你需要先启动一个 ZooKeeper 服务器。可以先参考ZooKeeper 安装与启动来安装 ZooKeeper。ZooKeeper 配置如下:
smartsi
2019-11-26
9790
ZooKeeper Java API
ZooKeeper API 的核心部分是 ZooKeeper 类。在构造函数中提供一些参数来连接 ZooKeeper,并提供如下方法:
smartsi
2019-11-26
1.9K0
ZooKeeper日志配置
ZooKeeper 使用 SLF4J 作为日志的抽象层,默认使用 Log4J 来做实际的日志工作。使用两层日志抽象看起来似乎是多余的。这里简要的说明如何来配置 Log4J,虽然 Log4J 非常灵活且功能强大,但是也有一些复杂,这里只是简要的介绍一下基本的用法。
smartsi
2019-11-26
4K0
ZooKeeper 如何使用Watcher
ZooKeeper 允许客户端向服务端注册一个 Watcher 监听,当服务端的一些指定事件触发了这个 Watcher,那么就向指定客户端(注册了对应 Watcher 监听的客户端)发送一个事件通知来实现分布式的通知功能。整个 Watcher 注册与通知过程如下图所示:
smartsi
2019-11-26
2.7K0
Spark Streaming 与 Kafka0.8 整合
在这里我们解释如何配置 Spark Streaming 以接收来自 Kafka 的数据。有两种方法,一种为使用 Receivers 和 Kafka 高级API的旧方法,以及不使用 Receivers 的新方法(在 Spark 1.3 中引入)。它们具有不同的编程模型,性能特征和语义保证。就目前的 Spark 版本而言,这两种方法都被为稳定的API。
smartsi
2019-08-08
2.2K1
Spark Streaming与Kafka如何保证数据零丢失
Spark Streaming 是一种构建在 Spark 上的实时计算框架,它扩展了 Spark 处理大规模流式数据的能力。Spark Streaming 的优势在于:
smartsi
2019-08-07
6620
ZooKeeper 安装与启动
要在你的计算机上安装ZooKeeper框架,请访问该链接并下载最新版本的ZooKeeper。 到目前为止,最新稳定版本的ZooKeeper是3.4.12(ZooKeeper-3.4.12.tar.gz)。
smartsi
2019-08-07
7440
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档