大数据实战演练-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

大数据实战演练

专栏成员

157

文章

577314

阅读量

60

订阅数

推荐 | 颜值与功能双在线的 Zookeeper 可视化工具：PrettyZoo

zookeeper https 网络安全 github git

今天在群里和群友大大讨论 kafka 的问题，因为用到 zookeeper 了嘛，之前一直用的 zookeeper cli 命令行，操作比较繁琐，要一遍遍的手敲命令，这时候有网友一句话点醒了我：你最好下载一个zk工具。大佬说的是啊，如果有好用的可视化工具，我肯定用。

2022-11-17

3.1K0

Kafka基础（一）：基本概念及生产者、消费者示例

node.js kafka zookeeper

Kafka 起初是由 LinkedIn 公司采用 Scala 语言开发的一个多分区、多副本且基于 Zookeeper 协调的分布式消息系统，现已被捐献给 Apache 基金会。目前 Kafka 已经定位为一个分布式流式处理平台，它以高吞吐、可持久化、可水平扩展、支持流数据处理等多种特性被广泛使用。目前越来越多的开源式分布处理系统如：Storm、Spark、Flink 等都支持与 Kafka 集成。

2019-06-19

8530

HBase原理（一）：架构理解

hbase TDSQL MySQL 版大数据存储 zookeeper

Apache HBase 是基于 Hadoop 构建的一个分布式的、可伸缩的海量数据存储系统。常被用来存放一些海量的(通常在TB级别以上)、结构比较简单的数据，如历史订单记录，日志数据，监控 Metrics 数据等等，HBase 提供了简单的基于 Key 值的快速查询能力。

2019-05-28

1.3K0

zookeeper ACL 权限控制

zookeeper 网站 node.js tcp/ip

zooKeeper使用acl（Access Control List）来控制对其znode（zooKeeper数据树的数据节点）的访问。不过，zookeeper的acl并不像HDFS系统的acl一样，可以递归控制权限。zookeeper的acl不是递归的，仅适用于特定的znode。比如/app这个znode，设置一些权限，只能某用户可以访问，但是/app/status的权限是与/app没有关系的，默认是world:anyone:cdrwa。

2019-04-17

6.2K0

solr基本概念

zookeeper 分布式 lucene/solr xml

其实简单的说，Solr是一个基于Apache Lucene 项目的开源企业级搜索平台，是用JAVA编写的、运行在Servlet容器中的一个独立的全文搜索服务器（换句话说就是个JAVA-WEB APP），并具有类似REST的HTTP/XML和JSON的API。

2019-03-15

1.5K0

使用zkcli.sh来管理SolrCloud配置文件

node.js bash bash 指令 lucene/solr zookeeper

Solr官方提供了一个Zookeeper插件 – zkcli.sh，使用该工具，可以实现将本地文件上传到zookeeper的Znode上。

2019-03-15

1.4K0

Mysql数据导入SolrCloud

lucene/solr 数据库 sql node.js zookeeper

Solr主要是做数据搜索的，那么Solr的数据是从哪里来的呢？总不能一条一条的插入吧。Solr也有这方面的考虑，比如配置Dataimport将mysql数据批量导入Solr中。环境说明：

2019-03-15

4.3K0

如何基于Ambari禁用Kerberos

node.js zookeeper kerberos

前面的文章介绍了《Kerberos原理--经典对话》、《Kerberos基本概念及原理汇总》、《基于ambari的Kerberos安装配置》、《Windows本地安装配置Kerberos客户端》，《Kerberos实战》，接下来再来聊聊基于Ambari如何禁用Kerberos，可不是在页面上点击禁用Kerberos那么顺利噢，有的时候服务会启动失败啊~

2019-01-22

2.7K0

Linux NTP时钟同步

ntp linux 大数据 udp zookeeper

时钟同步在大数据方向，用到的地方很多。举个例子来说吧，像Zookeeper、RegionServer服务都是需要实时和各节点进行通信的。假如各节点差超过30s，那么RegionServer会由于Zookeeper会话超时而停止服务。所以时钟同步在大数据里被广泛应用且必不可少的一步。

2018-12-17

19.6K2

ambari的服务启动顺序如何设置

javascript hbase 编程算法 TDSQL MySQL 版 zookeeper

角色是组件的另一个名称（例如：NAMENODE，DATANODE，RESOURCEMANAGER，HBASE_MASTER等）。顾名思义，可以告诉Ambari关于应该为堆栈中定义的组件运行命令的顺序。例如：“应在启动NameNode之前启动ZooKeeper服务器”。或者“只有在NameNode和DataNodes启动后才能启动HBase Master”。这可以通过在stack-version文件夹中包含role_command_order.json文件来指定。

2018-12-13

3.4K0

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态