腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Hadoop实操

专注Apache Hadoop，CDH和HDP的实操，如安装部署，安全配置，排障过程，经验分享，性能

专栏作者

964

文章

2344990

阅读量

704

订阅数

0915-7.1.7-Kafka Connectors for SAP HANA测试

数据 kafka hana sap 测试

Kafka原生没有提供SAP HANA的Connector，GitHub开源项目Kafka Connectors for SAP提供了kafka与SAP之间的Connector，可实现定时全量或增量的拉取SAP HANA数据发送到Kafka。详细信息，参考GitHub：https://github.com/SAP/kafka-connect-sap/tree/master

2024-04-10

1150

0898-7.1.7-如何在CDP中为Kafka集成OpenLDAP

kafka kerberos SSL 证书 https 腾讯云测试服务

3.进入CM>Kafka>配置> Inter Broker Protocol，选择SASL_PLAINTEXT

2022-12-14

8350

0891-CDP Private Cloud Base 7.1.8正式GA

hive 大数据 kafka hbase api

八月再见，九月你好，今天是九月一日，新学年开始，Cloudera正式发布CDP Base 7.1.8和Cloudera Manager 7.7.1。这个版本引入了诸多新功能，比如通过EC提升Ozone的存储效率，Cloudera Manager的HA，多NameNode支持，全面支持Impala4.0，Hive性能提升，HDFS/Schema Registry血缘功能的增强，改进Ranger RMS，以及实时平台的全面增强。 1.平台支持增强 1.新的操作系统支持 CDP Private Cloud Ba

2022-09-02

9261

0887-7.1.4-如何在CDP中为Kafka启用Kerberos认证及使用

kafka kerberos 访问管理

1.文档编写目的在CDP集群中启用了Kerberos认证，那么Kafka集群能否与Kerberos认证服务集成呢？本文主要讲述如何通过Cloudera Manager为Kafka集群启用Kerberos认证及客户端配置使用。内容概述 1.修改Kafka配置 2.配置客户端 3.客户端测试Producer和Consumer 测试环境 1.RedHat7.6 2.CM版本7.3.1和CDP版本7.1.4 3.采用root用户 4.Kafka2.4.1 2.修改Kafka配置 1.登录Cloudera Man

2022-08-26

9420

0878-1.6.2-如何在CDP7.1.7中安装SSB

postgresql flink 大数据 kafka hive

1.文档编写目的 SQL Stream Builder(SSB)是Cloudera提供的基于Flink-SQL的实时流计算Web开发平台，它提供了一个交互式的Flink SQL编辑器，让用户可以方便的使用SQL访问一个source比如Kafka中的数据写入到一个sink比如Hive中，具体可以参考Fayson的上一篇文章《0877-1.6.2-SQL Stream Builder(SSB)概述》。本文主要介绍如何在CDP中安装SSB，SSB与Apache Flink同属于Cloudera Streaming

2022-04-18

1.5K0

0862-CDP Private Cloud Base 7.1.7正式GA

专用宿主机 kafka yarn node.js hive

2021年8月6日 1.升级增强 1.CDH6升级 CDH6客户可以直接从CDH 6.1.x, 6.2.x和6.3.x集群原地升级到CDP Private Cloud Base，而不需要搭建一个新的集群。 2.回滚操作文档支持从CDH6升级到CDP7.1.7的回滚操作；支持从HDP3升级到CDP7.1.6的回滚操作； 3.新的升级指南现在docs.cloudera.com网站上提供了一个新的Upgrade Companion，为所有CDP升级相关活动提供一个集中的文档中心。Upgrade Compan

2021-08-23

9080

0854-7.1.6-如何在安全的CDP集群中安装SMM并使用

kafka kerberos windows 腾讯云测试服务

本篇文章主要介绍如何在CDP7.1.6集群中配置SMM（Streams Messaging Manager）服务。它为Kafka集群提供了一个监控仪表板。在CDH6中安装该服务需要部署parcel包和安装节点软件包管理器，而在CDP7中则不需要上述操作，能够直接在CM界面中进行添加服务操作。

2021-07-05

1K0

0848-7.1.4-Kafka Connect启动失败异常

该问题是由产品BUG导致的，在Kafka配置中搜索“plugin.path”，添加插件地址，默认为/opt/cloudera/parcels/CDH/lib/kafka_connect_ext/libs/

2021-07-05

6120

0834-CDP Private Cloud Base 7.1.6正式GA

yarn node.js https kafka 网络安全

https://docs.cloudera.com/cdp-private-cloud-base/7.1.6/manager-release-notes/topics/cm-release-notes-731.html

2021-04-19

9020

0803-什么是Apache Ranger - 5 - Hive Plugin

kafka apache 大数据 lucene/solr hive

《0800-什么是Apache Ranger - 4 - Resource vs Tag Based Policies》

2020-08-20

1.3K0

0780-6.3.3-如何在离线环境下安装Streams Message Manager(SMM)

2.将下载的csd文件拷贝至/opt/cloudera/csd目录下，并重启cloudera-scm-server服务

2020-06-04

8370

0766-6.3.3-如何实现Kafka跨网络访问

kafka linux 编程算法 tcp/ip hadoop

在使用Kafka时会遇到内外网的场景，即Kafka集群使用内网搭建，在内网和外网均有客户端需要消费Kafka的消息，同时在集群内由于使用内网环境通信，因此不必太过考虑通信的加密，所以在内网使用非安全的协议也能够通信，但对于外网环境出于安全考虑，只允许通过安全的协议访问Kafka集群，本文档介绍如何基于双网卡来配置Kafka。

2020-05-16

3K0

0755-如何使用Cloudera Edge Management

apache 大数据 java kafka 数据库

Cloudera Data Flow(CDF)作为Cloudera一个独立的产品单元，围绕着实时数据采集，实时数据处理和实时数据分析有多个不同的功能模块，如下图所示：

2020-03-25

1.6K0

0748-5.14.4-Kafka的扩容和缩容

kafka javascript

在Kafka集群资源使用已超出系统配置的资源时，或者有大量资源闲置造成资源浪费的时候，需要分别通过扩容Kafka和缩容Kafka来进行调整。本篇文章Fayson主要介绍如何进行Kafka的扩容和缩容，以及变更后的Kafka集群如何进行负载均衡的操作。

2020-02-24

1.6K0

0749-5.14.4-如何实现Kafka Broker节点磁盘数据Balance

Kafka的数据目录可以配置一个或多个，通常这些目录是分布在不同的磁盘上用于提高K集群的读写性能，同时也可以提升消息的存储空间。

2020-02-24

1.5K0

从开发到生产上线，如何确定集群大小?

kafka 大数据

在 Flink 社区中，最常被问到的问题之一是：在从开发到生产上线的过程中如何确定集群的大小。这个问题的标准答案显然是“视情况而定”，但这并非一个有用的答案。本文概述了一系列的相关问题，通过回答这些问题，或许你能得出一些数字作为指导和参考。

2020-02-10

1.1K0

0742-什么是Apache Ranger - 2

大数据 apache hive kafka lucene/solr

作者：Eric Lin (林晨辉)， Cloudera高级售后技术支持工程师。毕业于Monash大学计算机科学， Sir John Monash的奖学金获得者。曾就业于数据收集公司如Hitwise（现为Experian的子公司）和Effective Measure，担任高级工程师，负责设计，开发和管理用于采集，处理和报告网络数据的平台（基于PHP，Java和CDH）。现任职Cloudera，担任高级售后技术支持工程师，主要擅长解决在CDH生态系统中出现的各种疑难杂症。

2020-02-10

1.2K0

0501-使用Python访问Kerberos环境下的Kafka(二)

kafka kerberos python https

在前面的文章Fayson介绍了一种Python访问Kerberos环境下Kafka的文章，参考《0500-使用Python2访问Kerberos环境下的Kafka》，本篇文章主要介绍另一种方式访问Kerberos环境下的Kafka。

2019-11-28

1.6K0

0522-Confluent获D轮融资1.25亿，估值25亿

kafka apache 数据库 sql 开源

Confluent创始人Neha Narkhede，CEO Jay Kreps和Jun Rao

2019-11-28

9180

0529-5.15.0-这次玩儿大了，找不回了

大数据 api kafka github hadoop

前两天客户问了一个问题，HDFS上删除的数据还能不能恢复？碰到这个问题第一反应“在执行命令的这个用户下垃圾回收站找到恢复不就的了？”，用户删除数据发现操作失误的时间并不长也没有超过垃圾回收站的清空时间，但是无论怎么找也找不到被删除的数据，这次真的玩儿大了。。。

2019-11-28

1.2K1

点击加载更多

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态