专栏首页云服务器购买消息队列-腾讯云消息队列 CKafka
原创

消息队列-腾讯云消息队列 CKafka

腾讯云消息队列 CKafka,分布式、高吞吐量、高可扩展性的消息服务,100%兼容开源 Apache Kafka 0.9 0.10

腾讯云消息队列 CKafka点击查看详情

消息队列 CKafka 简介

消息队列 CKafka(Cloud Kafka)是一个分布式、高吞吐量、高可扩展性的消息系统,100%兼容开源 Kafka API(0.9、0.10版本)。CKafka 基于发布/订阅模式,通过消息解耦,使生产者和消费者异步交互,无需彼此等待。CKafka 具有数据压缩、同时支持离线和实时数据处理等优点,适用于日志压缩收集、监控数据聚合等场景。

腾讯云消息队列 CKafka 的特性

兼容开源

100% 兼容 Apache Kafka 0.9 0.10版本,迁移上云0成本。兼容开源上下游组件,对于Kafka Streams、Kafka Connect 及 KSQL 无缝支持。

上下游生态

支持与 EMR、COS、容器、流计算、无服务器函数、日志服务等13+云上产品打通,实现快速一键部署。

高可靠

消息队列 CKafka 集群性能强劲,生产性超越开源方案;此外,消息队列 CKafka 分布式的部署,集群稳定性也有很好的保障。

高扩展性

支持集群水平扩容,实例无缝升配,底层系统根据业务规模自动弹性伸缩,上层业务无感知。

业务安全

不同租户间网络隔离,实例的网络访问在账户间天然隔离;支持管理流的 CAM 鉴权及数据流的 SASL 权限控制,严格控制访问权限。

统一运维监控

提供腾讯云平台整套的运维服务,包括租户隔离、权限控制、消息堆积查询、消费者详情查看等多维度监控告警等运维服务。

应用场景

日志分析系统

消息队列 CKafka 结合大数据套件 EMR,构建完整的日志分析系统。首先通过部署在客户端的 agent 进行日志采集,并将数据聚合到消息队列 CKafka,之后通过后端的大数据套件如 Spark 等进行数据的多次计算消费,并且对原始日志进行清理,落盘存储或进行图形化展示。

流数据处理平台

消息队列 CKafka 结合流计算 SCS , 用于实时/离线数据处理及异常检测,满足不同场景需要:

  • 对实时数据进行分析和展示,并做异常检测,快速定位系统问题。
  • 消费历史数据进行落盘存储和离线分析,对数据进行二次加工,生成趋势报表等。

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

相关文章

  • cdn-腾讯云cdn

    目前主要的CDN调度方式依旧是依赖DNS地址进行就近分配节点,但是由于中国的复杂网络情况以及运营商IP库以及出口的不规范,经常存在调度失误的现象。腾讯云CDN调...

    用户3570397
  • 移动应用安全-腾讯云移动应用安全APP加固

    腾讯云移动应用安全提供稳定、有效的移动应用安全服务,为用户提供移动应用全生命周期的安全解决方案

    用户3570397
  • 云直播

    云直播又称为标准直播 LVB(原云直播) ,由腾讯云提供专业、稳定、快速的直播接入和分发服务

    用户3570397
  • xfs文件系统修复方法

    首先尝试mount和umount文件系统,以便重放日志,修复文件系统,如果不行,再进行如下操作。

    党志强
  • 架构之路(一):目标

    原文出处: 自由飞 标准来源于目标 前文说过,评价架构好坏是一个很主观的东西。既然大家写出来的程序都能跑,凭什么就说你架构好,我的架构就差?拿出来大家评评理...

    wangxl
  • 【tkinter系列 第三课 messageBox窗口部件 】

    python中通常我们写程序,显示结果和操作都是在终端区,如果要想实现一个有显示界面的程序那该怎样实现呢?python中有好几个库都可以实现,这个系列我们一起来...

    用户7054460
  • 架构之路(一):目标

    天策
  • .Net Core 学习之路-基础

    .Net Core出来好久了,一直在了解,但始终没有应用到实际项目中.... 准备用.net core搞个SSO,才发现它和.net framework的变化并...

    蓝夏
  • 2018年末Java主流技术,还有哪些是你不知道的?

    美的让人心动
  • AI前沿|结合深度学习和类比预报预测极端天气

    基于类比预报、深度学习模式识别技术和基于影响的自动标签策略构建数据驱动框架预测极端天气。训练数据来自大集合的全耦合地球系统模式,并利用标注后的对流层中部的大尺度...

    bugsuse

扫码关注云+社区

领取腾讯云代金券