腾讯云中间件的专栏-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯云中间件的专栏

专栏成员

273

文章

351350

阅读量

127

订阅数

腾讯云微服务3月产品月报 | TSE ZooKeeper 专业版正式商业化

腾讯云产品网关 zookeeper 微服务

云原生 API 网关（专业版）支持CLS 日志大盘，提供状态码、请求量、耗时、错误日志、用户行为和业务分析等多个维度视图，适用于使用了 CLS 的用户。

腾讯云中间件团队

2024-04-09

1350

Apache Pulsar 系列 —— 深入理解 Bookie GC 回收机制

zookeeper 文件存储

作者简介冉小龙腾讯云高级研发工程师 Apache Pulsar committer RoP maintainer Apache Pulsar Go client, Go Functions 作者及主要维护者背景 Apache Bookkeeper 是基于日志的一个持久化系统，所有的数据会以日志的形式存储到 Ledger 磁盘的 Entry Log 文件中，之后通过后台异步回收的形式来将 EntryLog 文件回收掉。但是在我们实际的使用场景中，发现很久之前的 EntryLog 文件无法被删除掉，对

腾讯云中间件团队

2022-09-08

9450

千亿级、大规模：腾讯超大 Apache Pulsar 集群性能调优实践

ide sdk go zookeeper java

导语近期，腾讯 TEG 数据平部 MQ 团队开发部署了一套底层运维指标性能分析系统（本文简称 Data 项目），目前作为通用基础设施服务整个腾讯集团。该系统旨在收集性能指标、上报数据以用于业务的运维监控，后续也将延用至前后端实时分析场景。腾讯 Data 项目选用 Apache Pulsar 作为消息系统，其服务端采用 CVM 服务器（Cloud Virtual Machine，CVM）部署，并将生产者和消费者部署在 Kubernetes 上，该项目 Pulsar 集群是腾讯数据平台部 MQ 团队接入的

腾讯云中间件团队

2022-07-27

8710

腾讯云消息队列TDMQ又一系列产品正式开启公测，戳文查看吧！

消息队列 CMQ 版 kafka 开源 apache zookeeper

导语消息队列 RocketMQ 版（TDMQ for RocketMQ，简称 TDMQ RocketMQ 版）在今日正式公测！TDMQ RocketMQ 是TDMQ系列产品中的一款分布式高可用的消息队列服务，兼容 Apache RocketMQ 的各个组件与概念，RocketMQ 4.6及以上版本的客户端几乎零改造接入。欢迎大家扫描文末二维码使用体验！ TDMQ RocketMQ 版的背景 RocketMQ作为典型的业务处理消息队列，主要用于处理订单，支付，积分等业务类型，对信息交换的准确性有极高的要求

腾讯云中间件团队

2022-01-21

1K0

Message deduplication 这里的去重与你想的可能不一样|Apache Pulsar 技术系列

zookeeper 消息队列 CKafka 版 kafka apache 消息队列 CMQ 版

导语 Apache Pulsar 是一个多租户、高性能的服务间消息传输解决方案，支持多租户、低延时、读写分离、跨地域复制、快速扩容、灵活容错等特性。腾讯云内部 Pulsar工作组对 Pulsar 做了深入调研以及大量的性能和稳定性方面优化，目前已经在腾讯内部业务TDBank落地上线。本文是Pulsar技术系列中的一篇，主要介绍Pulsar 的 Message Deduplication 特性，供大家参考，避免在使用过程中踩坑。 Message Deduplication背景介绍消息中间件产品设计中，对消

腾讯云中间件团队

2022-01-20

9570

腾讯云消息队列TDMQ RabbitMQ 版开启公测，文末有惊喜！

rabbitmq 开源消息队列 CMQ 版 kafka zookeeper

导语 1月6日，TDMQ RabbitMQ 版正式公测！TDMQ RabbitMQ 版是TDMQ系列产品中的一款子产品，是一款分布式高可用的消息队列服务，支持AMQP 0-9-1 协议，完全兼容开源 RabbitMQ 的各个组件与概念。欢迎大家扫描文末二维码使用体验！ TDMQ RabbitMQ 版的背景众所周知，RabbitMQ是一个历史比较悠久的消息队列中间件，它是使用Erlang语言开发的实现AMQP（Advanced Message Queue Protocol 高级消息队列协议）的

腾讯云中间件团队

2022-01-07

1.6K0

腾讯云CKafka重磅上线DataHub，让数据流转更简便

消息队列 CKafka 版消息队列 CMQ 版 kafka 编程算法 zookeeper

导语随着大数据时代的到来，各大互联网公司对于数据的重视程度前所未有，各种业务对数据的依赖也越来越重。有一种观点认为大数据存在 “3V” 特性：Volume, Velocity, Variety。这三个 “V” 表明大数据的三方面特征：量大，实时和多样。这三个主要特征对数据采集系统的影响尤为突出。多种多样的数据源，海量的数据以及实时高效的采集是数据采集系统主要面对的几个问题。我们想要在数据上创造价值，首先要解决数据获取的问题。因为在互联网发展中，企业内或不同企业之间建立了各种不同的业务系统，这些

腾讯云中间件团队

2021-12-22

1.1K0

深入解析Apache Pulsar系列（二） —— Broker消息确认的管理

zookeeper 存储 apache 消息队列 TDMQ 消息队列 CMQ 版

导语我们在之前的《深入解析Apache Pulsar系列之一 —— 客户端消息确认》中介绍过Apache Pulsar客户端的多种消息确认模式。这篇文章中，我们将介绍Broker侧对于消息确认的管理。作者简介林琳腾讯云中间件专家工程师 Apache Pulsar PMC，《深入解析Apache Pulsar》作者。目前专注于中间件领域，在消息队列和微服务方向具有丰富的经验。负责TDMQ的设计与开发工作，目前致力于打造稳定、高效和可扩展的基础组件与服务。客户端通过消息确认机制通知Bro

腾讯云中间件团队

2021-12-21

1.9K0

ZooKeeper系列文章：ZooKeeper 源码和实践揭秘（三）

zookeeper https node.js 网络安全自动驾驶

导语 ZooKeeper 是个针对大型分布式系统的高可用、高性能且具有一致性的开源协调服务，被广泛的使用。对于开发人员，ZooKeeper 是一个学习和实践分布式组件的不错的选择。本文对 ZooKeeper 的源码进行简析，也会介绍 ZooKeeper 实践经验，希望能帮助到 ZooKeeper 初学者。文章部分内容参考了一些网络文章，已标注在末尾参考文献中。 ZooKeeper简介 1. 初衷在业务中使用了 ZooKeeper 作为消息系统，在开发和运维过程中，也遇到一些问题，萌发了阅读

腾讯云中间件团队

2021-12-17

6130

RoP重磅发布0.2.0版本：架构全新升级，消息准确性达100%

html node.js zookeeper apache 编程算法

导语日前，腾讯云中间件团队联合StreamNative社区正式发布了RoP 0.2.0版本，该版本在架构上全新升级，用户在使用中可以完全避免消息丢失、消息重复消费、只能消费一部分 Partition 的数据等问题。作者简介冉小龙腾讯云中间件团队研发工程师 Apache Pulsar committer RoP 作者及 Maintainer Apache BookKeeper contributor Apache Pulsar Go client 作者 Apache Pulsar Go

腾讯云中间件团队

2021-12-01

5420

ZooKeeper系列文章：ZooKeeper 源码和实践揭秘（二）

zookeeper 数据结构

导语 ZooKeeper 是个针对大型分布式系统的高可用、高性能且具有一致性的开源协调服务，被广泛的使用。对于开发人员，ZooKeeper 是一个学习和实践分布式组件的不错的选择。本文对 ZooKeeper 的源码进行简析，也会介绍 ZooKeeper 实践经验，希望能帮助到 ZooKeeper 初学者。文章部分内容参考了一些网络文章，已标注在末尾参考文献中。 ZooKeeper简介 1. 初衷在业务中使用了 ZooKeeper 作为消息系统，在开发和运维过程中，也遇到一些问题，萌发了阅读

腾讯云中间件团队

2021-11-25

5880

ZooKeeper系列文章：ZooKeeper 源码和实践揭秘（一）

zookeeper node.js 数据库数据结构 sql

导语 ZooKeeper 是个针对大型分布式系统的高可用、高性能且具有一致性的开源协调服务，被广泛的使用。对于开发人员，ZooKeeper 是一个学习和实践分布式组件的不错的选择。本文对 ZooKeeper 的源码进行简析，也会介绍 ZooKeeper 实践经验，希望能帮助到 ZooKeeper 初学者。文章部分内容参考了一些网络文章，已标注在末尾参考文献中。 1. 写文初衷在业务中使用了 ZooKeeper 作为消息系统，在开发和运维过程中，也遇到一些问题，萌发了阅读源码窥视实现细节的想法。

腾讯云中间件团队

2021-11-17

6650

消息系统兴起二次革命：Kafka不需要ZooKeeper

kafka zookeeper 运维 raft tcp/ip

微服务平台 TSF、消息队列 CKafka / TDMQ、微服务观测平台 TSW 等中间件产品的负责人

腾讯云中间件团队

2021-04-21

9960

你不得不知道的 Apache Pulsar 三大跨地域复制解决方案

zookeeper apache css php

在 Geo-Replication 的设计支撑下，其一，我们可以比较容易的将服务分散到多个机房；其二，可以应对机房级别的故障，即在一个机房不可用的情况下，服务可以转接到其它的机房来继续对外提供服务。

腾讯云中间件团队

2021-03-30

1.9K0

聊一聊微服务架构中的服务发现系统

sdk ide 负载均衡 zookeeper 负载均衡缓存

导语：本文围绕服服务调用模式、一致性取舍、服务提供者的健康检查模式等方面，讨论了服务发现的技术选型和设计的各种优缺点，希望能够帮助大家在选择或者使用服务发现系统的时候更加顺畅。

腾讯云中间件团队

2021-03-24

7300

蘑菇街千亿级消息Kafka上云实践

消息队列 CKafka 版 kafka 消息队列 CMQ 版 zookeeper

导语：Apache Kafka凭借其高吞吐、高可靠等特性在实时数据或流式数据架构中扮演着重要角色，受到了众多企业用户的青睐。但是随着云时代来临，公有云厂商纷纷推出消息队列服务，很多用户也逐渐从自建消息集群过渡到使用云上消息队列服务。本文将以蘑菇街Kafka服务迁移上云为例，阐述腾讯云消息队列CKafka如何对用户产生价值。（编辑：中间件小Q妹）

腾讯云中间件团队

2020-01-14

1.3K0

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态