腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

码上修行

厚积薄发

专栏作者

135

文章

236869

阅读量

30

订阅数

redis 的持久化有哪几种方式？

云数据库 Redis 分布式数据备份消息队列 CMQ 版 kafka

持久化主要是做灾难恢复、数据恢复，也可以归类到高可用的一个环节中去，比如你 redis 整个挂了，然后 redis 就不可用了，你要做的事情就是让 redis 变得可用，尽快变得可用。

2019-11-24

1.2K0

集群部署时的分布式 session 如何实现？

云数据库 Redis tomcat 消息队列 CMQ 版 kafka 微服务

session 是啥？浏览器有个 cookie，在一段时间内这个 cookie 都存在，然后每次发请求过来都带上一个特殊的 jsessionid cookie，就根据这个东西，在服务端可以维护一个对应的 session 域，里面可以放点数据。

2019-11-24

8510

如何保证消息队列的高可用？

rabbitmq 分布式 kafka 消息队列 CMQ 版

RabbitMQ 是比较有代表性的，因为是基于主从（非分布式）做高可用性的，我们就以 RabbitMQ 为例子讲解第一种 MQ 的高可用性怎么实现。

2019-11-22

7820

如何保证消息不被重复消费？或者说，如何保证消息消费的幂等性？

数据库 sql kafka 云数据库 Redis

首先，比如 RabbitMQ、RocketMQ、Kafka，都有可能会出现消息重复消费的问题，正常。因为这问题通常不是 MQ 自己保证的，是由我们开发来保证的。挑一个 Kafka 来举个例子，说说怎么重复消费吧。

2019-11-22

5840

如何保证消息的可靠性传输？或者说，如何处理消息丢失的问题？

数据的丢失问题，可能出现在生产者、MQ、消费者中，咱们从 RabbitMQ 和 Kafka 分别来分析一下吧。

2019-11-22

7920

如何保证消息的顺序性？

云数据库 SQL Server 数据库 sql rabbitmq kafka

我举个例子，我们以前做过一个 mysql binlog 同步的系统，压力还是非常大的，日同步数据要达到上亿，就是说数据从一个 mysql 库原封不动地同步到另一个 mysql 库里面去（mysql -> mysql）。常见的一点在于说比如大数据 team，就需要同步一个 mysql 库过来，对公司的业务系统的数据做各种复杂的操作。

2019-11-22

9580

如果让你写一个消息队列，该如何进行架构设计？

其实回答这类问题，说白了，不求你看过那技术的源码，起码你要大概知道那个技术的基本原理、核心组成部分、基本架构构成，然后参照一些开源的技术把一个系统设计出来的思路说一下就好。

2019-11-22

4410

被坑惨喽 ~ 探讨kafka分区数与多线程消费

kafka 编程算法

kafka 算是很麻烦的一件事儿，起因是最近需要采集大量的数据，原先是只用了典型的 high-level Consumer 的 API，最经典的不过如下：

2019-08-26

7760

Kafka 消息可靠性

在 Kafka 工作机制一文提及了 Kafka 消息的不可靠性。本文就 Kafka 消息的三种不可靠性（重复、丢失、乱序），分析它们出现的内部原因和解决办法。

2019-06-26

8650

Kafka 客户端开发

前两篇文章讲述了 Kafka 的工作机制和服务器集群部署。至此，Kafka 服务器已就绪，本文分别以官方API、Spring、SpringBoot三种构建方式，讲述了 Kafka 消费生产者和消费者的开发。

2019-06-26

1.2K0

Kafka 服务器集群部署

kafka zookeeper https 腾讯云测试服务网络安全

上篇文章 Kafka 工作机制讲述了 Kafka 的各组件(包括配置中心、Broker、消息生产者和消费者)的作用，分区与复制的机制等。有了这些概念，本文以三个 Broker 为例，讲述了 Kafka 集群的搭建步骤和方法，并以官方自带的命令行脚本进行消息的生产、消费、查看等操作。

2019-06-26

1.7K0

Kafka 工作机制

zookeeper kafka https 网络安全存储

Kafka 是 Apache 的子项目，是一个高性能跨语言的分布式发布/订阅消息队列系统（没有严格实现 JMS 规范的点对点模型，但可以实现其效果），在企业开发中有广泛的应用。高性能是其最大优势，劣势是消息的可靠性（丢失或重复），这个劣势是为了换取高性能，开发者可以以稍降低性能，来换取消息的可靠性。

2019-06-26

1.1K0

ELK日志分析方案

Elasticsearch Service 消息队列 CMQ 版 kafka 云数据库 Redis 微服务

1.在微服务服务器上部署Logstash，作为Shipper的角色，对微服务日志文件数据进行数据采集，将采集到的数据输出到Redis消息队列。

2019-06-26

8510

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态