腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Linyb极客之路

专栏作者

1062

文章

1802405

阅读量

128

订阅数

聊聊在集群环境中本地缓存如何进行同步

之前有发过一篇文章聊聊如何利用redis实现多级缓存同步。有个读者就给我留言说，因为他项目的redis版本不是6.0+版本，因此他使用我文章介绍通过MQ来实现本地缓存同步，他的同步流程大概如下图

2023-08-15

3030

如何在微服务中实现分布式事务的变通？

微服务 windows 分布式数据库

传统单体架构下的分布式事务概念并不适合微服务，面临的挑战很多(挑战问题点击标题见原文)，想在微服务中进行分布式事务处理？需要改变思路和视角：

2023-02-27

4770

支撑百万并发的数据库架构如何设计？

分布式数据库 sql 编程算法

看到这个题目，很多人第一反应就是：分库分表啊！但是实际上，数据库层面的分库分表到底是用来干什么的，其不同的作用如何应对不同的场景，我觉得很多同学可能都没搞清楚。用一个创业公司的发展作为背景引入—— 假如我们现在是一个小创业公司，注册用户就 20 万，每天活跃用户就 1 万，每天单表数据量就 1000，然后高峰期每秒钟并发请求最多就 10。天呐！就这种系统，随便找一个有几年工作经验的高级工程师，然后带几个年轻工程师，随便干干都可以做出来。因为这样的系统，实际上主要就是在前期进行快速的业务功能开发，搞一个单块系统部署在一台服务器上，然后连接一个数据库就可以了。接着大家就是不停地在一个工程里填充进去各种业务代码，尽快把公司的业务支撑起来。如下图所示：

2022-03-10

5950

当数据库扼住系统性能咽喉，直接分库分表能解决吗？

jdbc 数据库 sql 云数据库 SQL Server 分布式

众所周知，数据库很容易成为应用系统的瓶颈。单机数据库的资源和处理能力有限，在高并发的分布式系统中，可采用分库分表突破单机局限。

2022-03-10

6210

小白解释：什么是分布式微服务中的幂等？

分布式数据结构

幂等意味着重复无关紧要。这意味着您可以安全地重试操作而不会出现问题。典型的例子是电梯按钮：你按两次它就不会叫来两部电梯。我们在这里探索为什么我们希望在电子邮件服务器中使用该属性。

2022-03-10

8490

如何有效地提升开发团队的水平

python 分布式

客户经常会问的一个问题是：如何有效地提升开发团队的水平？你如何让一组从未编写过Python的工程师使其成为高效的Python开发人员？你如何让从未构建过分布式系统的团队可以构建可靠，容错的微服务？让从未有云中构建经验的团队负责构建云软件？

2022-03-10

5210

限流技术总结

编程算法分布式 http https 网络安全

在开发高并发系统时，有很多手段来保护系统，如缓存、降级、限流等。缓存可以提升系统的访问速度，降级可以暂时屏蔽掉非核心业务，使得核心业务不受影响。限流的目的是通过对并发访问进行限速，一旦达到一定的速率就可以拒绝服务（定向到错误页或告知资源没有了）、排队等待（如秒杀、评论、下单等）、降级（直接返回兜底数据，如商品库存默认有货）。

2022-03-10

2670

微服务接口限流的设计与思考

编程算法微服务分布式云数据库 Redis

微服务拆分之后，系统之间的调用关系错综复杂，平台的整体复杂熵升高，出错的概率、debug 问题的难度都高了好几个数量级。所以，服务治理便成了微服务的一个技术重点。服务治理本身的概念比较大，包括鉴权、限流、降级、熔断、监控告警等等，本文聚焦于限流，根据笔者的实战经验，分享一些对微服务接口限流的思考。

2022-03-10

4840

分库分表需要考虑的问题及方案

数据库 sql 分布式

需要特别说明的是：当同时进行垂直和水平切分时，切分策略会发生一些微妙的变化。比如：在只考虑垂直切分的时候，被划分到一起的表之间可以保持任意的关联关系，因此你可以按“功能模块”划分表格，但是一旦引入水平切分之后，表间关联关系就会受到很大的制约，通常只能允许一个主表（以该表ID进行散列的表）和其多个次表之间保留关联关系，也就是说：当同时进行垂直和水平切分时，在垂直方向上的切分将不再以“功能模块”进行划分，而是需要更加细粒度的垂直切分，而这个粒度与领域驱动设计中的“聚合”概念不谋而合，甚至可以说是完全一致，每个shard的主表正是一个聚合中的聚合根！这样切分下来你会发现数据库分被切分地过于分散了（shard的数量会比较多，但是shard里的表却不多），为了避免管理过多的数据源，充分利用每一个数据库服务器的资源，可以考虑将业务上相近，并且具有相近数据增长速率（主表数据量在同一数量级上）的两个或多个shard放到同一个数据源里，每个shard依然是独立的，它们有各自的主表，并使用各自主表ID进行散列，不同的只是它们的散列取模（即节点数量）必需是一致的.

2022-03-10

2490

我说分布式事务之TCC

分布式数据分析

接触分布式相关的开发已经有一段时间了，自然绕不开分布式事务。从本文开始，我将带领大家了解常见的分布式事务的解决方案，深入原理，浅出实践，让我们在今后的开发中对分布式事务不再畏惧。

2022-03-10

5550

DDD -- 领域驱动设计 -- 6步成诗法

分布式架构设计

记得很多年以前读Evans的《领域驱动设计 – 软件复杂性核心应对之道》，那个时候DDD还很少人知道，更不用说实践了，这本书呢也在我的书柜里沉睡了很多年。而最近发现，不光传统重业务的软件公司，就连很多互联网公司也在推DDD。

2022-03-09

4640

分布式服务化系统一致性的“最佳实干”

缓存 sql 数据库分布式

一致性是一个抽象的、具有多重含义的计算机术语，在不同应用场景下，有不同的定义和含义。在传统的IT时代，一致性通常指强一致性，强一致性通常体现在你中有我、我中有你、浑然一体；而在互联网时代，一致性的含义远远超出了它原有的含义，在我们讨论互联网时代的一致性之前，我们先了解一下互联网时代的特点，互联网时代信息量巨大、需要计算能力巨大，不但对用户响应速度要求快，而且吞吐量指标也要向外扩展（既：水平伸缩），于是单节点的服务器无法满足需求，服务节点开始池化，想想那个经典的故事，一只筷子一折就断，一把筷子怎么都折不断，可见人多力量大的思想是多么的重要，但是人多也不一定能解决所有事情，还得进行有序、合理的分配任务，进行有效的管理，于是互联网时代谈论最多的话题就是拆分，拆分一般分为“水平拆分”和“垂直拆分”（大家不要对应到数据库或者缓存拆分，这里主要表达一种逻辑）。这里，“水平拆分”指的是同一个功能由于单机节点无法满足性能需求，需要扩展成为多节点，多个节点具有一致的功能，组成一个服务池，一个节点服务一部分的请求量，团结起来共同处理大规模高并发的请求量。“垂直拆分”指的是按照功能拆分，秉着“专业的人干专业的事儿”的原则，把一个复杂的功能拆分到多个单一的简单的元功能，不同的元功能组合在一起，和未拆分前完成的功能是一致的，由于每个元功能职责单一、功能简单，让维护和变更都变得更简单、安全，更易于产品版本的迭代，在这样的一个互联网的时代和环境，一致性指分布式服务化系统之间的弱一致性，包括应用系统一致性和数据一致性。

2022-03-09

5450

业务场景（并发篇）--秒杀场景下如何防止超卖

云数据库 Redis 数据库 sql 分布式

如何在有限的商品数量的限制下如何保证抢购到商品的用户数不能大于商品数量，也就是不能出现超卖的问题；还有就是抢购时会出现大量用户的访问，如何提高用户体验效果也是一个问题，也就是要解决秒杀系统的性能问题

2022-03-04

4.1K0

优秀架构师必须了解的6大方面30条设计原则

在 WSO2，我参与架构评审的时间已长达八年之久。WSO2 的产品非常丰富，比如 WSO2 ESB 、WSO2 API Manager 以及 WSO2 SP 都人尽皆知。在过去八年中，我们对许多产品和功能进行了讨论、设计、改进和重新设计。

2022-01-07

8890

聊聊如何在spring事务中正确进行远程调用

分布式 spring 微服务

最近和朋友聊天，他说他承接的外包项目遇到了分布式事务问题，问我有没啥解决方案，我本可以直接跟他说，分布式事务方案网上一大堆，什么tcc、可靠消息一致性、最大努力通知之类的，直接网上找个试下，比如直接用阿里的seata。但我并没有这么做，因为分布式事务，本来就是一个很复杂的课题，真正落地的时候，会发现有时候是多种分布式方案一起混用，而非一种方案走到黑。

2022-01-07

6020

最强 Java Redis 客户端

云数据库 Redis 缓存 spring 分布式 java

在提高应用程序速度和性能上，每一毫秒都很重要。根据谷歌的一项研究，假如一个网站在3秒钟或更短时间内没有加载成功，会有 53% 的手机用户会离开。

2022-01-07

1.4K0

如何通过编码的方式手动触发xxl-job执行器

分布式 java spring boot

xxl-job是一个分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展、开箱即用。我部门大部分定时任务调度都是基于xxl-job，诸如报表统计、定时数据同步等。

2021-03-04

2.2K0

一篇文章带你了解当下主流的监控工具

开源 https 网络安全 zabbix 分布式

以往，在缺少告警机制的情况下，企业无法第一时间洞悉到系统发生故障，只能通过用户的反馈来获取，系统运维人员往往也只是充当了一个“救火” 队员，大面积的系统瘫痪往往也会给企业和用户带来极大的损失

2019-11-22

1.6K0

基于分布式系统的7种唯一ID实现方案，值得收藏

云数据库 Redis 分布式数据库 mongodb sql

系统唯一ID是我们在设计一个系统的时候常常会遇见的问题，也常常为这个问题而纠结。生成ID的方法有很多，适应不同的场景、需求以及性能要求。所以有些比较复杂的系统会有多个ID生成的策略。

2019-11-20

1.3K0

分布式微服务流程编排简介

微服务的流程编排将成为下一个要解决的大问题。在撰写本文时，有几种解决方案试图在该领域竞争，主要是构建自己的（文本）领域特定语言来描述业务流程。在我看来，编排应该改为在BPMN 2.x中表达，因为它是为此目的而精心设计的，易于理解且成熟的语言。

2019-11-20

1.5K0

点击加载更多

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态