11月11日24：00，双11收官，一场超11天、268小时的全球快递“云监工”直播也落下了帷幕，这场“马拉松”直播一共被人民日报等全国70多家媒体转播，仅视频号和抖音号就吸引了超3000万人次围观，很多网友直呼做“云监工”时“快递小哥治好了我的精神内耗。”观摩跨越山海的包裹、看着勤劳奔波的快递小哥，盯着不知疲倦的智能仓机器人，欢乐且解压。
在今天双 11 这个万众狂欢的节日，对于阿里员工来说，每个环节都将面临前所未有的考验，特别是技术环节，今天我们就一起来探讨下双11天量交易额背后的技术。
分布式系统中,我们广泛运用消息中间件进行系统间的数据交换,便于异步解耦。现在开源的消息中间件有很多,前段时间我们自家的产品 RocketMQ (MetaQ的内核) 也顺利开源,得到大家的关注。
秒杀是电商业务里的标志性事件，这样的典型高并发场景会遇见什么样的挑战呢，然后又是如何来解决的呢? 秒杀活动场景 淘宝双11秒杀场景，大量的用户短时间内涌入，瞬间流量巨大（高并发），比如：1000万人同
基于公司内部开源共建原则， RocketMQ 项目只维护核心功能，且去除了所有其他运行时依赖，核心功能最 简化。每个 BU 的个性化需求都在 RocketMQ 项目之上进行深度定制。RocketMQ 向其他 BU 提供的仅仅是Jar 包，例如要定制一个 Broker，那么只需要依赖 rocketmq-broker 这个 jar 包即可，可通过 API 进行交互，如果定制 client，则依赖 rocketmq-client 这个 jar 包，对其提供的 api 进行再封装。
1.Provider提供方：服务提供者。2.Producer生产者：创建和发送JMS消息的客户端。3.Consumer消费者：接收JMS消息的客户端。4.Client客户端：生产或消费消息的应用&进程。5.Message消息：服务端与客户端之间的传输数据对象。6.Queue队列 ：包含待读取消息的准备区域（点对点）。7.Topic主题：发布消息的分布机制（发布&订阅）。
从今年7月到现在转眼间转岗到淘宝部门已经有小半年了，最近刚刚经历人生中第一次双11实战，体验了一把系统经受高并发高流量的冲击的感觉，一个字爽，作为小白，在这小半年里面收获颇多，一个感悟是实战是提高一个人能力的唯一真理，只有真的动手去做了，才会知道会遇到什么问题。日常做项目时候不怕遇到问题如何解决，最怕有些情景考虑不到，而后者是需要经验累积起来的，一方面是试错的累积，一方面是通过书本或者思考源码得来的。来淘宝这半年来为了能够学到更多，从来不敢浪费时间，一边欣赏这人家如何用代码解决高并发高流量问题，一边学着人家如何用工具快速高效的查询系统瓶颈与查找线上问题。
这是一个从诞生第一天起就在 GitHub 上开发的开源项目，也是中国第一个非 Hadoop 生态的 Apache 顶级项目。它统一了阿里集团内部所有业务线的消息中间件，伴随着中国互联网发展数次迭代。InfoQ 与阿里云开发者社区联合出品的【开源人说】系列视频第一期正式上线，一起来探访开源消息中间件 Apache RocketMQ 背后的人和事！
作者简介：刘韬，在中间件领域有多年的实战经验，精通 WebLogic server，Websphere，Jboss，Tomcat，tuxedo，mq，osb等多种中间件技术，对中间件的故障处理、性能优化、升级迁移等需求积累了丰富经验。
参考博客1给出了一种所谓的平滑帅气的秒级扩容的架构方案，但我个人却认为，这个看似没有什么问题的方案在实际中几乎没什么用处，业界也几乎不会用这种方案来进行扩容（分库分表）。为了便于说明这一点，本文先简单回顾下该方案，然后分析该方案为什么没有用，最后给出三种业界广泛使用的分库分表的平滑扩容方案。
摘自：微头条，阿尔法工场欧阳长征推荐 导读：如果银行是一家海鲜酒楼，把IBM换掉相当于大搞一次装修，把Oracle换掉相当于把厨子和菜谱全部换掉，把EMC换掉相当于把放食材工具的储物间换个地方。难度在
作者简介 荣华，携程高级研发经理，专注于后端技术项目研发管理。 军威，携程软件技术专家，负责分布式缓存系统开发 & 存储架构迁移项目。 金永，携程资深软件工程师，专注于实时计算，数据分析工程。 俊强，携程高级后端开发工程师，拥有丰富SQLServer使用经验。 前言 携程酒店订单系统的存储设计从1999年收录第一单以来，已经完成了从单一SQLServer数据库到多IDC容灾、完成分库分表等多个阶段，在见证了大量业务奇迹的同时，也开始逐渐暴露出老骥伏枥的心有余而力不足之态。基于更高稳定性与高效成本控制而设计
当系统访问量和数据量超过之前对评估预期时，涉及到对数据库重新分片。大部分场景中往往不能直接映射到新对数据分片策略中，分片策略修改需要伴随数据迁移。
现在很多公司的招聘信息，都会有这这么一条要求：有分布式、高并发、高负载、高可用系统设计、开发和调优经验者优先。
对于kubernetes老玩家而言，StatefulSet这种资源类型并不陌生。对于很多有状态服务而言，都可以使用 StatefulSet 这种资源类型来部署。那么问题来了：挖掘机技术哪家强？额，不对。
本文整理了阿里13个开源中件间产品的架构及功能介绍，结合阿里中间件团队的访谈及分享，涵盖了消息中间件、服务框架、数据层、应用服务器和大规模分布式稳定性平台等等。整体中间件在阿里生态中的分布，如下图所示：
Mysql优化那篇文章有朋友留言说就这么点？，深深刺痛了晓添的心，感觉知识深度被小看了，痛定思痛决定发布读写分离，分表分库优化文章，其实这系列文章也在Mysql优化的计划之内，最近较忙断断续续写的有点难受，到今天才跟大家见面，篇幅有限这篇我们来说说基于Mycat实现读写分离，话不多说我们赶紧看看好好的数据库又闹腾什么呢？
也就是从 Greenwich.SR6, Hoxton.SR9 这样子的风格改为 2020.0.0。广大人民终于不用为spring cloud的版本号烦恼了。Spring Cloud推广不力，固然有自身复杂的原因，版本号太复杂也是一个坑。
面对即将到来的双11购物狂潮，小伙伴们最担心的恐怕不是优惠力度不够，或者是钱包有点瘪，而是买买买之后，要经过多长时间的漫长等待，才能拿到自己的宝贝呢？为了加速整个物流过程，阿里、京东等公司可谓花了血本，历经多年打造的黑科技项目，能否应对今年的双11呢？ 菜鸟智能发货引擎：为每一个包裹匹配最合适的快递公司 为客户选择一个合适的快递公司，以最快的速度将货物送到客户手中是每个商家的心愿，然而在现实中，大部分商家选择快递是，基本都是凭经验、比价格的方式按区域对订单包裹进行分配，因为没有办法全面了解各家快递公司的优势
卖羊肉串首先就得有羊肉，于是我就联系了很多养殖场，我又是一个比较负责任的人，为了保证羊肉的质量，我就去考察了一家又一家养殖场，同时我也是个“小气”的人，所以我考察过程中，和对方谈判、比价，最终选了一个养殖场作为我的羊肉供应商，为我提供羊肉。
导读：余额宝开启了划时代的意义，开启了全民理财时代。上个月微博商业产品部联合天弘基金等金融技术团队策划了首届互联网金融系统沙龙，围绕在互联网金融过程中碰到技术架构问题与业界展开分享及交流。本文是陈雨在沙龙上的演讲，授权高可用架构首发。
大家好，我是58沈剑，今天我分享的主题是《58怎么玩数据库架构》，我的PPT页数非常少，讨论的问题非常的聚焦。 一、数据库的基本概念 基本概念就一页PPT，让大家就一些数据库方面的概念达成一致。 首
这两天，互联网很热闹，除了微博微信发红包，要数分众推出的“全城示爱”的表白活动最为受关注。关注全城示爱微信公众号，发布表白内容和想发布的楼宇，就能向心仪的TA传递出自己的真情告白，精确发送到她楼下的分众屏幕上。这是中国第二大媒体公司分众传媒发动的全城弹幕表白秀。在今年情人节，分众已撤下平时播放的所有广告，改播《大话西游》、《失恋33天》、《将爱情进行到底》、《101次求婚》等电影的精彩桥段，同时用如今80后、90后、乃至00后最追捧的“弹幕”形式，发布用户的表白内容。利用楼宇地理优势，分众为白领们提供了一个
在云计算模型中，很多应用部署在一起，将产生数据交互的强烈需求。如在双11的时侯，几千万人向时向商城的订单系统下订单，而支付系统的能力只有几十万人的同时支付处理能力，怎么办？传统的处理方案主要是：限制商城同时下单的人数，但现实谁会拒绝用户下订单，这是现金流。因此，按照现实生活中公交车排队的处理经验，很多人流同时上一路公交车，采用排队机制，这种方案至少保证最终都上车，等待时间会增加。
在我们编写web服务端程序的时候，我们可能会对一些甚至全部的Http Request统一处理，比如我们记录每个访问的Request，对提交的Form表单进行映射等，要达到这些目的，比较优雅的做法是Http 中间件。
电商时代，出现了双11、1212等购物节，电商可以不断扩大自身业务系统的能力，但后台交易系统的处理逻辑复杂，往往会成为整个系统的瓶颈。如何保障超过平常10倍业务流量的正常处理，我们经常听到一个中间件kafka。现在的业务系统离开了他，基本难以成长。来用实际案例看一下。
2022年，基于对稳定性的焦虑...和思考，交易平台联动中间件平台启动过异地多活项目的探索，虽然完成了核心应用及基础组件的改造，但在疫情&降本增效的影响下并未真正投产，同时也缺乏充分的测试以及线上流量的大规模验证；后续在不断的业务迭代中，相关设计及代码被冲击的面目全非，相关的多活自动化测试case也并没有沉淀下来。
8月18日，云+社区开发者大会（杭州站）圆满落幕。本次云+社区开发者大会诚邀业内技术大咖为你带来云开发、小程序、云上“多活”架构等革命性的技术，更有云上直播以及零成本获客这几个当前电商领域的热点业务话题，与大家共探技术与产业转型背景下的电商如何成为时代引领者。下面是腾讯云TVP王晓波老师关于如何基于公有云提供的这些基础设施来简化“多活”架构的一些设计和实践的分享。
双11期间,各大线上购物商城纷纷亮出优惠绝招。与往年不同的是,竞争一路延伸到了消费金融领域,今年不只比低价,更比“赊账”。 天猫分期购VS京东白条 日前,记者采访了蚂蚁微贷工作人员元秋。据他介绍,针对双11当天,天猫分期购推出了“11期0手续费”的分期服务。也就是说,当天的账单可以用一年时间慢慢还,且没有任何手续费。分期服务支持的商品,将重点覆盖天猫电器城和家装等类目商品,包括海尔、TCL、美的、飞利浦、博朗等国内外几乎所有一线家电品牌,以及众多数码3c品牌。 天猫分期购业务,是今年7月份由蚂蚁
相对于过去单体或 SOA 架构，建设微服务架构所依赖的组件发生了改变，因此分析与设计高可用容灾架构方案的思路也随之改变，本文对微服务架构落地过程中的几种常见容灾高可用方案展开分析。
1、大型网站技术架构：核心原理与案例分析 本书通过梳理大型网站技术发展历程，剖析大型网站技术架构模式，深入讲述大型互联网架构设计的核心原理，并通过一组典型网站技术架构设计案例，为读者呈现一幅包括技术选型、架构设计、性能优化、Web安全、系统发布、运维监控等在内的大型网站开发全景视图。 本书作者李智慧，曾在阿里巴巴担任技术专家，参与阿里巴巴基础技术平台开发和架构设计。 2、分布式服务框架原理与实践 微服务是当前非常热的技术关键词之一，那么微服务如何落地呢？首先要实现服务化，微服务架构是一种服务化架构风
随着国际火车票业务的高速发展，订单量快速增长，单数据库瓶颈层面的问题逐渐显露，常规的数据库优化已无法达到期望的效果。同时，原先的底层数据库设计，也存在一些历史遗留问题，比如存在部分无用字段、表通过自增主键关联和各个应用直连数据库等问题。
本文源自于知乎的提问与回答，相信大家也有自己去思考或者实践“造”几个轮子。毕竟不管是学习人家造好的轮子还是自己造轮子，都是对自身开发设计能力的一种提升。本文的回答者从公司的实际项目出发，大致列举了我们可以研究的“轮子”，并给出设计建议。
双十一将至，购物车装的怎么样了？每年一到这时候，各大商家都已开始密集部署活动，等你剁手。
现在很多并发性很高的系统为了提高吞吐量而使用redis来当数据存储，而当redis挂了的时候有可能数据丢失，这个时候系统可能不可用，而把流量路由到db肯定是不可行的，因为流量太大，这个时候恢复redis中的数据又比较耗时，而这个时候经常会出现使用多个reids集群，即有一个或者多个备份redis集群。这个时候怎么保证多个redis集群数据一致性呢？
在软件开发领域，「异地多活」是分布式系统架构设计的一座高峰，很多人经常听过它，但很少人理解其中的原理。
消息队列是一种中间件，它的作用类似于一个电子邮箱。在这个模型中，生产者（应用程序）生成消息，就像发送邮件一样，而消费者（另一个应用程序）则接收这些消息。消息队列确保消息能够可靠地从生产者传递到消费者，而无需两者之间直接交互。
面试技巧 1、背熟你的简历 原因：面试的第一个问题，一般都是让你简单介绍下你自己，或者介绍一下你最近的项目，而一个面试者，如果连自己的简历都无法熟知，对里面提到的项目、技术都无法描述清楚的话，我想没有哪家公司会接受这样的，哪怕你是超级人才，你自我表述不行，估计也会为此头疼，所以，切记：一定要背好自己的简历，不要求你能全部记下，至少要熟记你最近所待过的两家公司，这两家公司里面你做过的项目，你负责的模块，项目里面用到的技术以及相对应的技术实现方案（这个尤为重要）。 2、深入了解并熟记部分Java基础知识 原因：
1. 站在安全部门角度（非合规），在参与公司个人信息合规管理体系建设中理想的角色是怎么样的？
通过简单回顾阿里中间件(Aliware)消息引擎的发展史，本文开篇于双11消息引擎面临的低延迟挑战，通过经典的应用场景阐述可能会面临的问题 - 响应慢，雪崩，用户体验差，继而交易下跌。为了应对这些不可控的洪峰数据，中间件团队通过大量研究和实践，推出了低延迟高可用解决方案，在分布式存储领域具有一定的普适性。
前段时间，知识星球里一位同学给我分享了他对消息队列的理解，并且用一个故事形象的表述了消息队列的作用。看完他的表述，我觉得用故事来描述技术组件作用的方式很有意思，也更容易让人理解。
原因：面试的第一个问题，一般都是让你简单介绍下你自己，或者介绍一下你最近的项目，而一个面试者，如果连自己的简历都无法熟知，对里面提到的项目、技术都无法描述清楚的话，我想没有哪家公司会接受这样的，哪怕你是超级人才，你自我表述不行，估计也会为此头疼，所以，切记：一定要背好自己的简历，不要求你能全部记下，至少要熟记你最近所待过的两家公司，这两家公司里面你做过的项目，你负责的模块，项目里面用到的技术以及相对应的技术实现方案（这个尤为重要）。
在软件开发领域，异地多活是分布式系统架构设计的一座高峰，很多人经常听到过他，但很少人理解其中的原理;
只要用缓存，就可能会涉及到缓存与数据库双存储双写，你只要是双写，就一定会有数据一致性的问题，那么你如何解决一致性问题？
本文原题“阿里数据库十年变迁，那些你不知道的二三事”，来自阿里巴巴官方技术公号的分享。
十月一前T哥参加了一场浪潮“K迁工程”全国巡展行”，浪潮对外正式推出面向关键应用整合的主机新品－天梭K1 910，天梭K1 910的问世使得浪潮主机业务完成了从高端到中低端市场的延伸，形成了对关键应用主机市场高中低领域的全线覆盖。至此，浪潮主机业务完成了从技术突破到产业化的整体布局。 在本次发布会上让T哥感到惊讶的是，IBM从主机业务的主角沦为了为浪潮站台的配角，这在以往历史中是不现实的，IBM和浪潮一直处于水火不相容的敌对状态，国外主机厂商一直在软硬端设置技术壁垒，防止国产主机厂商接入，而此次与浪潮达成
面对一个庞然大物，如果没有一个合理的分工分层。任何一个小小失误都会被无限放大，酿成巨大灾难。
本文由公众号“水滴与银弹”号主Kaito原创分享，原题“搞懂异地多活，看这篇就够了”，为使文章更好理解，有修订。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
云直播
