本文原题“阿里数据库十年变迁，那些你不知道的二三事”，来自阿里巴巴官方技术公号的分享。
参考博客1给出了一种所谓的平滑帅气的秒级扩容的架构方案，但我个人却认为，这个看似没有什么问题的方案在实际中几乎没什么用处，业界也几乎不会用这种方案来进行扩容（分库分表）。为了便于说明这一点，本文先简单回顾下该方案，然后分析该方案为什么没有用，最后给出三种业界广泛使用的分库分表的平滑扩容方案。
《58同城数据库架构设计思路》（下） WOT（World Of Tech）2015，互联网运维与开发者大会将在北京举行，会上58同城分享了《大数据量下，58同城mysql实战（上）》的主题 DTCC（Database Tech Conference China）2015，中国数据库技术大会举办在即，会上58同城将分享《数据库架构师做什么？58同城数据库架构设计思路（下）》，大会内容抢先看，一起来看看58同城怎么玩数据库架构设计的。 58同城数据库架构设计思路 （1）可用性设计 解决思路：复制+冗余 副作用
点击上方蓝色“程序猿DD”，选择“设为星标” 回复“资源”获取独家整理的学习资料！ 后台服务可以划分为两类，有状态和无状态。高可用对于无状态的应用来说是比较简单的，无状态的应用，只需要通过F5或者任何代理的方式就可以很好的解决。后文描述的主要是针对有状态的服务进行分析。服务端进行状态维护主要是通过磁盘或内存进行保存，比如MySQL数据库，redis等内存数据库。除了这两种类型的维护方式，还有jvm的内存的状态维持，但jvm的状态生命周期通常很短。 高可用的一些解决方案 高可用，从发展来看，大致经过了这几个
（1）可用性设计 解决思路：复制+冗余 副作用：复制+冗余一定会引发一致性问题 保证“读”高可用的方法：复制从库，冗余数据，如下图 带来的问题：主从不一致 解决方案：见下文 保证“写”高可用的一般方法
大家好，我是58沈剑，今天我分享的主题是《58怎么玩数据库架构》，我的PPT页数非常少，讨论的问题非常的聚焦。 一、数据库的基本概念 基本概念就一页PPT，让大家就一些数据库方面的概念达成一致。 首
双11当天临近下班时间点,研发反馈出现应用定时JOB跑批任务卡死，导致数据没有及时计算出来，影响一次报表数据展示,这个功能跑了几个月基本上没有异常，双11业务增长几倍，数据量稍微有点大。主要包括如下内容:
从 2009 年到 2021 年，从千万交易额到千亿交易额，双 11 已经开展了 12 年。如今，每年的双 11 以及一个月后的双 12，已经成为真正意义上的全民购物狂欢节。刚刚过去的 2021 年双 11，就有超过 8 亿消费者参与。
数据库上层都有一个微服务，服务层记录“业务库”与“数据库实例配置”的映射关系，通过数据库连接池向数据库路由sql语句。
分别在两台主库Master1、Master2上执行DDL、DML语句，查看涉及到的数据库服务器的数据同步情况。
在今天双 11 这个万众狂欢的节日，对于阿里员工来说，每个环节都将面临前所未有的考验，特别是技术环节，今天我们就一起来探讨下双11天量交易额背后的技术。
本文为2020年MongoDB应用案例与解决方案征集活动最佳创新案例：MongoDB在圆通速递的应用，作者徐靖。
最近在看一些关于数据库的资料，从最开始的mysql的主从复制到mysql的双主+heartbeat实现mysql的高可用再到mysql+drbd+heartbeat实现底层数据同步的双主高可用再到mysql_mmm+amoeba实现双主多从的高可用和负载均衡以及读写分离，再到后来发现mysql自从被Oracle收购后已经越来越走向了封闭，更新也不如以前频繁，并且新版的mysql已经不支持GPL协议了。。。感觉mysql已经在Oracle手中渐渐没落了。。。后来发现了一个更好的替代方案那就是mariadb的g
近日，天阳信用卡新一代核心产品CreditX完成了与腾讯云分布式数据库TDSQL的适配性测试，并基于双深度融合，推出“金融零售核心CreditX+分布式数据库TDSQL”的新一代分布式信用卡核心产品联合解决方案。 这标志着信用卡核心系统应用将迎来安全可控的分布式、数字化转型升级加速期。 技术上，CreditX采用“分布式+微服务+云部署”技术架构。在关系型数据库部分，使用标准SQL语法与标准数据建模方法，经过本次与腾讯云分布式数据库TDSQL全面适配性测试，证实在数据库功能性、连通性，应用适配性等各方面完
淘宝开放平台（open.taobao.com）是阿里系统与外部系统通讯的最重要平台，每天承载百亿级的API调用，百亿级的消息推送，十亿级的数据同步，经历了8年双11成倍流量增长的洗礼。本文将为您揭开淘宝开放平台的高性能API网关、高可靠消息服务、零漏单数据同步的技术内幕。
随着国际火车票业务的高速发展，订单量快速增长，单数据库瓶颈层面的问题逐渐显露，常规的数据库优化已无法达到期望的效果。同时，原先的底层数据库设计，也存在一些历史遗留问题，比如存在部分无用字段、表通过自增主键关联和各个应用直连数据库等问题。
11月11日24：00，双11收官，一场超11天、268小时的全球快递“云监工”直播也落下了帷幕，这场“马拉松”直播一共被人民日报等全国70多家媒体转播，仅视频号和抖音号就吸引了超3000万人次围观，很多网友直呼做“云监工”时“快递小哥治好了我的精神内耗。”观摩跨越山海的包裹、看着勤劳奔波的快递小哥，盯着不知疲倦的智能仓机器人，欢乐且解压。
OGG有传统的经典架构，也有最新的微服务，2个都可以远程捕获和应用数据，对数据库服务器是0侵入，而传统的经典架构是纯命令行模式，最新的微服务架构是图形化界面操作，几乎所有操作都可以在界面进行。相关文章可以参考：
文章集中整理总结mysql分库分表开源产品，分布式数据库的设计，以及实际应用案例等相关内容，部分附上本文作者实际应用过程中的理解。
之前我写了文章简单的讲了一下最近非常热闹的由Databricks发起的和Snowflake的撕逼文章们：
整个迁移过程，既不能长时间停服，也不能丢数据。如何不停机安全地迁移数据更换数据库。
2022年3月11日，重庆银行股份有限公司发布《2022年分布式数据库项目》招标公告，采购 260 万元。 货物规格型号及数量：分布式数据库*1套。 具体要求如下： 1、16节点的数据库物理服务器授权（按同城双中心部署架构，共4套独立集群，每套4节点，含数据复制或实时同步许可） 2、4套分布式群集管理配置许可（按同城双中心部署架构计算，含数据库群集管理模块或许可、运维工具、性能分析工具、监控工具） 3、一年原厂7*24维保服务；一年原厂DBA驻场服务及分布式数据库规划与设计服务（交付物包括不限于：《重庆银
5.java电商网站，数据库分读写，解决高并发读写的问题，master和slave流量的问题。
今天简单写写MySQL中跟数据安全相关的两个关键参数吧，一个是innodb_flush_log_at_trx_commit，另外一个是sync_binlog，首先我们来看看这两个参数分别是什么意思吧：
客户需要将华为云rds for MySQL和天翼云rds for MySQL做一个双向同步，当华为云rds宕机的时候，可以切换到天翼云继续提供服务，而且此时，天翼云的数据也可以自动同步到华为云rds，平时只使用华为云的rds，和双A方案有点差异，需要注意的是rds环境不能安装任何的软件，所以，我目前想到的方案有：
面试前面也总结了一和二， 这第三篇可能更偏向于是内心的独白篇和面试技巧总结吧.....
李阳良，一面数据大数据部门负责人，九年互联网工作经验，对后台开发、大数据技术接触比较多。
自 2008 年双 11 以来，在每年双 11 超大规模流量的冲击上，蚂蚁金服都会不断突破现有技术的极限。2010 年双 11 的支付峰值为 2 万笔/分钟，到 2017 年双 11 时这个数字变为了 25.6 万笔/秒。
MySQL最常见的集群架构，是一主多从，主从同步，读写分离的架构。通过这种方式，能够扩充数据库的读性能，保证读库的高可用，但此时写库仍然是单点。
时下大受欢迎的数据库 笔者在IBM工作期间，曾进行过大量Oracle RAC的功能性测试，尤其是与双活存储的配合问题。而时下，随着技术的发展，分布式数据库越来越受到关注。MySQL已经排到了第二名：（
缘起：受@萧田国 萧总邀请，上周五晚上在“高效运维1号群”内分享了《58同城数据库软件架构设计与实践》（这个topic今年在数据库大会上分享过），应组织方要求，发出纪要。 ---- 一、基本概念 二
一、双主保证高可用 MySQL数据库集群常使用一主多从，主从同步，读写分离的方式来扩充数据库的读性能，保证读库的高可用，但此时写库仍然是单点。 在一个MySQL数据库集群中可以设置两个主库，并设置双向
本公众号提供的工具、教程、学习路线、精品文章均为原创或互联网收集，旨在提高网络安全技术水平为目的，只做技术研究，谨遵守国家相关法律法规，请勿用于违法用途，如果您对文章内容有疑问，可以尝试加入交流群讨论或留言私信，如有侵权请联系小编处理。
随着互联网业务快速发展，多IDC的业务支撑能力和要求也逐步提升，行业内的“两地三中心”方案较为流行。
因为mycat本身对于数据库主从同步还是依赖的其本身机制，所以这里我们使用mysql的时候，也需要配好主从同步，另外需要建好从库的只读账号
以oracle 11G版本为准进行解析 Data Guard Architecture Overview (Data Guard架构概述) Data Guard provides the management, monitoring, and automation software to create and maintain one or more synchronized copies of a production database to protect Oracle data from failures, disasters, human error, and data corruptions while providing high availability for mission critical applications. Data Guard is included with Oracle Database Enterprise Edition. Data Guard提供管理，监视和自动化软件，用于创建和维护生产数据库的一个或多个同步副本，以保护Oracle数据免受故障，灾难，人为错误和数据损坏，同时为关键任务应用程序提供高可用性。 Data Guard包含在Oracle数据库企业版中。 Active Data Guard Functionality Overview (Active Data Guard功能概述） Active Data Guard is an option license for Oracle Database Enterprise Edition. Active Data Guard enables advanced capabilities that that extend basic Data Guard functionality. These include:
华为公司今年6.30开源了openGauss数据库，openGauss数据库内核基于postgresql9.2.4演进而来，pg11.3版本数据库中共有290个数据库参数，而openGauss目前有515个数据库参数，每个参数对应一个数据库内核功能，所以可以看到华为公司对pg的内核还是做了非常大的改造和增强。
随着业务的增长和技术的演进，在应用架构上，我们经历了单一用用架构->垂直应用架构->分布式应用架构的发展。对应的，后台数据库也出现了分布式的解决方案。读写分离，负载均衡读写以及两点双写集群甚至于多点多写集群这些，都离不开数据库的同步。一般的，这些同步都是在同一机房内的。 渐渐的，我们的业务扩展到了全国各地甚至与全世界各地。我们不能也不再满足于将应用和数据库部署在一个机房之中。在多个机房中，我们部署相同的服务。那么一个比较严峻的问题就是数据库跨机房的镜像如何做，也就是我们如何保证不同机房间的数据一致性？
8月18日，云+社区开发者大会（杭州站）圆满落幕。本次云+社区开发者大会诚邀业内技术大咖为你带来云开发、小程序、云上“多活”架构等革命性的技术，更有云上直播以及零成本获客这几个当前电商领域的热点业务话题，与大家共探技术与产业转型背景下的电商如何成为时代引领者。下面是腾讯云TVP王晓波老师关于如何基于公有云提供的这些基础设施来简化“多活”架构的一些设计和实践的分享。
自 2008 年双 11 以来，在每年双 11 超大规模流量的冲击上，蚂蚁金服都会不断突破现有技术的极限。
简介：汤波（甘盘），男，1989/02/21，硕士学历。高中开始编程，热爱技术，深信技术让世界更美好。对前沿技术一直保持饥饿感，热衷于创新和革新，让系统体制更为高效和人性化，也深知一个人强走的快，一个团体强才能走的远。在技术团队建设（团队招聘和组建、梯队梯度建设）、技术栈管理（包含技术选型、技术规范建设、软件体系规划）和项目研发管理（软件工程管理、开发效能和质量管理）方面有着较为丰富的实践经验, 维护个人博客tbwork.org。 关注领域：企业中后台，SaaS，PaaS，大型分布式架构，Serverless，Service mesh，新零售，互联网全栈，网络应用/协议开发，计算机算法应用，区块链，人工智能。
秒杀是电商业务里的标志性事件，这样的典型高并发场景会遇见什么样的挑战呢，然后又是如何来解决的呢? 秒杀活动场景 淘宝双11秒杀场景，大量的用户短时间内涌入，瞬间流量巨大（高并发），比如：1000万人同
前文提到异地多活的几种型态和基于OceanBase实现方案。这里再总结一下基于其他分布式数据库（MySQL）实现异地多活时要考虑的点。本文不讨论为什么做异地多活，可以参考末尾的文章。
1.上线同步程序：主要负责新老数据库之间的实时同步，分批同步，避免对线上数据库（新库）造成压力 ，验证数据一致，再进行下一步，否则（回滚策略是），修复同步程序，使其新旧库的数据一致
卖羊肉串首先就得有羊肉，于是我就联系了很多养殖场，我又是一个比较负责任的人，为了保证羊肉的质量，我就去考察了一家又一家养殖场，同时我也是个“小气”的人，所以我考察过程中，和对方谈判、比价，最终选了一个养殖场作为我的羊肉供应商，为我提供羊肉。
互联网系统，经常会有数据迁移的需求。系统从机房迁移到云平台，从一个云平台迁移到另一个云平台，系统重构后表结构发生了变化，分库分表，更换数据库选型等等，很多场景都需要迁移数据。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
