本博客来源自个人毕业设计的开发过程中，需要使用TiKV做为K-V store进行持久化存储数据，为方便开发故部署单节点集群，方便调试：
我们激动地宣布TiKV 4.0的普遍可用性！我们非常高兴和自豪地看到，在全球多个行业中，有超过1000名采用者在生产场景中使用TiKV。感谢所有在过去一年中为我们提供反馈、错误报告和拉请求的用户。我们应用了从这些部署中获得的经验教训，带来了新的特性和更好的安全性，以支持用户不断增长的需求。
TiKV 是一个支持事务的分布式 Key-Value 数据库，有很多社区开发者基于 TiKV 来开发自己的应用，譬如 titan、tidis。尤其是在 TiKV 成为 CNCF 的 Sandbox 项目之后，吸引了越来越多开发者的目光，很多同学都想参与到 TiKV 的研发中来。这时候，就会遇到两个比较大的拦路虎：
因为公司数据量比较大，一种方法是采用mycat这种数据库中间件的形式。但是感觉不是很方便。后来发现了TiDB打算，可以尝试试用一下。用datax把历史数据转入到TiDB中，然后在TiDB中进行分析。 第一步：现在台式机中的虚拟机中部署起来。 第二步：数据转移 第三部：测试性能，判断是否可用。
在整个 SQL 执行过程中，需要经过 Parser，Optimizer，Executor，DistSQL 这几个主要的步骤，最终数据的读写是通过 tikv-client 与 TiKV 集群通讯来完成的。
国产的分布式数据库不少，TDSQL， OB, TIDB ，等等都是比较知名的产品，使用的分布式协议也不同，有使用POSTGRES-XL ,也有从外观模仿ORACLE 的，还有借鉴各家所长自己研发的。为什么最近一直在看TIDB，主要有以下几点
旧金山，加利福尼亚州-2020年9月2日-CNCF®（Cloud Native Computing Foundation®，云原生计算基金会）为云原生软件构建可持续的生态系统，今天宣布TiKV是第12个毕业的项目。从孵化阶段到毕业阶段，TiKV被越来越多的人采用，拥有一个开放的治理过程，特性成熟，以及对社区、可持续性和包容性的坚定承诺。
今日，云原生计算基金会 ( CNCF ) 宣布 TiKV 正式从 CNCF 毕业。TiKV 是继 Harbor 之后在 CNCF 毕业的第二个中国原创开源项目。从孵化项目晋升为毕业项目，标志着 TiKV 在产品成熟度、项目采用率以及社区持续性等方面取得一系列进展，可应用到各类行业、各种规模的生产环境。
在 TiDB 的产品迭代中，不免会碰到一些兼容性问题出现。通常协议上的兼容性 protobuf 已经能帮我们处理的很好，在进行功能开发，性能优化时，通常会保证版本是向后兼容的，但并不保证向前兼容性，因此，当集群中同时有新旧版本节点存在时，旧版本不能兼容新版本的特性，就有可能造成该节点崩溃，影响集群可用性，甚至丢失数据。目前在有不兼容的版本升级时，会要求进行离线升级，但这会影响到服务，我们需要一个适合的机制来进行不停服务的升级。因此我们需要在进行滚动升级时，让这些不能保证整个集群的向后兼容性的功能不被启用。只有在保证集群中所有节点都已经升级完成后，我们才安全的启用这些功能。
今天，我们很自豪地宣布TiKV 3.0的普遍可用性！无论是跨越数百个节点，还是存储超过一万亿对键值对，我们都看到用户在真实的生产场景中对TiKV进行了测试。在3.0中，我们应用了从这些部署中学到的经验，带来了许多新特性，可以更好地支持用户不断增长的需求。
神州数码钛合金战队是一支致力于为企业提供分布式数据库 TiDB 整体解决方案的专业技术团队。团队成员拥有丰富的数据库从业背景，全部拥有 TiDB 高级资格证书，并活跃于 TiDB 开源社区，是官方认证合作伙伴。目前已为 10+ 客户提供了专业的 TiDB 交付服务，涵盖金融、证券、物流、电力、政府、零售等重点行业。
社区是一个开源项目的灵魂，随着 TiDB/TiKV 新的社区架构升级， TiKV 社区也计划逐步成立更多个 Special Interest Group（SIG ）吸引更多社区力量，一起来改进和完善 TiKV 项目。SIG 将围绕着特定的模块进行开发和维护工作，并对该模块代码的质量负责。
TiDB的存储用的TiKV, TiKV是基于RocksDB实现了分布式（可水平扩展，支持主从），RocksDB是对单机版LevelDB的封装。
OLTP + 实时OLAP两种Store并行，从客户端进来的请求智能选择，TiDB 可以自动选择使用 TiFlash 列存或 TiKV 行存，甚至在同一查询内混合使用提供最佳查询速度。(这个选择机制与 TiDB 选取不同索引提供查询类似：根据统计信息判断读取代价并作出合理选择)。
说明：分布式事务性键值数据库，最初是为了补充TiDB而创建的。TiKV采用Rust构建，由Raft（通过etcd）驱动，并受到Google Spanner设计的启发，提供简单的调度和自动平衡，而不依赖于任何分布式文件系统。项目是一个开源、统一分布式存储层，支持功能强大的数据一致性、分布式事务、水平可扩展性和云原生架构。TiKV最初于2016年在PingCAP开发，现在得到三星、摩拜单车、今日头条、饿了么、腾讯云和 UCloud的支持。用户包括北京银行、饿了么、Hulu、联想、摩拜单车和诸多其他企业。TiKV由Cloud Native Computing Foundation（CNCF）托管。如果您是一家希望帮助塑造容器打包、动态调度和面向微服务的技术发展的公司，请考虑加入CNCF。有关谁参与以及TiKV扮演角色的详细信息，请阅读CNCF公告（https://www.cncf.io/blog/2018/08/28/cncf-to-host-tikv-in-the-sandbox/）。
客座文章最初由CommunityBridge导师计划TiKV项目的学员Alex Chi在TiKV博客上发表。他也是上海交通大学的一名大二学生。
「TiDB 查询优化及调优」系列文章将通过一些具体的案例，向大家介绍 TiDB 查询及优化相关的原理和应用，在 上一篇文章 中我们简要介绍了 TiDB 查询优化器的优化流程。
Our first ambassador spotlight goes to Queeny Jin, who has been spreading the word about the incubating CNCF project TiKV since its inception in 2016. She’s been working at PingCAP, the company that created the project, since May 2016, and “I am very lucky to witness the birth, the development, and the evolution of TiKV, both in terms of the project and the community,” she says. “It’s so exciting to see how popular TiKV is after it became part of the CNCF community. Now it has 7.2k stars and 230 contributors all over the world.”
Tedis（https://github.com/eleme/tedis）是基于开源 TiKV 的兼容 Redis 协议的强一致性的 NoSQL 数据库开源项目。 本文介绍一下 Tedis 开源项目的架构设计和特性，以及架构背后的一些思考（包括为何选择 TiKV 和 Redis 协议）。
将数据按照 key 的范围划分成大致相等的切片（下文统称为 Region），每一个切片会有多个副本（通常是 3 个），其中一个副本是 Leader，提供读写服务。
大家如果看过我之前发过的文章就知道，我写过很多篇关于 MySQL 的文章，从我的 Github 汇总仓库 中可以看出来：
在日常业务使用或运维管理 TiDB 的过程中，每个开发人员或数据库管理员都或多或少遇到过 SQL 变慢的问题。这类问题大部分情况下都具有一定的规律可循，通过经验的积累可以快速的定位和优化。 但是有些情况下不一定很好排查，尤其涉及到内核调优等方向时，如果事先没有对各个组件的互访关系、引擎存储原理等有一定的了解，往往难以下手。
TiDB 是 PingCAP 公司基于 Google Spanner / F1 论文实现的开源分布式 NewSQL 数据库。 https://github.com/pingcap/tidb docker部署方案 (https://github.com/pingcap/docs-cn/blob/master/op-guide/docker-deployment.md) 特性 SQL支持 （TiDB 是 MySQL 兼容的） 水平线性弹性扩展 分布式事务 跨数据中心数据强一致性保证 故障自恢复的高可用 TiD
TiFlash是TiDB生态组件之一，专门解决OLAP场景。借助ClickHouse实现高效的列式计算。
SQL 语句发送到 TiDB 后经过 parser 生成 AST（抽象语法树），再经过 Query Optimizer 生成执行计划，执行计划切分成很多子任务，这些子任务以表达式的方式最后下推到底层的各个 TiKV 来执行。
TIDB 是一个分布式数据库，那么与单机相比，他的文件的分布式使用与单机架构的数据库是有不同的。
TiDB是无状态的，所以各节点可以水平扩缩容；扩容期间不会影响集群的读写，整个过程在线； Tidb、tikv、pd扩容方式都是一致的； tiflash有所区别
TiDB Lab，全称 TiDB Laboratory，是一个集 TiDB 集群状态的在线实时可视化与交互式教学的平台。用户可以一边对 TiDB 集群各个组件 TiKV、TiDB、PD 进行各种操作，包括上下线、启动关闭、迁移数据、插入查询数据等，一边在 TiDB Lab 上以动画形式观察操作对集群的影响，例如数据是怎么流动的，Region 副本在什么情况下发生了变更等等。通过 TiDB Lab 这种对操作进行可视化反馈的交互模式，用户可以快速且生动地理解 TiDB 内部原理。
TiKV 推出了名为“partitioned-raft-kv”的新实验性功能，该功能采用一种新的架构，不仅可以显著提高 TiDB 的可扩展性，还能提升 TiDB 的写吞吐量和性能稳定性。
数据库作为基础设施，其安全性不言而明，因此数据安全备份和恢复功能是在严肃使用场景下的标配。TiDB 作为一款分布式数据库，目前可以满足超大集群的备份恢复的需求，经过测试，10T 数据的备份恢复速度可以达到 GB/s 级别。这得益于我们研发的分布式备份恢复工具 Backup&Restore That Scales（以下简称 BR）。
朋友圈,关注的公众号经常出现各个公司开始用TiDB的案例和各种技术分享。对TiDB蛮有兴趣，这几天终于可以尝试接触 TiDB,第一步当然是安装和部署。过程还是蛮曲折的，耗费差不多三个工作日。本文先记录安装过程和遇到的问题，避免其他朋友踩坑。
TiDB 是 PingCAP 公司设计的开源分布式 HTAP (Hybrid Transactional and Analytical Processing) 数据库，结合了传统的 RDBMS 和 NoSQL 的最佳特性。TiDB 兼容 MySQL，支持无限的水平扩展，具备强一致性和高可用性。TiDB 的目标是为 OLTP (Online Transactional Processing) 和 OLAP (Online Analytical Processing) 场景提供一站式的解决方案。
在前面的介绍中，大家应该对 TiFlash 如何存储、计算有了一定的了解。那么今天我们主要讲解一下 TiFlash 如何被添加副本，以及获得数据的。
之前的 TiKV 源码解析系列文章介绍了 TiKV 依赖的周边库，从本篇文章开始，我们将开始介绍 TiKV 自身的代码。本文重点介绍 TiKV 最外面的一层——Service 层。
TiDB主要分为3个核心组件：TiDB Server ,PD Server 和TiKV Server，还有用于解决用户复杂OLAP需求的TiSpark组件。部署一个单机版的TiDB，这三个组件都需要启动。如果用生产环境，需要使用Ansible部署TiDB集群。
本文介绍了基于数据库时间的系统优化方法，以及如何利用 TiDB Performance Overview 面板进行性能分析和优化。
最近TIDB 开放了相关的初级课程，目前最火热的分布式数据库，那是的深入一下，最近一段时间都会围绕TIDB 的课程学习来写一写相关的总结和体会。
Tedis（https://github.com/eleme/tedis） 是基于开源 TiKV 的兼容 Redis 协议的强一致性的 NoSQL 数据库开源项目。 本文介绍一下 Tedis 开源项目的架构设计和特性，以及架构背后的一些思考（包括为何选择 TiKV 和 Redis 协议）。
经历了上礼拜漫长的上线周期，终于有时间总结一下期间发生的故事。TiDB 是一款非常优秀的国产分布式 NewSQL 数据库，因其支持水平扩展性、强一致性、高可用性，从 18 年 3 月起已在国内银行的账务、支付类核心系统得到应用。
复杂业务查询对于传统的关系型数据库来说是一种考验，而通过 TiKV 行存与 TiFlash 的列存结合使用就能很好地应对。本文根据 TUG 用户边城元元在 TiDB 社区技术交流石家庄站的分享整理，详细介绍了 TiKV & TiFlash 加速复杂业务查询的原理及实践方案。
TiKV 是一个分布式事务型的键值数据库，提供了满足 ACID 约束的分布式事务接口，并且通过 Raft 协议 保证了多副本数据一致性以及高可用。TiKV 作为 TiDB 的存储层，为用户写入 TiDB 的数据提供了持久化以及读写服务，同时还存储了 TiDB 的统计信息数据。
本文来自涂鸦智能的刘筠松在 PingCAP DevCon 2021 上的分享，包括 TiDB 在 IoT 领域，特别是在智能家居行业的使用。
最近某集群扩容了一批物理机，其中 TiKV 节点有6台机器12个实例，同时调整了 label 设置增加了一层机柜级容灾。因为前期做了比较充分的准备工作，到了变更窗口只等着执行scale-out就行，操作过程也很顺利，很快就把所有节点都扩进去了，检查完各实例的运行状态，确保region已经开始正常调度，就放心去睡觉了（半夜变更，结束时凌晨1点左右）。
本文将简要介绍 TiKV Coprocessor 的基本原理，面向想要了解 TiKV 数据读取执行过程的同学，同时也面向想对该模块贡献代码的同学。阅读本文前，建议读者对 TiDB 整体架构有所了解，先阅读三篇文章了解 TiDB 技术内幕：说存储、说计算、谈调度。
TiKV 提供两套 API，一套叫做 RawKV，另一套叫做 TxnKV。TxnKV 对应的就是上面提到的 Percolator，而 RawKV 则不会对事务做任何保证，而且比 TxnKV 简单很多，这里我们先讨论 RawKV。
1.1 客户端一般通过tidb来连接TiDB集群，一般OOM之后可能会出现Lost Connection to MySQL Server during query
在 TiDB 的架构中，所有的数据按照 range 划分成一个个 Region 分布在多个 TiKV 实例上。随着数据的写入，一个集群中会产生上百万，甚至千万个 Region。而量变引起质变，单 TiKV 实例上过多的 Region 无疑会带来比较大的负担，进而影响整个集群的性能表现。
TiDB集群上线运行一段时间，近期巡检的时候发现一个问题，集群中TiKV节点内存占用比较高，尤其在导入数据的时候，节点的内存会更高
TiDB 集群的监控面板里面有两个非常重要、且非常常用的指标，相信用了 TiDB 的都见过：
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
