首页
学习
活动
专区
工具
TVP
发布

PingCAP的专栏

专栏成员
537
文章
530875
阅读量
95
订阅数
TiFlash 源码阅读(九)TiFlash 中常用算子的设计与实现
本文主要介绍了数据库系统中常用的算子 Join 和 Aggregation 在 TiFlash 中的执行情况,包括查询计划生成、编译阶段与执行阶段,以期望读者对 TiFlash 的算子有初步的了解。
PingCAP
2022-09-20
5690
深入解析 TiFlash丨多并发下线程创建、释放的阻塞问题
TiFlash 初期存在一个棘手的问题:对于复杂的小查询,无论增加多少并发,TiFlash 的整机 CPU 使用率都远远不能打满。如下图:
PingCAP
2022-05-30
4510
TiFlash 源码阅读(一) TiFlash 存储层概览
本系列会聚焦在 TiFlash 自身,读者需要有一些对 TiDB 基本的知识。可以通过这三篇文章了解 TiDB 体系里的一些概念《 说存储 》、《 说计算 》、《 谈调度 》。
PingCAP
2022-04-27
9451
TiFlash 开源了
TiFlash 终于 开源 了,而且不再闭源:我们选了这个特别的节日开源并做出承诺,希望能显得更加真诚 :)
PingCAP
2022-04-01
2870
MVCC 时光机:在 TiDB 的时空自由穿梭
在 TiDB Hackathon 2021 赛事中,渡渡鸟复兴会赛队的作品“MVCC 时光机”充分利用 MVCC 特性,加强 MVCC 数据的查询、整理、恢复的能力,提高问题处理的效率,摘得了赛事的 “三等奖” 。
PingCAP
2022-03-07
6060
TiDB 5.4 发版丨新功能解读
TiDB 5.4 作为 2022 年开山之作,包含了许多有用有益的新功能和持续性的性能/稳定性提升。本文着重介绍重要新增功能和特性所带给用户的新体验和价值,按照以下章节来组织:
PingCAP
2022-03-04
5500
只有天空才是你的极限,我们热爱探索的过程并沉浸其中丨图数据库 TiMatch 团队访谈
在 TiDB Hackathon 2020 赛事中,TiGraph 项目在 TiDB 中实现了一套新的 Key-Value 编码来引入图模式,处理传统关系型数据库难以覆盖的图数据分析场景,实现了 TiDB 在四度人脉的计算性能大幅提升,夺得了二等奖。
PingCAP
2022-01-19
4940
中通大数据平台在大促中的进化
一年一度的双十一又双叒叕来了,给技术人最好的礼物就是大促技术指南! 而经过这些年的发展,大促早已不仅仅局限于电商行业,现在各行各业其实都会采用类似方式做运营活动,汽车界有 818,电商有 618 、11.11 等等,各种各样的大促场景,对包括数据库在内的基础软件提出了很多新挑战,同时也积累了诸多最佳实践。
PingCAP
2021-11-24
4.7K0
理想汽车 HTAP 读流量优化指南
郑赫扬(艺名:潜龙),理想汽车 DBA。负责公司分布式数据库的技术探索和业务场景落地,热爱开源。就职于金融、互联网教育、电商、新能源汽车等领域。
PingCAP
2021-11-05
5900
TiDB HTAP 上手指南丨添加 TiFlash 副本的工作原理
TiFlash 是 TiDB HTAP 形态的关键组件,它是 TiKV 的列存扩展,在提供了良好的隔离性的同时,也兼顾了强一致性。列存副本通过 Raft Learner 协议异步复制,但是在读取的时候通过 Raft 校对索引配合 MVCC 的方式获得 Snapshot Isolation 的一致性隔离级别。这个架构很好地解决了 HTAP 场景的隔离性以及列存同步的问题。
PingCAP
2021-11-02
7300
黄东旭:可插拔性 × 调度能力 × 云上几乎无限的资源 = ?丨PingCAP DevCon 2021
这次我分享的主题和 2019 年还是一样的——《The Future of Database》,如果你是 PingCAP 的老朋友,参加过之前几次 DevCon 就会知道,这是我的一个保留节目。如果要说我哪里有一些与众不同的气质,我觉得除了发型之外,还有一个是对技术的信仰和执著。这个保留节目我们还是聊聊技术。
PingCAP
2021-07-28
4540
使用 TiDB 构建实时应用
本文由 PingCAP 研发工程师雷宇分享,主要从宏观角度分析 TiDB 究竟能做什么,创造什么样的价值,以及研发过程中的一些设计立足点。 文章将从四个部分分享:
PingCAP
2021-07-21
9210
TiDB Operator + Amazon Web Service,探索云原生数据库的最佳实践
如今数据库上云这一话题受到越来越多的关注,数据库作为重要的基础软件,在云原生时代将面临怎样的变革?当数据库遇上云原生,又将碰撞出什么火花?近日,在亚马逊云开发者 Meetup 上,TiDB Community 架构师王天宜分享了 TiDB 与云原生实践开发经验。
PingCAP
2021-07-14
5950
TiDB 在网易游戏的应用实践
作者介绍: 李文杰,网易互娱高级数据库工程师,TUG 2019 年度和 2020 年度 MVA。主要负责大数据研发和数据分析工作,为产品提供精细化运营指导;同时在部门内推广使用 TiDB,为业务上云及数据库分布式化积累经验和探索最优方案,目前是 TiDB 管理小组负责人。
PingCAP
2021-06-22
6910
构建实时数仓 - 当 TiDB 偶遇 Pravega
数据仓库是公司数据发展到一定规模后必然需要提供的一种基础服务,也是“数据智能”建设的基础环节。早期数仓多为离线模式,主要处理的是 T+1 的数据,随着互联网时代的到来,实时数据处理的场景日益增多,离线数仓已无法满足业务发展的实时性需求。为更好的解决业务场景的实时化需求,实时数仓建设已成必然趋势,这也是 HTAP 数据库的重要能力之一。
PingCAP
2021-06-09
8400
成为一栈式数据服务生态: TiDB 5.0 HTAP 架构设计与成为场景解
数字化转型浪潮是现在进行时,在企业数字化转型的过程中,我们看到一个普遍的趋势,企业对“海量、实时、在线”的数据需求变得更加迫切。数字化转型并不是互联网公司的专利,人工智能、大数据、物联网这些技术也不仅仅是互联网公司才会使用。事实证明,越来越多的传统企业正在应用这些新兴技术进行业务的创新。每一项新技术的应用都需要一定的技术积累,互联网公司也许会配备很多工程师来支持一个数据体系架构。但对于传统公司来说也许不具备这样的实力,他们会发现自己很难驾驭大数据技术栈。此外,传统大技术栈已经慢慢开始难以应对日新月异的业务需求和爆炸性的数据增长。企业的很多业务对数据实时性的要求越来越高,比如风控、反欺诈等,更早地识别和阻断风险可以让企业减少损失;在物流行业,更实时的数据让物流企业可以更实时地调配行车路线和各类资源,以达到更好的运营效率;公共服务也会对实时数据产生要求,如果去柜台办理一个业务,需要等很久才能查到刚刚办的上一个流程的数据,这对于用户体验来说是非常糟糕的。
PingCAP
2021-05-08
5500
DTCC 年度最佳创新产品丨真正的 HTAP 数据库是怎样炼成的?
12 月 21 日,在第十一届中国数据库技术大会(DTCC)2020 数据风云奖评选活动中,PingCAP-TiDB 荣获 2020 年度最佳创新产品奖。同时,PingCAP 数据库内核研发工程师韦万受邀在数据库内核专场进行了《使用 TiDB 列存引擎进行实时数据分析》的主题演讲。
PingCAP
2021-01-11
8500
读论文 - F1 Lightning: HTAP as a Service
论文发布之后已经有一段时间了,之前提到的这篇文章由于种种原因也是欠了有些日子,抱歉了大家。
PingCAP
2020-10-15
1.4K0
TiDB HTAP 深度解读
HTAP (Hybrid Transactional / Analytical Processing)是近些年需求不断受到关注的技术名词,它描述了一个数据库能够同时满足交易以及分析两种作业。TiDB 4.0 是一个针对 HTAP 进行了特别的设计和架构强化,这次给大家带来一篇 VLDB 2020 HTAP 主题的论文解读,比较特殊的是这篇论文是 PingCAP 写的,关于 TiDB HTAP 架构。所以这篇解读,是以作者团队(中的一部分)的视角来写的。原文在此,欢迎指正。
PingCAP
2020-09-18
1.1K0
读 TiDB 论文有感 | 数据强一致性且资源隔离的 HTAP 数据库
陈现麟,伴鱼技术中台负责人,从 0 到 1 搭建伴鱼技术中台,对分布式架构、服务治理、稳定性建设、高并发高 QPS 系统和中台化的组织架构搭建有一定的经验,崇尚简单优雅的设计,关注云原生和分布式数据库。
PingCAP
2020-09-10
1K0
点击加载更多
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档