腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

luozhiyun的技术学习

专栏作者

155

文章

155828

阅读量

36

订阅数

Golang 简洁架构实战

数据库 sql github https git

由于golang不像java一样有一个统一的编码模式，所以我们和其他团队一样，采用了 Go 面向包的设计和架构分层这篇文章介绍的一些理论，然后再结合以往的项目经验来进行分包：

2022-05-09

1.1K0

探究Go-YCSB做数据库基准测试

腾讯云测试服务 go 数据库 sql

最近我们在做数据库的技术选型，要做选型的话难免需要对数据库进行一个基准测试，以便可以横向对比不同数据库性能。

2021-12-13

1.1K0

8.深入TiDB：解析Hash Join实现原理

编程算法数据库

所谓 Hash Join 就是在 join 的时候选择一张表作为 buildSide 表来构造哈希表，另外一张表作为 probeSide 表；然后对 probeSide 表的每一行数据都去这个哈希表中查找是否有匹配的数据。

2021-12-08

9950

7.深入TiDB：range 范围计算优化

这篇文章首先会回顾一下整个 SQL 的执行过程，用来说明为什么要范围计算，最后从源码的角度讲解一下析取范式 DNF (disjunctive normal form) 和合取范式 CNF (conjunctive normal form) 是如何转化为范围区间。

2021-11-16

7130

6.深入TiDB：乐观事务

https 数据库批量计算网络安全分布式

由于 TiDB 的事务模型沿用了 Percolator 的事务模型。所以先从 Percolator 开始，关于 Percolator 论文没看过的同学看这里：https://www.luozhiyun.com/archives/609 我已经翻译好了

2021-11-02

5700

中英翻译谷歌论文：Percolator

mapreduce 数据库 sql 存储网站

Updating an index of the web as documents are crawled requires continuously transforming a large repository of existing documents as new documents arrive. This task is one example of a class of data processing tasks that transform a large repository of data via small, independent mutations. These tasks lie in a gap between the capabilities of existing infrastructure. Databases do not meet the storage or throughput requirements of these tasks: Google’s indexing system stores tens of petabytes of data and processes billions of updates per day on thousands of machines. MapReduce and other batch-processing systems cannot process small updates individually as they rely on creating large batches for efficiency.

2021-10-09

1.5K0

5.深入TiDB：Insert 语句

数据库缓存数据分析 sql https

这篇文章我们看一下 TiDB 是插入数据是如何封装的，索引是如何维护的，如果插入的数据发生了冲突会如何处理，类似INSERT IGNORE 与 INSERT ON DUPLICATE KEY UPDATE插入语句是如何处理。

2021-10-09

9040

3.深入TiDB：执行优化讲解

sql https 网络安全编程算法数据库

在 handleQuery 里面会调用 cc.ctx.Parse，这一句代码最终会调用到 Parser 解析器的 Parse 方法进行解析：

2021-09-26

2700

4.深入TiDB：执行计划执行过程详解

上一篇讲解了 TiDB 的执行优化相关的内容，这篇我们继续往下看，在获取到执行优化结果之后如何执行整个计划。

2021-09-25

8970

2.深入TiDB：入口代码分析及调试 TiDB

数据库 https 网络安全 go

其实 TiDB 的调试非常的简单，我这里用的是 TiDB release-5.1，那么需要将 Go 的版本更新到 1.16 之后。main 函数是在 tidb-server 包里面，直接运行就好了。为了保证环境的统一，我用的是 Linux 的环境。

2021-09-14

3780

Spark基础全解析

spark api mapreduce sql 数据库

第一，MapReduce模型的抽象层次低，大量的底层逻辑都需要开发者手工完成。第二，只提供Map和Reduce两个操作。举个例子，两个数据集的Join是很基本而且常用的功能，但是在MapReduce的世界中，需要对这两个数据集做一次Map和Reduce才能得到结果。第三，在Hadoop中，每一个Job的计算结果都会存储在HDFS文件存储系统中，所以每一步计算都要进行硬盘的读取和写入，大大增加了系统的延迟。第四，只支持批数据处理，欠缺对流数据处理的支持。

2020-03-19

1.2K0

Mysql的SQL优化指北

云数据库 SQL Server sql 数据库编程算法

在一次和技术大佬的聊天中被问到，平时我是怎么做Mysql的优化的？在这个问题上我只回答出了几点，感觉回答的不够完美，所以我打算整理一次SQL的优化问题。

2020-02-11

9330

没有更多了

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态