腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯云数据库(TencentDB)

数据库

专栏作者

840

文章

1426535

阅读量

401

订阅数

Hi，我是KeeWiDB

存储云数据库 Redis 数据结构数据库 sql

如果现在的我们离开了互联网，生活会是什么样子？互联网++++，已经深刻渗透到人们的生活中。不知道大家有没有想过？每一个互联网+结合的背后都是海量的存储需求。你查看的每一个商品、组建的每一个战队、阅读的每一篇文章，基于互联网的每一个兴趣爱好，都有它的key和value。在 key-value 数据库领域，Redis 因其高吞吐、低延迟、丰富的数据结构一直受开发者欢迎，但 Redis 全内存方案无法解决海量数据所带来的规模与成本问题，数据可靠性也面临挑战。目前业界也有很多基于磁盘的键值存储方案，比如Ro

腾讯云数据库 TencentDB

2022-09-22

3410

向量化执行从理论到实现，仅需五步！ | DB·洞见

缓存编程算法数据库数据结构 sql

随着硬件技术的不断发展，数据库系统也需要进行相应的优化，以便可以充分发挥出底层硬件提供的能力。以查询计划执行为例。原有的数据库执行一个查询计划，往往采用火山模型的方式。这种上层算子递归调用下层算子获取并处理元组的方式，存在虚函数调用次数较多、指令或数据cache miss率高的缺陷，并且这种一次处理一个元组的方式无法使用CPU的SIMD指令进行优化，从而造成查询执行效率低下的问题。向量化执行就是解决上述问题的一种有效手段。探索前沿研究，聚焦技术创新。本期DB·洞见由腾讯云数据库高级工程师胡翔为大家介绍向

腾讯云数据库 TencentDB

2022-08-26

2K1

三篇论文入选国际顶会SIGMOD，厉害了腾讯云数据库

文件存储数据库大数据数据结构

好消息！6月13日，腾讯云数据库三篇论文再次入选数据库行业顶会SIGMOD，被SIGMOD 2022 Research Full Paper（研究类长文）收录。本次被收录的研究成果中，新型数据结构设计、AI智能调参优化等均属于业界首次提出。腾讯云数据库多次入选SIGMOD，表明腾讯云数据库在存储、智能管控等方面的积累与前沿创新获得了国际权威认可。 SIGMOD，全称数据管理国际会议（Special Interest Group on Management Of Data），是由美国计算机协会（ACM）

腾讯云数据库 TencentDB

2022-06-14

1.1K0

基于LSM-Tree 的分布式组件化 KV 存储系统 | DB·洞见回顾

存储数据库 TDSQL MySQL 版数据结构

随着云服务基础架构以及微服务技术的日益成熟，很多大型系统能够分解为根据应用 workload 需求的多个子系统，再通过网络交互组装在一起协同工作。 Nova-LSM，一个将基于LSM-Tree的分布式KV 存储系统分解为使用RDMA进行通信的组件的工作。这些组件将存储与处理分开，使处理组件能够共享存储带宽和空间。处理组件将文件块 (SSTable) 分散到任意数量的存储组件中，并通过一定机制平衡它们之间的负载，在运行时动态构建范围以并行化压缩并提高性能。Nova-LSM 具有很好的可伸缩性，在一些场景下性

腾讯云数据库 TencentDB

2022-05-13

9850

DB·洞见#2回顾 | 基于LSM-Tree存储的数据库性能改进

数据库数据迁移数据结构 sql

LSM-Tree（Log Structured Merge Tree）是数据库领域内较高效的key-value存储结构，被广泛应用于工业界数据库系统，如经典的单机kv数据库LevelDB、RocksDB，以及被诸多分布式NewSQL作为底层存储引擎。本期将由腾讯云数据库高级工程师韩硕来为大家分享基于LSM-Tree存储的数据库性能改进，重点介绍近年来学术界对LSM-Tree的性能改进工作，并探讨这些改进措施在工业界数据库产品中的应用情况以及落地的可能性。以下是分享实录： LSM-Tree基本结构 LS

腾讯云数据库 TencentDB

2022-01-06

1.3K0

硬核干货 | 轻松驾驭EB级千万QPS集群，TDSQL元数据管控与集群调度的演进之路

分布式 unix TDSQL MySQL 版数据库数据结构

日前，TDSQL新敏态引擎正式发布，支持无限扩展、在线变更，可以完美解决对于敏态业务发展过程中业务形态、业务量的不可预知性，高度适配金融敏态业务。该引擎100%兼容MySQL，计算/存储资源均可独立全透明弹性扩缩容，实现了PB级存储的Online DDL；计算层每个节点均可读写，轻松支撑千万级QPS流量，可以有效应对业务的变化。针对海量数据存储的场景，实现最高20倍压缩率的超高压缩比存储能力，大幅节省资源成本。其独有的数据形态自动感知特性，使数据能根据业务负载情况实现自动迁移，打散热点，降低分布式事务

腾讯云数据库 TencentDB

2021-12-27

6680

腾讯云超火开源数据库产品架构揭秘

缓存云数据库 Redis 存储数据库数据结构

Redis 作为高性能缓存经常被广泛应用到各个业务——如游戏的排行榜、分布式锁等场景。但Redis也并非万能的，在长期的使用过程中，我们也遇到 Redis 一些痛点问题, 比如内存占用高, 数据可靠性差, 业务维护缓存和存储的一致性繁琐等。因此，腾讯云数据库Tendis诞生了，今天，我们就结合视频，一起回顾腾讯云数据库Tendis混合存储版的整体架构, 并且详细揭秘其内部的原理。进入“腾讯云数据库”公众号，后台回复“0331李景军”，即可下载分享PPT。 Redis&Tendis 使用 Redis

腾讯云数据库 TencentDB

2021-04-19

9630

微信大牛教你深入了解数据库索引

二叉树缓存数据结构数据库云数据库 SQL Server

| 作者刘国斌，腾讯微信事业群研发工程师，目前从事企业微信的后台研发工作，已经参与企业微信消息系统、群聊、客户联系等企业微信多个核心功能的迭代。 ---- 数据库查询是数据库的最主要功能之一。我们都希望查询数据的速度能尽可能的快，因此数据库系统的设计者会从查询算法的角度进行优化。最基本的查询算法当然是顺序查找（linear search），然而这种复杂度为O(n)的算法在数据量很大时显然是糟糕的，好在计算机科学的发展提供了很多更优秀的查找算法，例如二分查找（binary search）、二叉树查找（

腾讯云数据库 TencentDB

2020-08-11

6100

又一国产数据库诞生！腾讯发布 TGDB，实时查询比 Neo4j 快 20-150 倍！

linux 分布式编程算法数据结构大数据

受访者 | 邵宗文，腾讯云图数据库产品经理记者| 夕颜出品 | CSDN（ID:CSDNnews）近日，又一国产数据库诞生！这次是腾讯家推出的分布式图数据库产品——腾讯云数图 TGDB（Tencent Graph Database）。据称，这款数据库能够实现万亿级关联关系数据实时查询，高效处理异构数据，支持实时图计算。从理论上说，该图数据库的集群节点规模可以达到万台以上，在不同的公开数据集下查询速度比世界市场占有率最高的 Neo4j 快 20-150 倍！在近年，图数据库逐渐火爆起来，据 G

腾讯云数据库 TencentDB

2020-06-10

2.7K2

浅析 InnoDB Redo Log

数据结构编程算法云数据库 SQL Server 数据库 sql

| 作者：陈俊熹，腾讯云数据库研发工程师，主要负责腾讯云MySQL数据库研发工作。 ---- 导语：之前的文章（见本文末）已经介绍了 InnoDB 的部分内外存数据结构，我也在学习过程中对 InnoDB 的一些数据对象有了基本认识，后面的文章会从数据流出发来学习 InnoDB。这篇文章主要学习 InnoDB Redo Log 的流程。Redo Log 是 InnoDB 实现数据一致性和持久化存储的关键，本文主要从设计原理和部分源码实现出发，对其中的知识点进行归纳总结。 1 Redo Log Buffer

腾讯云数据库 TencentDB

2020-02-14

1.2K0

InnoDB 外存数据结构浅析

云数据库 SQL Server 文件存储存储数据库数据结构

| 作者：陈俊熹，腾讯云数据库研发工程师，主要负责腾讯云MySQL数据库研发工作。 ---- 外存数据结构，或者说磁盘数据结构 ( On-Disk Structures )，记录的是需要进行持久化存储的元数据和数据。在存储体系中，访问外存数据带来的系统问题很多，比如如何快速找到数据，如何加速对元数据的频繁访问，如何进行数据一致性存储和灾难恢复等。本文介绍了 InnoDB 主要的外存数据结构，包括表和表空间 ( Table & TableSpace )，索引 ( Index ) 和恢复日志等。理解这些外存数

腾讯云数据库 TencentDB

2019-12-30

5440

鹅厂老司机教你学习Innodb

编程算法数据结构云数据库 SQL Server 数据库 sql

点击上方蓝字每天学习数据库 | 本文作者：陈俊熹，腾讯云数据库研发工程师，主要负责腾讯云MySQL数据库研发工作。 ---- Innodb存储引擎是目前MySQL最主流的存储引擎，学习Innodb, 可以先从其最基础的数据结构开始。Innodb的数据结构主要包括内存数据结构(In-MemoryStructures)，如buffer pool, change buffer, log buffer等, 磁盘数据结构(On-DiskStructures)，如索引Index, 表空间及日志结构等。 Buffer

腾讯云数据库 TencentDB

2019-05-16

7.7K0

前沿观察 | Redis Streams原生数据结构科普

云数据库 Redis uml 数据结构数据库 sql

点击上方蓝字每天学习数据库 Redis 5.0中以引入的新Redis数据结构“Streams”引起了社区的极大兴趣。不久之后，我想进行社区调查，与有生产用例的用户交谈，并撰写博客。今天我想解决另一个问题：我开始怀疑很多用户只是将Streams作为解决Kafka（TM）类似场景的方案。但实际上，Stream数据结构也被设计为在生产者和消费者消息传递的场景使用，但是认为Redis Streams仅仅对这个场景有用是不够的。 Stream是一种极好的模式和“心智模型”，可以在系统设计中取得巨大成功，但Red

腾讯云数据库 TencentDB

2019-05-16

6000

前沿观察 | 谷歌新出SageDB：一个自学成才的数据库

编程算法数据库数据处理数据结构

点击上方蓝字关注每天学习数据库版权声明：本文由腾讯云数据库产品团队整理，页面原始内容来自于db weekly英文官网，若转载请注明出处。翻译目的在于传递更多全球最新数据库领域相关信息，并不意味着腾讯云数据库产品团队赞同其观点或证实其内容的真实性。如果其他媒体、网站或其他任何形式的法律实体和个人使用，必须经过著作权人合法书面授权并自负全部法律责任。不得擅自使用腾讯云数据库团队的名义进行转载，或盗用腾讯云数据库团队名义发布信息。原文链接： https://blog.acolyer.org/2019/01

腾讯云数据库 TencentDB

2019-05-16

1.4K0

云测评 | RedisGraph 1.0的基准测试

数据结构云数据库 Redis mac os 腾讯云测试服务 sql

导读：本文来自RedisGraph团队，RedisGraph是一个Redis内嵌高性能内存图数据库。本文介绍了RedisGraph v1.0正式版本的一些实现特性，以及使用基准测试工具TigerGraph对RedisGraph进行测试的过程和结果。全文约2800字，阅读需20分钟。原文地址：https://redislabs.com/blog/new-redisgraph-1-0-achieves-600x-faster-performance-graph-databases/ ---- 今天我们很高

腾讯云数据库 TencentDB

2019-05-16

1.2K0

云测评 | RedisGraph 1.0的基准测试

数据结构云数据库 Redis mac os 腾讯云测试服务 sql

导读：本文来自RedisGraph团队，RedisGraph是一个Redis内嵌高性能内存图数据库。本文介绍了RedisGraph v1.0正式版本的一些实现特性，以及使用基准测试工具TigerGraph对RedisGraph进行测试的过程和结果。

腾讯云数据库 TencentDB

2019-03-26

1.7K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态