首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
首页标签分布式存储

#分布式存储

千亿级数据量,毫秒级读写,深度剖析探探LSM Tree存储引擎

童子龙

探探是挚文集团旗下一款月活超千万的社交软件,其部分核心业务数据依托于LevelDB进行存储,特别是用户滑动行为所生成的关系链及其各类关系类型的计数系统。该平台能...

800

喜报!腾讯云存储荣获2024年度分布式存储产品金奖

云存储

腾讯云 | 云存储 (已认证)

在峰会发布的“2024存储风云榜”中,腾讯云数据加速器 GooseFS 荣膺“2024年度分布式存储产品金奖”。“2024存储风云榜”展示了数据存储领域的创新成...

5800

HBase、Elasticsearch、TiDB 的优势与局限性及适用场景分析

_春华秋实

在分布式存储领域,HBase、Elasticsearch 和 TiDB 是三种常见的技术,各自有独特的优势和局限性。以下是对它们的总结及适用场景分析,帮助你更好...

12620

搞懂数据最终一致性

写bug的高哈哈

今天我们来讨论一下数据最终一致性的相关问题。这个问题在分布式环境下非常典型,我们可以通过一个具体的业务场景来进行说明,下面是这个业务场景的示例图:

9810

解读Redis的四种企业级解决方案

后端小白

然而当我们在使用Redis时会遇到一些意外情况影响数据同步的一致性,从而影响到项目的数据查询的正确性;下面是使用Redis时的常见问题以及解决方案:

13900

Hadoop 2.0:主流开源云架构(一)

Francek Chen

  自从云计算的概念被提出,不断地有IT厂商推出自己的云计算平台,但它们都是商业性平台,对于想要继续研究和发展云计算技术的个人和科研团体来说,无法获得更多的...

6010

深入理解文件上传下载的原理及实现逻辑

Lion Long

文件上传的是根据 http 协议的规范和定义,完成请求消息体的封装和消息体的解析,然后将二进制内容保存到文件。

27710

加速分布式文件传输:掌握FastDFS-Nginx fast-mod扩展模块的关键技术要点

Lion Long

在每台storage服务器主机上部署nginx及FastDFS,由nginx模块对storage存储的文件提供http下载服务,仅当当前storage节点找不到...

6600

解锁效率:了解FastDFS文件同步机制

Lion Long

数据文件storage_groups.dat和storage_servers.dat中的记录之间以换行符(\n)分隔,字段之间以英文逗号(,)分隔。

18100

构建高可用文件存储:深入解析FastDFS集群部署的关键步骤

Lion Long

部署2个tracker server,两个storage server。 模拟测试时多个tracker可以部署在同一台机器上,但是storage不能部署在同一台...

11710

FastDFS的文件上传、下载原理以及负载均衡方法

Lion Long

高可用,通过冗余的方式提供服务。当集群中不止一个tracker服务时,由于tracker之间是对等的关系,客户端在上传文件时可以任意选择一个tracker。

13210

解密FastDFS:揭秘小文件存储的秘密

Lion Long

(1)Facebook存储了600亿张以上的图片,推出了专门针对海量小图片定制优化的Haystack进行存储。

12900

后端必考!一文读懂分布式存储架构背后的存储引擎原理

腾讯云开发者

很多应用都属于数据密集型应用,而非计算密集型;对于这类应用,CPU 往往不是第一限制性因素,关键在于数据量 、数据复杂度 和 数据的快速多变性;因此数据库的选型...

53620

如何优化DPU上存储协议(NVMe Over TCP)卸载的性能?

晓兵

NVMe-TCP 是一种基于 TCP 的高性能流水线存储协议,它抽象了对存储控制器的远程访问,为主机提供了本地存储的幻觉。在 NVMe-TCP 中,每个存储队列...

28910

分布式存储:为 StarTowerChain 数据治理保驾护航

Wbe3老于

在当今数据如黄金般珍贵的时代,数据治理对于 StarTowerChain 来说是重中之重。分布式存储作为一种先进的技术手段,正如同忠诚的卫士,为 StarTow...

6700

Kubernetes 使用Rook-Ceph作为持久化存储PV

繁华是客

在此之前,需要注意是,Ceph是分布式存储,如果你是3个节点,3个第二个硬盘。他是通过占用这3个硬盘,然后当成一个池子(Pool)来使用,他会通过内部算法来分片...

17810

DPU(IPU)使用 CXL 提升存储堆栈或服务工作流的软硬件处理流水线-INTEL

晓兵

• 使用 CXL 连接的设备内存(即 CXL.mem)作为 CPU+DPU 共享内存

21510

XPU - 利用 RAID 卸载重新定义数据冗余(部分功能卸载到SSD)

晓兵

XPU: xPU 代表一系列架构(即 CPU、GPU、FPGA 和其他加速器),具体取决于应用

25110

【vSAN分布式存储服务器数据恢复】VMware vSphere vSAN 分布式存储虚拟化平台VMDK文件1KB问题数据恢复案例

海境超备

一:案例描述 知己知彼,方能百战百胜,数据恢复也是一样,详细了解数据丢失的过程,可以使数据恢复更加简单,与客户详细沟通得知故障原因如下:整个VMware vSp...

14520
领券