腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
腾讯云架构师技术同盟
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
腾讯云架构师技术同盟
返回腾讯云官网
存储公众号:王知鱼
专注于 数据存储、云计算 前沿技术分享
专栏成员
举报
150
文章
14651
阅读量
24
订阅数
订阅专栏
申请加入专栏
全部文章(150)
数据(99)
存储(77)
内存(64)
性能(55)
优化(38)
模型(25)
设计(23)
系统(20)
架构(19)
硬件(17)
数据中心(15)
主机(15)
工作(12)
管理(10)
接口(10)
协议(10)
芯片(10)
连接(9)
缓存(8)
测试(8)
配置(8)
效率(8)
samsung(7)
服务器(7)
高性能(7)
解决方案(7)
人工智能(5)
intel(5)
文件系统(5)
迁移(4)
交换机(4)
软件(4)
实践(4)
算法(4)
通信(4)
云存储(4)
数据管道(4)
flash(3)
产品(3)
队列(3)
云服务(3)
数据库(2)
企业(2)
分布式(2)
安全(2)
虚拟化(2)
amd(2)
google(2)
gpu(2)
hpc(2)
io(2)
meta(2)
storage(2)
部署(2)
服务(2)
工具(2)
监控(2)
兼容性(2)
客户端(2)
科技(2)
搜索(2)
图表(2)
网络(2)
压缩(2)
原理(2)
对象存储(1)
自动驾驶(1)
机器学习(1)
arm(1)
嵌入式(1)
api(1)
网站(1)
推荐系统(1)
数据分析(1)
数据处理(1)
系统架构(1)
架构设计(1)
fpga(1)
enterprise(1)
fabric(1)
nvidia(1)
stream(1)
备份(1)
笔记(1)
编码(1)
边缘计算(1)
布局(1)
操作系统(1)
对象(1)
工程师(1)
工作流(1)
行业(1)
集合(1)
集群(1)
计算机(1)
架构师(1)
加密(1)
接口设计(1)
开发(1)
开发工具(1)
开发者(1)
垃圾回收(1)
量化(1)
量子计算(1)
日志(1)
入门(1)
软件架构(1)
生命周期(1)
视频(1)
手机(1)
数据存储(1)
调试(1)
系统设计(1)
性能优化(1)
虚拟机(1)
域名(1)
原型(1)
云原生(1)
数据冗余(1)
LLM(1)
搜索文章
搜索
搜索
关闭
Seagate:高效HDD存储,创新与未来
数据
优化
存储
迁移
工作
在当今数据爆炸的时代,存储技术的创新变得尤为重要。本文深入探讨了Seagate在HDD存储技术方面的最新进展,特别是通过纳米级存储技术、HAMR(热辅助磁记录)和MACH-2技术等创新手段,显著提升了存储密度和系统性能。文章还详细介绍了如何通过优化数据访问和存储层级工作负载迁移,降低总拥有成本(TCO),并提高能源效率。这些技术不仅适用于大规模数据中心,也为未来的生成性AI需求提供了强有力的支持。通过本文,读者将了解到HDD存储技术的最新发展趋势及其在实际应用中的巨大潜力。
数据存储前沿技术
2025-03-04
9
0
NVMe接口优化:HDD存储的未来之路
存储
接口
内存
数据
优化
在生成式AI和大数据时代,存储系统的性能和效率变得至关重要。传统的SATA和SAS接口已经无法满足现代数据中心对高吞吐量和低延迟的需求。NVMe(非易失性内存 express)作为一种新兴的存储接口,正在逐步取代这些传统接口,特别是在大容量存储系统中。本文深入探讨了NVMe接口在HDD(硬盘驱动器)中的应用,分析了其如何通过统一存储堆栈、优化拓扑结构以及引入新技术(如eBPF、CMB、HMB等)来提升存储系统的性能、降低功耗和总拥有成本(TCO)。通过多个实际案例和技术细节,本文为读者展示了NVMe接口如何推动存储技术的革新,并为未来的数据中心和AI应用提供了强有力的支持。
数据存储前沿技术
2025-02-26
83
0
Seagate:HDD在AI时代的价值
存储
缓存
数据
优化
云存储
随着生成式AI的快速发展,数据的指数级增长对存储系统提出了前所未有的挑战。在这一背景下,硬盘驱动器(HDD)因其低成本、大容量和高能效的特点,仍然在数据中心中占据重要地位。本文将探讨HDD在生成式AI时代的优化策略,分析其在存储架构中的角色,以及如何通过技术创新提升存储效率和可持续性。
数据存储前沿技术
2025-02-25
112
0
FAM与CXL:HPC存储架构的未来机遇
存储
hpc
架构
内存
数据
在高性能计算(HPC)领域,存储技术的创新一直是推动计算能力提升的关键。随着数据规模的不断增长和计算需求的日益复杂,传统的存储架构已逐渐无法满足需求。HPE通过其创新的FAM(Fabric-Attached Memory)和CXL(Compute Express Link)技术,为HPC存储架构带来了新的可能性。本文将深入探讨这些技术的核心原理、应用场景以及未来的发展机遇,帮助读者全面理解FAM和CXL在HPC中的重要性。
数据存储前沿技术
2025-02-21
91
0
AI存储需求解析:从数据管道到模型优化
数据管道
存储
模型
数据
优化
AI存储与传统存储的区别在于AI工作负载通常是多阶段的,且每个阶段的需求和模式不同。AI优化目标也与传统存储不同,更关注GPU的利用率和数据科学家的工作效率。此外,AI的任务往往涉及高度并行的操作,且不同的AI任务对性能和容量的要求差异较大。
数据存储前沿技术
2025-02-19
80
0
AMD:AI驱动的存储革命,DPU加速存储访问新趋势
性能
优化
存储
amd
模型
人工智能(AI)的快速发展,尤其是生成性AI的崛起,正在深刻改变存储系统的设计与优化方向。从ChatGPT的快速普及到大型语言模型(LLMs)的规模扩张,AI应用对存储系统的性能、容量和效率提出了前所未有的挑战。与此同时,数据处理单元(DPU)的出现为解决这些挑战提供了新的可能性。本文将探讨AI对存储系统的影响趋势,分析AMD GPU生态系统在AI领域的优势,以及DPU在AI场景中的应用机遇,并通过实际案例研究展示DPU在加速存储访问中的显著效果。
数据存储前沿技术
2025-02-18
78
0
25.2.16 停步笔记
存储
笔记
产品
数据
系统
自去年 9/15 开始更新 FMS 24会议材料,到今天2/15,完整持续了5个月,FMS24 第一篇文章是
数据存储前沿技术
2025-02-18
57
0
FADU:FDP多命名空间实验:提升SSD性能
性能
优化
工作
管理
数据
在现代存储技术中,SSD(固态硬盘)因其高速读写性能和低延迟特性,成为数据中心和云计算环境中不可或缺的一部分。然而,随着多租户环境和混合工作负载的普及,SSD的性能优化和资源管理成为亟待解决的挑战。传统的SSD管理方式往往难以应对复杂的工作负载,导致性能波动和资源浪费。
数据存储前沿技术
2025-02-18
73
0
SMI:QLC SSD与FDP:人工智能时代的存储命题
测试
数据
性能
人工智能
存储
人工智能的快速发展正在深刻改变存储行业的格局。随着大模型的广泛应用和AI技术的不断进步,数据量呈指数级增长,对高容量、高性能存储的需求也日益迫切。
数据存储前沿技术
2025-02-18
141
0
硬件加速键值存储:数据中心的颠覆性变革
硬件
存储
解决方案
数据
数据中心
随着AI计算需求爆发式增长,全球数据中心正面临前所未有的能耗挑战。传统存储架构基于50年历史的512字节块设计,在应对可变数据规模时产生严重的读写放大问题,导致存储效率低下、功耗激增。
数据存储前沿技术
2025-02-18
88
0
SSD写放大与数据放置技术:从原理到实践
数据
性能
原理
主机
实践
数据的增长速度呈指数级上升,云原生时代的到来进一步加剧了对高性能、低成本存储解决方案的需求。
数据存储前沿技术
2025-02-11
120
0
AMD:人工智能时代:存储挑战与解决方案
存储
amd
解决方案
数据
人工智能
人工智能(AI)的应用范围不断扩大,从简单的数据处理到复杂的模型训练和推理,都对计算和存储系统提出了前所未有的挑战。尤其是在大规模AI应用中,数据的体量和复杂性急剧增加,对存储系统的要求也变得更为苛刻。本文将深入探讨AI计算时代存储的核心问题与要求,特别是针对新兴的应用场景,如向量数据库(Vector DB)和检索增强生成(RAG)等。我们将揭示这些应用对性能、容量和吞吐量的独特需求,并探讨如何通过创新技术解决这些挑战。通过阅读本文,读者将了解当前和未来AI存储领域的关键问题,以及如何构建高效、统一的存储架构,以应对不断增长的数据需求和复杂计算任务。
数据存储前沿技术
2025-02-11
113
0
KIOXIA:灵活数据放置(FDP)- 存储架构师必知的技术
存储
架构师
垃圾回收
数据
优化
在现代存储系统中,数据的高效管理和存储优化是提升性能和延长设备寿命的关键。随着存储介质的多样化和技术的不断进步,如何在复杂的存储环境中实现数据的灵活放置,成为了存储架构师们关注的焦点。
数据存储前沿技术
2025-02-11
152
0
Solidigm:云存储加速层(CSAL)如何通过FDP与PCIe Gen5技术释放QLC潜力?
云存储
存储
缓存
数据
性能
随着AI和大数据应用的爆发式增长,云存储系统面临性能与成本的双重挑战。传统QLC SSD虽具备高密度优势,却受限于写入放大效应(WAF)和耐用性问题。在此背景下,云存储加速层(CSAL) 应运而生——这一由Solidigm主导的开源技术,通过创新架构设计将超高速缓存(如Optane)、写入塑形层与QLC介质深度融合。
数据存储前沿技术
2025-02-11
76
0
JEDEC:从Llama到多模态,硬件如何推动人工智能的边界?
模型
内存
设计
硬件
人工智能
大语言模型(LLM)和多模态模型的崛起,AI对计算资源的需求呈指数级增长。从Llama-2到Llama-Next,模型的复杂性不断提升,从单一的文本处理扩展到视频、图像和音频的多模态处理。这种趋势不仅推动了算法和模型的创新,也对硬件基础设施提出了前所未有的挑战。本文深入探讨了AI硬件的发展趋势,特别是算力集群、内存扩展、网络带宽等关键技术的演进,揭示了AI系统设计中的核心问题与解决方案。通过分析Llama系列模型的硬件需求以及AI基础设施的优化方向,本文为读者提供了一个全面了解AI硬件技术发展的窗口,帮助理解未来AI技术突破的关键驱动力。
数据存储前沿技术
2025-02-11
103
0
主机侧在线迁移:挑战与实践案例解析
硬件
主机
迁移
实践
虚拟机
在当今快速发展的云计算和虚拟化技术环境中,主机在线迁移成为了确保系统高可用性和资源优化的重要手段。随着企业对数据处理能力和灵活性的需求不断增加,如何在不中断服务的情况下高效地迁移虚拟机(VM)成为了一个亟待解决的挑战。本文围绕主机侧在线迁移的开放生态系统,深入探讨了迁移管理的关键问题及其解决方案。
数据存储前沿技术
2025-02-11
86
0
NVMe + CXL 场景案例分析
存储
内存
数据
协议
主机
在之前整理的材料中,介绍了 NVMe 作为专门为SSD优化的存储访问接口(协议),为存储系统的高效访问提供通信基础。 CXL 是一种高速接口协议,旨在连接计算、内存和存储资源,提升数据中心的工作效率。它不仅是一个通信协议,还支持多种设备间的互操作性,允许灵活的资源分配和管理。
数据存储前沿技术
2025-02-11
105
0
刨根问底:NVMe 从哪里来,到哪里去?
迁移
接口
协议
主机
存储
首先,介绍自NVMe 2.0规范发布以来,企业级SSD出货量的增长情况,并预测了未来几年内不同接口类型的硬盘出货量变化。详细列出了消费级和企业级NVMe SSD的出货量数据,突显了NVMe技术在消费者和企业市场的普及与增长。概述NVMe技术标准更新历程,包括新批准的技术提案和已经标准化的规格,展示了NVMe生态系统不断演进的技术栈。还提到了NVMe技术在安全性、可扩展性、服务质量等方面的增强特性,以及对未来技术发展的展望,如支持新兴技术和提高系统可靠性
数据存储前沿技术
2025-02-11
106
0
Micron:推荐系统的数据平台设计
设计
数据
存储
推荐系统
模型
HDD 作为传统硬件基础设施,一直支持着数据湖中的对象存储。然而,随着 AI 解决方案的生产规模不断增大(如 Meta 的 Tectonic-Shift 平台),对数据存储摄取管道提出了新要求。以深度学习推荐模型(DLRM)训练为例,首先介绍对象存储在 AI 扩展时可能面临的挑战,包括数据规模、训练 GPU 和 AI/ML 运营部署的增长。然后,我们将解释闪存存储如何满足这些系统的带宽和功率需求,分享 MLPerf DLRM 预处理和训练中存储跟踪分析的观察结果。最后,呼吁在标准化基准方面开展更多工作,以描述数据摄取性能和能效。
数据存储前沿技术
2025-02-11
73
0
DeepSpeed 如何从存储层优化推理性能?
模型
内存
性能
优化
存储
随着支持AI的应用程序能够释放更多的商业价值,需要支持不同程度的生成式AI(Gen AI),涵盖从数据中心的基础模型训练到边缘和移动设备上的推理部署。
数据存储前沿技术
2025-02-11
176
0
点击加载更多
社区活动
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·干货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档