广告:冬瓜哥新作《大话计算机——计算机系统底层架构原理极限剖析》将于8月份出版。
在数据世界里,时间同样是恒定的。人们希望更快的数据流动和更智能的数据策略来提升数据利用价值。
傲腾(Optane)是Intel在存储器方面的重量级产品。其采用3D Xpoint存储非易失介质来存储数据。3D Xpoint的一大特点就是延迟更加接近SDRAM,而寿命方面大大高于NAND Flash,而容量密度则介于SDRAM和NAND Flash之间。这种特性决定了傲腾天生就是在SDRAM和Flash甚至HDD之间做缓存的好料。
现如今的电脑主板,m.2/ngff接口相当普遍。具有minipcie接口的主板大概只有工控主板和老款的主板的了。并不代表minipcie就会别淘汰了。
随着数据集规模的不断增长,数据中心负载对内存、存储的性能和容量的要求也在不断提高。与此同时,每单位时间需要处理更多数据,组成计算系统的组件性能也在不断提高。所谓性能,是一个涉及多方面的话题,其中一些指标(例如带宽)的增长速度就会比其它指标(例如时延)的增长速度更快。
现在的企业级NVMe SSD的性能真是让人震撼,有些SSD的性能动辄上百万IOPS,延迟20μs~1ms(视队列深度),冬瓜哥这辈子恐怕都用不了这么高的性能。冬瓜哥感觉,这个性能应对99%的应用已经完全够用了。剩下的1%就是一些极其特殊的场景,比如广泛存在于大型互联网后端的一些系统,以及少数特殊行业。
在前几期,我们提到了,在云计算时代,由于对存储IO及吞吐的要求迅速增加,传统SAN存储难以满足需求,基于标准x86节点的分布式存储成为了主流。
Scale-Out 的分布式系统为何离不开 SSD / 全闪存?如果没有闪存,Scale-Out 为什么就让人感觉火候不太够?而 Scale-Out 的出现,除了得益于闪存助力,还有什么其他因素么?本文冬瓜哥就来分析分析。
7月29日,由杭州市萧山区人民政府、浙江省半导体行业协会主办,萧山经济技术开发区管理委员会、杭州国家“芯火”双创平台(基地)协办的“2021全球闪存峰会”在杭州国际博览中心开幕。在29日至30日,来自Intel、浪潮存储、新华三等国内外存储企业领军人物都将汇聚于此,交流思想理论、分享实践案例。
作为俄罗斯最大的在线社交平台,VKontakte(意为“接触”,以下简称:VK)的全球注册用户超过了2亿,支持包括中文在内的86种语言。按照Alexa的数据统计,VK全球流量排名第14位,在俄罗斯则排名第一位。
技嘉BXBT1900 无线网卡的miniPCIE接口转装msata/ngff sata盘
滴水成河,积水成渊,许多企业今天面临的存储危机其实是数据字节累积的结果。数据的增长表现在三个不同方面:
怎么区分电脑里面的C盘、D 盘、E盘是机械硬盘还是固态硬盘?在电脑里,硬盘是存储数据的核心部件,负责存储操作系统、软件以及用户数据。硬盘的性能也会影响电脑的流畅度。平时我们最常使用的硬盘分为机械硬盘和固态硬盘。在日常使用中,很多用户并不清楚自己电脑中哪一个分区是固态硬盘,比如常见的C盘、D盘、E盘(C盘通常是系统分区,安装有Windows操作系统;而D盘、E盘等则可能是数据分区,用于存放个人文件和应用程序)等。其实辨别哪一个是固态硬盘很容易,今天给大家介绍几个简单的方法。
近期,浪潮发布了采用英特尔双端口傲腾SSD的全闪存存储新品——AS5000G5-F,成为全球范围内较早采用傲腾双端口固态盘的存储厂商之一。这一创新看得出浪潮在存储新技术上的开放态度,与此同时,浪潮在全球市场表现在提醒着我们,这是一家TOP级存储厂商分内的事儿。
企业正被数据洪流所淹没。而供应商和评论家也在不断提醒企业这一事实。谈论数据的海量规模、多样性和急剧增长已是司空见惯,专家每次都会反复地对企业所产生的庞大数据做出耸人听闻的预测。而他们给出的建议是,如果不采取根本性的措施,那么用于存储和保护所有这些数据的系统会濒临崩溃边缘。
Scale-Out的分布式系统为何离不开SSD/全闪存?如果没有闪存,Scale-Out为什么就让人感觉火候不太够?而Scale-Out的出现,除了得益于闪存助力,还有什么其他因素么?本文冬瓜哥就来分析分析。
计算机是处理数据的机器,而数据就需要有地方存放。在计算机中,可供数据存放的地方并不太多,除了内存之外,最主要的存储数据的媒介就是磁盘。对于大多数计算机领域的人来说,磁盘通常被看做是一种外部设备。可是,对于现代操作系统来说,磁盘是不可或缺的。虽然早期的操作系统可以基于磁带,但由于操作系统复杂性和性能的不断提升,用磁带作为操作系统的载体已经不合时宜,取而代之的是磁盘。由于操作系统需要存放在磁盘上,且操作系统内的文件系统也是基于磁盘,所以,从某种程度来说,磁盘是操作系统不可分割的一部分,理解磁盘将对理解操作系统的原理具有重要的意义。
信息存储在硬盘里,把它拆开也看不见里面有任何东西,只有些盘片。假设,你用显微镜把盘片放大,会看见盘片表面凹凸不平,凸起的地方被磁化,凹的地方是没有被磁化;凸起的地方代表数字1(磁化为1),凹的地方代表数字0。因此硬盘可以以二进制来存储表示文字、图片等信息。
作为《大话存储 终极版》以及《大话存储后传》的作者,我有幸经历了国内存储行业发展的启蒙和鼎盛时代。在2005年到2013年这8年间,存储市场基本就是SAN的市场,谈存储必暗指SAN。但是从2014年往后,存储行业突然发生巨大变化,分布式系统和固态存储介质开始爆发式增长。今天,谈存储如果不谈一谈配以固态硬盘的分布式系统,就仿佛是上个时代的人了。
前几年,IT业界出现过轰轰烈烈的“去IOE”行动,也提出过自主可控之类的口号。但是甫一尝试大家发现,数据库作为企业核心产品,很难实现在短时间内完全的替代,随后这一行动也慢慢沉寂下去。时至今日,当年风口浪尖的三家公司其中的两家或已转型或是被人收购,但以O为代表的数据库依然是许多客户的核心业务。
在上期,我们提到了,以NFS,CIFS(SAMBA)为代表的资本主义时代的存储技术,虽然实现了远端主机跨越互联网访问共享的数据,极大地提升了生产力,但集中式存储主控(俗称机头)的处理能力成为了IO和吞吐能力的瓶颈,正如资本主义生产关系下,生产资料私有制约束了生产力的进步。
这些数字来自某移动互联网企业在一次技术交流活动上对自家数据处理能力的介绍。先不说EB,就说说1PB是什么概念吧?大约是2亿张照片或2亿首MP3音乐,如果一个人不停地听这些音乐,能听上1900年。
近几年,新兴存储架构逐渐布满了市场,给由传统SAN架构占据的市场带来了大量的烟火气。不妨列举一下名词:分布式存储,ServerSAN,云存储,对象存储,超融合,一体机。实际上,这堆名词里,除了对象存储描述的是前端访问协议之外,其它的基本上都是基于分布式存储构建的。
Jetson Xavier NX 国产开发套件是由国产载板搭载 Jetson 官方的开发板, 核心模组搭载了 384 个 CUDA 核心、48 个 Tensor Core 、6 核的 Carmel 架构@V8.2 64bit CPU 和 2 个深度学习加速器 (NVDLA)引擎,它可以并行运行多个现代神经网络,板载 16GB eMMC 5.1,并且国产载板上搭配了 WiFi 模块,256G SSD 固态硬盘;
北京时间4月7日晚,在著名的网红打卡地,百年老首钢工厂遗留下的工业建筑群——首钢园,英特尔新一代至强处理器面世。
David Cardinal是一名专业摄影师和技术专家,他有十年的数码旅行和自然摄影师的经验,并在高科技领域具备20多年软件开发经验。今天,他要来介绍,如何使用Nvidia Jetson Nano构建网络视频录像机。
GTX 1050 Ti MAX-Q新卡曝光 2018年1月13日,部分用户在Linux驱动程序更新日志中发现了新款未发布的GTX1050 Ti Max-Q图形卡,新卡的直接竞争对手将是拥有20个CU单
英特尔首款10nm工艺的服务器处理器来了,基于Ice Lake的第三代至强可扩展处理器正式发布。
2021将至,又到了年底复盘总结时间,下问整理了2021固态硬盘排行前十,为大家带来十大固态硬盘排名,一起来看看吧!
由E企学院主办的“2018年数字中国万里行暨北方区数据中心之旅”,聚焦中国超大规模数据中心,走访腾讯、阿里巴巴、京东、今日头条、抖音、华为、中国联通、中国移动等多家数据中心,将中国互联网、通信、制造业等多个领域的顶尖数据中心展示出来,让更多人了解互联网与云计算高速发展背后的奥秘。
导言 上篇概述了一下现在非常火的超融合《超融合概述》。接下来要分析一下各家的超融合方案,今天开始第一家的分析:nutanix的超融合方案分析。 根据各种公开的资料,nutanix2017 年.NEXT大会于6月28日在美国召开。从各种报道看,超融合已经只是nutanix的一个小部分,nutanix和google结盟,推出了给予nutanix私有云和GCP的混合云方案,基于nutanix在超融合上对三大主流hypervisor的支持,相信nutanix有意愿或者有能力甚至有计划支持AWS以及Azure。
在上期,我们研究了鹿晗和黄子韬如何在小霸王学习机里面化身超级战士“魂斗罗”打败外星人,拯救地球,也打开了一段尘封已久的回忆。
随着固态硬盘(SSD)的崛起,人们似乎开始慢慢遗忘机械硬盘(HDD)这个陪伴了我们大半个世纪的存储"伙伴"。
扩展分区类似于一个完整的硬盘,必须进一步分区才能使用。但每个扩展分区中只能存在一个其他分区。此分区在DOS/Windows环境中即为逻辑盘。因此每一个扩展分区的分区表(同样存储在扩…
下面很多部分都是我试错的部分。为了显得不是那么啰嗦,我在前面简短的说一些注意事项和流程。
在上期,我们提到,Ceph集群使用多副本的情况下,整体读性能可达所有物理磁盘读性能的总和,但由于写入的机制为只写入主副本,然后向另外两个副本同步,因此,以三副本为例,写性能只能达到所有磁盘写性能总和的三分之一。以SATA大盘单盘,100 IOPS写性能计,6节点72大盘的总写IOPS性能只能到2400 IOPS。这是难以满足高性能数据库需求的。
ENVI 是图像处理和分析软件的行业标准。图像分析师、GIS专业人员和科学家使用它从地理空间图像中提取及时、可靠和准确的信息。
本篇内容,分享一台端午假期折腾的设备,HP Gen10 Plus v2,分享下我的折腾思路,希望能够帮助到有类似需求的你。
这本手册是《Intel 64 and IA-32 Architectures Software Developer's Manual》,全书共4卷,学习之后可以对x86计算机的工作机制有庖丁解牛一般的深入理解。
最近,某著名CSP(Cloud Service Provider)推出了一款DBFS(Data Base File System)产品。
1、背景:为什么要 4K 对齐 簇是系统在硬盘上读写文件时的单位,是一个数据块(逻辑概念)。而扇区是硬盘划分的最小单位值,就是簇(数据块)占用的地方(物理概念)。NTFS对于大于2GB的分区,默认簇大小为8个扇区(4KB)。 绝大多数的机械硬盘默认是512字节的扇区,采用的是DRAM作为存储介质; 而机械硬盘,无论是SLC颗粒还是MLC颗粒,都属于NAND闪存存储单元。 这种硬盘的扇区是4K,这就是4K的由来。 NTFS格式有一个特性,那就是起始簇的位置! NTFS分区起始位置不是从0开始,而是从L
自己的笔记本Z2已经用过了5个年头了,2年前重装系统的时候从win7系统升级到win10,现有硬盘配置保持了出厂的128G固态+1T机械,想想我也算是重度使用笔记本用户了,一直担心磁盘出问题,机械盘稍微好些,不像固态坏了是一点没办法没有,不过也还好固态盘只用来当系统盘,桌面文件都通过以前的一篇文章 【原创】小白必备,快速清理C盘空间,把文件都摞到了机械盘上。这次趁到618大促所以打算把固态硬盘换掉。
作者:熊中哲,现任才云科技工程VP,负责产品和研发工作。曾就职于阿里巴巴、沃趣科技、美团。超过12年数据库领域的工作经历,目前对云原生,机器学习和异构计算也很感兴趣。
硬件基础 分布式存储系统是运行在通用计算机硬件体系结构上的底层系统,熟悉各种硬件的性能,能帮助我们更好的调整架构,最大限度地发挥硬件的价值。 基础参数 常见硬件的大致性能参数如下: 类别性能访问L1 Cache0.5ns分支预测失败5ns访问L2 Cache7nsMutex加锁/解锁100ns内存访问100ns千兆网络每秒100MB从内存顺序读取数据每秒4GB(同机房)网络来回RTT0.5ms(同城跨机房)网络来回RTT1~2ms(不同城跨机房)网络来回RTT300~100msSATA磁盘寻道10msSAT
近期有接到许多朋友咨询迁移上云和本地IDC备份扩容,如何快速构建一个私有化的备份解决方案,背景也就是,一些传统企业,IDC业务快速增长,服务器及存储容量暴涨,导致本地IDC超融合服务器等瓶颈。物理扩展周期长,费用昂贵,加之近期受国外芯片封锁,导致国内外服务器硬件价格暴涨,听说之前信创服务器,被哄抬价格“天价”,因此,许多企业智慧选择更为实惠的公有云,但有些重要的客户,希望资料提供私有化,不想全部业务数据上云,那么如何解决【企业数据本地化】又能解决IDC扩容【存储上云备份】呢?
大家知道我们的视频平台是可以编译Arm版本的,部分用户有需求的情况下,我们也可以将ARM版本提供给用户。近期我们在协助客户部署软件时发现了一些问题,在运行程序时提示无法识别二进制文件。查看了服务器系统版本信息确认是CentOS7.6 64位的,按理说应该是可以正常运行的,于是我们输入lscpu指令查看具体信息。
我整理了以下这些软件,用于检测硬盘状况,及时做好数据备份。(重要数据建议保存至云端)
当NVMe在10年前以硬盘接口协议的身份出现时,谁也不会料想到,它会在基础设施领域,获得今天的荣光。
领取专属 10元无门槛券
手把手带您无忧上云