SDS那么火,你家有没有?

近两年,SDS挺火。做SDS的厂商也很多,如VMware的vSAN,Nutanix,传统存储厂商EMC也有自己的SDS产品。有调查机构显示,SDS在未来将超过传统存储,看起来SDS的前景还是光明的。

既然软件定义存储这么火,红帽有没有?结果当然是有。不仅有,而且有两个。一个是Gluster,一个是Ceph。实际上,gluster作为开源的SDS解决方案,在很多行业都有实际应用的案例,如HPC、广电行业等。而Ceph作为这几年挺火的一个开源项目,适合与OpenStack相结合。

Gluster在2011年被红帽收购,随后开源;Ceph2014年被红帽收购,随后也开源。因此有朋友可能质疑红帽会用Ceph替代Gluster,其实不是这样。Gluster与Ceph的特性不同,适用场景也不同。Gluster可以被认为是基于开源软件的分布式NAS,可以为物理机/虚拟机/容器提供存储空间,而ceph的对象存储和块设备功能则更适合与OpenStack对接。

Gluster作为分布式的SDS解决方案,集群节点数最多可到数千,其总容量在PT级。Gluster提供多种连接方式,Samba、NFS、FUSE等,linux原生支持FUSE。Gluster作为存储集群。利用多台X86服务器的本地文件系统,通过服务器之间的以太网络,组成统一对外命名空间(说接地气点就是一个统一mount点,方便用户或应用访问)。本地文件系统类型可以是ext4或者xfs等。文件系统可以位于一整块本地磁盘/一个分区、本地磁盘组成的Lun/一个分区。而服务器这个文件系统(当然是被gluster使用的),我们叫它为BRICK.

谈到SDS就不能不提到数据平面和控制平面两个层次。数据平面已经介绍。而控制平面,目前gluster能够创建的volume基本类型可以条带化、复制卷、分布式卷、以及纠删码四种。除此之外,还可以进行两两组合,如条带化-复制卷(如果数据有两份,则类似于传统存储的RAID0+1)等。

下面我对部分类型进行说明。

分布式卷,说简单点,就是把各个服务器的BRICK空间拼起来,存数据的时候顺序存放。

复制卷就是对数据做副本,数据的各个副本存放于不同的brick上:

Two-way Distributed Replicated Volumes,就是复制-分布巻。两个卷都是复制卷,各对应两个brick,然后两个卷的空间拼接起来,对外提供空间。数据存放的时候,在拼接卷上顺序存放。

Dispersed卷基于erasure coding(EC)技术。也就是纠删码技术。我们知道在物理存储里,Raid5,raid6都是有校验码的,它们的好处是省空间。

本着“少说教,多上干货”的原则。笔者从头安装配置了一遍Gluster,其配置很简单,方便。虽然使用命令行,但命令行也十分友好。那么gluster配置有多方便呢?“6条命令卷配好,8条命令卷可用(被客户端)”。

红帽gluster安装有两种方式:1.自行安装linux操作系统,然后通过yum方式在线安装gluster。2.直接使用gluster的iso,里面包含linux操作系统和gluster软件。笔者采用的是第二种方法。

rhgs-3.1-u3-rhel-7-x86_64-dvd-1大小为891M。它是一个包含gluster的精简linux系统。

iso的安装和我们装esxi的方式一样。将iso放到u盘里引导服务器启动。如果是个人实验环境,也可以挂载到虚拟机的虚拟光驱里。

从光盘启动:

选择安装软件,都选上即可。

过5分钟左右,系统就安装完了。

接下来,就是配置gluster的步骤,一共是是六步:

步骤1:配置集群节点的解析。我的实验环境的gluster节点有3个。

步骤2:启动gluster服务:

步骤3:创建brick。这里我们需要注意,brick是一个创建好的文件系统路径。它可以是一个独立的文件系统,也可以是一个文件系统的一个目录。但我们推荐用独立的文件系统。而这个文件系统通常在本地盘的一个分区上。由于试验环境资源有限,笔者在已有文件系统中创建一个目录,因此这个brick相当于使用目录所在的文件系统,这在生产上并不推荐。

步骤4:添加节点到集群:

步骤5:创建卷:

我们看到,这个卷是一个复制卷,有两份数据。分别存放于gnode2和gnode3的本地brick中(/davidwei)。

步骤6:启动卷

到这里,服务器端的gluster卷已经配置好。接下来我们在client挂载gluster的卷。

步骤7:首先在客户端操作系统中安装gluster的客户端fuse模块:

步骤8:mount卷:

至此,客户端已经能够看到并使用gluster卷了。

Gluster除了给物理机操作系统使用之外,还可以为虚拟化环境的hypervisor提供共享存储。(类似vSAN为esxi提供datastore)。

在之前的文章中,笔者提到过红帽的KVM虚拟化软件RHEV。RHEV连接存储有两种方案,接SAN存储或者接Gluster。如果应用时基于大量小文件的随机读写,那么建议对接SAN存储。如果是大文件顺序或者随机读写,那么建议使用gluster方案。

RHEV与gluster的对接也很方便:

登录到RHEV-M上,创建存储域,创建的时候,类型选择GlusterFS。

路径指定gluster节点名和逻辑卷名:

过几十秒,就可以看到gluster的lv1已经被rhev创建成了一个datastore,可以供不同的hypervisor之间做共享存储,支持虚拟机的vmotion。

总结:

至此,gluster的基本配置和与RHEV对接就介绍完了。后续笔者会分享更多的内容。

最后,笔者放几张图,展示一下gluster比较适用的几个场景,诸位可以作为参考。

原文发布于微信公众号 - 大魏分享(david-share)

原文发表时间:2016-08-18

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏北京马哥教育

LVS详解及基于LVS实现web服务器负载均衡

前言 LVS(Linux Virtual Server)Linux虚拟服务器,是一个虚拟的服务器集群系统。本项目在1998年5月由章文嵩博士成立,是中国国内...

4714
来自专栏图像识别与深度学习

《Android》Lesson19-广播1

1859
来自专栏黑白安全

iOS安全基础之钥匙串与哈希

本文最初是由Chris Lowe编写的,后来经过Ryan Ackermann(ios系统开发者)的修改,已经可以针对最新的Xcode 9.2,Swift 4,i...

1042
来自专栏张戈的专栏

分享Mac/Linux系统Shell终端利器SecureCRT以及注册破解方法

最近双十一剁手,退役了跟了自己 7 年多神舟承运本本,很肉痛的入手了一台 Macbook Air 13.3。在研究新鲜玩意之前,先缅怀一下这个见证我从电脑小白成...

6006
来自专栏FreeBuf

打开文件夹就运行?COM劫持利用新姿势

*本文原创作者:菠菜,本文属FreeBuf原创奖励计划,未经许可禁止转载 打开文件夹就能运行指定的程序?这不是天方夜谭,而是在现实世界中确实存在的。利用本文探讨...

2298
来自专栏逸鹏说道

大公司都有哪些开源项目之腾讯

1.WeUI 为微信Web服务量身设计 WeUI 是一套同微信原生视觉体验一致的基础样式库,由微信官方设计团队为微信 Web 开发量身设计,可以令用户的使用感知...

4966
来自专栏加米谷大数据

技术分享 | CentOS下tar打包解压详解 解压到指定文件夹

tar命令 解压文件到指定目录:tar -zxvf /home/zjx/aa.tar.gz -C /home/zjx/pf tar [-cxtzjvfpPN] ...

3295
来自专栏安智客

TrustZone的硬件框架和安全扩展

对外部资源和内存资源的硬件隔离就是trustzone的核心。这些硬件隔离包括:中断隔离,片上RAM和ROM的隔离,片外RAM和ROM的隔离,外围设备的硬件隔离,...

1863
来自专栏EAWorld

一篇文章全面解析大数据批处理框架Spring Batch

如今微服务架构讨论的如火如荼。但在企业架构里除了大量的OLTP交易外,还存在海量的批处理交易。在诸如银行的金融机构中,每天有3-4万笔的批处理作业需要处理。针对...

6436
来自专栏北京马哥教育

用 Python 搞定正方教务系统之抢课篇

最近学校开始选课,但是如果选课时间与自己的事情冲突,这时候就可以使用Python脚本自助抢课,抢课的第一步即是模拟登录,需要模拟登录后保存登录信息然后再进行操作...

3170

扫码关注云+社区

领取腾讯云代金券