前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >006.Ceph对象存储基础使用

006.Ceph对象存储基础使用

作者头像
木二
发布2019-07-01 14:12:08
2.1K0
发布2019-07-01 14:12:08
举报
文章被收录于专栏:木二天空木二天空

一 Ceph文件系统

1.1 概述

Ceph 对象网关是一个构建在 librados 之上的对象存储接口,它为应用程序访问Ceph 存储集群提供了一个 RESTful 风格的网关 。

Ceph 对象存储支持 2 种接口:

兼容S3: 提供了对象存储接口,兼容亚马逊S3 RESTful接口的一个大子集。

兼容Swift: 提供了对象存储接口,兼容Openstack Swift接口的一个大子集。

Ceph 对象存储使用 Ceph 对象网关守护进程( radosgw ),一个与 Ceph 存储集群交互的 FastCGI 模块。提供了与 OpenStack Swift 和 Amazon S3 兼容的接口, RADOS 要有它自己的用户管理。 Ceph 对象网关可与 Ceph FS 客户端或 Ceph 块设备客户端共用一个存储集群。 S3 和 Swift 接口共用一个通用命名空间,即可以用一个接口写入数据、然后用另一个接口取出数据。

024
024

提示:Ceph 对象存储不使用 Ceph 元数据服务器。

新版Ceph Storage简化Ceph对象网关的安装和配置,Gateway守护程序嵌入Civetweb,因此您不必安装Web服务器或配置FastCGI。此外,ceph-deploy可以安装网关包,生成密钥,配置数据目录并为您创建网关实例。

二 对象存储安装

2.1 切换部署用户

  1 [root@deploy ~]# su - manager

2.2 添加RGW

  1 [manager@deploy my-cluster]$ ceph-deploy rgw create node1

提示:要使用Ceph的Ceph对象网关组件,必须部署RGW实例;

默认情况下,RGW实例将侦听端口7480.可以通过在运行RGW的节点上编辑ceph.conf来更改此设置。

注意:若使用ceph-deploy部署的时候出现安装包无法下载,可在部署时候指定ceph.repo为国内源:

  1 ceph-deploy install --rgw cephclient --repo-url=https://mirrors.aliyun.com/ceph/rpm-mimic/el7/ --gpg-url=https://mirrors.aliyun.com/ceph/keys/release.asc

Civetweb 7480默认使用端口。

  1 [manager@deploy my-cluster]$ ceph-deploy admin node1

提示:为方便后期deploy节点管理node1,在CLI中使用命令中简化相关key的输出,可将key复制至相应节点。ceph-deploy 工具会把密钥环复制到/etc/ceph目录,要确保此密钥环文件有读权限(如 sudo chmod +r /etc/ceph/ceph.client.admin.keyring )。

2.3 测试访问

浏览器访问:http://172.24.8.72:7480/

025
025

三 对象存储使用-S3方式使用

3.1 创建S3网关用户

  1 [root@cephclient ~]# sudo radosgw-admin user create --uid="rgwuser" --display-name="This is first rgw test user"
026
026
  1 "access_key": "Q0NR1HSL1JQJLXY8LOLF",
  2 "secret_key": "eOkVtFjQjgTjJn12CcxFOIe4CDdVTW0nErJoiLso"
  3 [root@cephclient ~]# yum -y install python-boto			#安装测试所需依赖包

3.2 创建测试脚本

  1 [root@cephclient ~]# vim s3.py
  2 #!/usr/bin/python
  3 #****************************************************************#
  4 # ScriptName: s3.py
  5 # Author: xhy
  6 # Create Date: 2019-02-01 22:32
  7 # Modify Author: xhy
  8 # Modify Date: 2019-02-01 22:32
  9 # Version:
 10 #***************************************************************#
 12 import boto
 13 import boto.s3.connection
 14 access_key = 'Q0NR1HSL1JQJLXY8LOLF'
 15 secret_key = 'eOkVtFjQjgTjJn12CcxFOIe4CDdVTW0nErJoiLso'
 16 conn = boto.connect_s3(
 17     aws_access_key_id = access_key,
 18     aws_secret_access_key = secret_key,
 19     host = 'node1', port= 7480,
 20     is_secure=False,
 21     calling_format = boto.s3.connection.OrdinaryCallingFormat(),
 22 )
 23 bucket = conn.create_bucket('my-first-s3-bucket')
 24 for bucket in conn.get_all_buckets():
 25         print "{name}\t{created}".format(
 26                 name = bucket.name,
 27                 created = bucket.creation_date,
 28 )
 29 [root@cephclient ~]# python s3.py			#运行脚本
 30 my-first-s3-bucket      2019-02-01T15:14:55.284Z

注意:安装所需python-boto 包,使用认证信息连接 S3,然后创建了一个 my-first-s3-bucket 的 bucket,最后列出所有已创建的 bucket,打印名称和创建时间。

四 对象存储使用-SWIFT方式使用

4.1 创建Swift用户

  1 [root@cephclient ~]# sudo radosgw-admin subuser create --uid=rgwuser --subuser=rgwuser:swift --access=full
027
027
  1     "swift_keys": [
  2         {
  3             "user": "rgwuser:swift",
  4             "secret_key": "yMoTQlEeFmwDw5gojPcJh44G5xpp3gvGItN3GoEE"
  5         }

4.2 安装相关依赖包

  1 [root@cephclient ~]# curl https://bootstrap.pypa.io/get-pip.py -o get-pip.py
  2 [root@cephclient ~]# python get-pip.py
  3 [root@cephclient ~]# pip install --upgrade setuptools
  4 [root@cephclient ~]# pip install --upgrade python-swiftclient

4.3 测试确认

  1 [root@cephclient ~]# swift -A http://node1:7480/auth/1.0 -U rgwuser:swift -K 'yMoTQlEeFmwDw5gojPcJh44G5xpp3gvGItN3GoEE' list			#查看相关bucket
  2 my-first-s3-bucket

注意:node1:7480 为网关服务器的外网访问 IP 地址,即172.24.8.72主机,端口默认 7480,若已修改端口号,则修改为对应端口。

参考链接:http://docs.ceph.org.cn/install/install-ceph-gateway/

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2019-02-28 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 一 Ceph文件系统
    • 1.1 概述
    • 二 对象存储安装
      • 2.1 切换部署用户
        • 2.2 添加RGW
          • 2.3 测试访问
          • 三 对象存储使用-S3方式使用
            • 3.1 创建S3网关用户
              • 3.2 创建测试脚本
              • 四 对象存储使用-SWIFT方式使用
                • 4.1 创建Swift用户
                  • 4.2 安装相关依赖包
                    • 4.3 测试确认
                    相关产品与服务
                    对象存储
                    对象存储(Cloud Object Storage,COS)是由腾讯云推出的无目录层次结构、无数据格式限制,可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务。腾讯云 COS 的存储桶空间无容量上限,无需分区管理,适用于 CDN 数据分发、数据万象处理或大数据计算与分析的数据湖等多种场景。
                    领券
                    问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档