上次把集群节点的pve版本从v5升级到v6,这次把分布式存储ceph的版本从Luminous(v12)升级到Nautilus(v14)。
ceph luminous版本新增加了很多有意思的功能,这个也是一个长期支持版本,所以这些新功能的特性还是很值得期待的,从底层的存储改造,消息方式的改变,以及一些之前未实现的功能的完成,都让ceph变得更强,这里面有很多核心模块来自中国的开发者,在这里准备用一系列的文章对这些新功能进行一个简单的介绍,也是自己的一个学习的过程
[root@node1 ~]# ceph daemon mon.node1 mon_status {
工作中存储集群使用了 Ceph 技术,所用的是版本是 Luminous 12.2.4,因为刚刚上手 Ceph,不少概念和问题也都是头一次听说,比如这次的自动分片(auto resharding)。不得不说,Ceph 对象存储目前还是不够完善,Luminous 对于 bucket 中存储大量数据的支持还是不够理想,这造成了不小的使用不便。虽然 Ceph 在着手解决,但还没有达到足够理想的状态。
docker部署ceph(luminous)相关的稳定镜像我已经打包到个人的公开仓库中
今天来聊一聊Ceph新版本功能,Ceph会在今年秋季发布一个长期支持稳定版本Luminous(12.x.x),现在已经出RC版了,Luminous版本新增了很多功能,比如新增一个内置的Dashboard、底层的存储引擎的变更、消息方式的改变等等。
之前有各种ceph的管理平台,在部署方面大部分都比较麻烦,现在在luminous版本当中有一个原生的dashboard,虽然目前这个只能看,但是从界面上面,从接口方面都是非常不错的一个版本
注 意: 版本更新非常快,有问题要看官方文档 官方文档: http://docs.ceph.com 准备环境 系统版本:centos7.4 x86_64 server 硬件配置:5台vm,1核1G内存,每台node角色的机器至少挂载1块不低于5个G的空闲盘为osd存储 主机名 ip role admin 192.168.153.130 admin--安
最近,比尔·盖茨等人(包括Uber的CEO和Co-founder)投资了光学AI芯片初创公司Luminous Computing,该公司获得了900万美金的投资,具体细节可参看CNBC的报道https://www.cnbc.com/2019/06/03/bill-gates-and-travis-kalanick-invest-in-ai-chip-start-up-luminous.html。小豆芽查阅了一些相关的文献,借助这篇笔记简单介绍下Luminous Computing的光学AI芯片技术。
Ceph亚太峰会RGW部分议题分享 本次Ceph亚太峰会干货最实在的的要数Redhat的《Common Support Issues and How to Troubleshoot Them》这里把RGW部分摘出来,和大家分享一下,本次议题主要是涉及到RGW中Object数量过多导致的OSD异常如何处理。 故障现象描述 Flapping OSD's when RGW buckets have millions of objects ● Possible causes ○ The first issue h
上个版本的 Proxmox 是今年7月份发布的VE 6.0。PVE是集成OPENVZ并支持KVM的虚拟化环境。VE 6.1 版本的底层基于 Debian 10.2 Buster, Kernel 5.3 QEMU 4.1.1, LXC 3.2, Ceph 14.2.4.1 (Nautilus), ZFS 0.8.2, 和 Corosync 3.0。
现在是不是很无聊?因为的注意到了咱们公众号每天关注的人数数据逐渐回升。大过年的不把你们逼到一定份上应该不会主动学习的吧!
一时间很多依赖都down了。最初想的是等官方处理吧,也懒得管。在一次偶然聊天中找到了解决办法,最近抽时间就改了。
近日,Scandit宣布已完成3000万美元B轮融资。本轮融资由谷歌风投领投,NGP Capital等公司跟投。Scandit表示,本轮融资将用于继续开发扫描软件,并进一步加强AR技术的融入。据悉,Scandit开发的扫描软件,旨在替代昂贵的专用条形码扫描器,并且这款软件的SDK还支持AR功能,通过手机屏幕便可将产品信息叠加到实体商品上。
七节点PVE集群升级v5到v6。ceph保持luminous,小版本会从12.2.12升级到12.2.13。
直至 2017 年底,上游 Ceph 项目都采取每年发布两个稳定版本的做法。自“Mimic”发行版起,Ceph 项目将按 9 个月发布计划运作。直至“Luminous”发行版,上游项目都是开发版和长期稳定 (LTS) 版交替发布。例如,“Kraken”属于开发版,而“Luminous”则属于 LTS 版。在 LTS 版本达到 GA 时,上游项目停止更新开发版。在过去,红帽都使红帽 Ceph 存储的发行版与上游 Ceph 的 LTS 版一致。自“Infernalis”稳定发行版起,上游 Ceph 项目已采用了新的版本号编号方案。每一稳定发行版递增主要版本号。如果次要版本为 0,则该版本尚在开发之中。如果是 1,则表示此版本为候选发行版。如果次要版本为 2,则该版本已经稳定,可供普通用户使用。
RGW的index数据以omap形式存储在OSD所在节点的leveldb中,当单个bucket存储的Object数量高达百万数量级的时候,deep-scrub和bucket list一类的操作将极大的消耗磁盘资源,导致对应OSD出现异常,如果不对bucket的index进行shard切片操作(shard切片实现了将单个bucket index的LevelDB实例水平切分到多个OSD上),数据量大了以后很容易出事。
Ceph 是一个分布式的开源存储系统,由贝尔实验室的德雷克·昆伯斯(Sage A. Weil)在2004年创立。在它的发展历程中,Ceph 经历了多个关键的里程碑和版本演变。
现网有好几个 Luminous 的集群,因为指导 Rook 可以用来管理外部集群,所以想尝试一下。外部集群的概念是指,通过部署 Rook,来管理部署在其他集群或者物理机的 Ceph 集群,也就是 Rook 里 External Cluster 的概念。
谷腾堡编辑器自带,提取出平时使用经典编辑器方便使用。理论高版本的wordpress都可以用吧。字体颜色也可以更改,用到了再去谷腾堡拿吧!
https://www.virtualtothecore.com/en/upgrade-ceph-cluster-luminous/ http://www.chinastor.com/distristor/11033L502017.html
首先要记住学语言不能速成,要靠长期的积累。你记性好,一天记住一百个单词,但是你不一定会用,而且时间一久肯定会忘。所以,要学好英语,还是要慢慢来,日积月累,逐渐进步。再就是英语学的好不好和学什么专业真的关系不大。别人是因为英语学的好,所以才选了英语或外贸专业,不是反过来的。我虽然本科学的国贸专业,但是大学四年基本不上课(如果你是学生,不要学我,我差点没拿到学位证),当然也没上过英语课。学英语靠的是我平时的知识消费习惯。 这篇文章里我不会直接扔给你大学英语六级的学习辅导资料,我也没相关经验。我当初考六级时,第一次裸考考了 500 分左右。这在专业班级里是比较低的,所以去二刷了一下。第二次有了经验后裸考考了 598 分。说这个经历是想说英语学到六级水平不一定要学教材。 另外,这篇文章默认你已经能达到英语四级水平了。如果还没有,可以买些语法和单词书多练习一下,真没那么难的。 下面进入正题。
OSD进程的启动停止:https://blog.csdn.net/bandaoyu/article/details/119894927
按 Luminous 方式安装好 Ceph 软件好,想按照以往的习惯,直接执行下面的命令来启动 radosgw 进程。
请注意,本文档假设 Ceph 和 OpenStack 环境已经可用,在此基础上,配置 OpenStack 使用 Ceph RBD 作为镜像和卷的后端存储。
Proxmox 5.0 Beta 1 “Virtual Environment” 发布了,新版基于 Debian 9 “Stretch”,采用了 Linux 4.10 内核,并且表现十分出色。例如,4.10 内核允许运行 Windows 2016 Hyper-V 作为客机操作系统(嵌套虚拟化)。
上一篇文章写了如何使用stable diffusion生成CG美女,这篇文章主要来写如何生成赛博朋克机甲风的美女。
1) 硅光transceiver公司大都被通信设备商收购,例如Cisco, Huawei, Nokia等
如果是Proxmox VE虚拟机或者容器是高可用配置(HA),则在升级corosync前需要关闭与之相关的服务。
Ceph 是一个可扩展的分布式存储系统,性能卓越,安全可靠。 Ceph 12.2.0 正式版已发布。这是Luminous v12.2.x长期稳定版本的第一个版本。在Kraken(v11.2.z)和 Jewel(v10.2.z)后我们做了很多重大修改,而且升级过程并不简单哦。请仔细阅读版本说明。
传说有个R,R里有个包,包的名字叫praise,会一直不停地夸赞你。 > praise() [1] "You are sensational!" > praise() [1] "You are luminous!" > praise() [1] "You are pioneering!" > praise() [1] "You are riveting!" > praise() [1] "You are neat!" > praise() [1] "You are supreme!" > praise()
需求 随着ipv6使用得越来越广,很多网络设施逐步地需要支持ipv6,而ceph作为可大规模部署的分布式存储系统,ipv6的支持是必选的,本文主要介绍ceph over ipv6的场景及其功能使用
集群架构 192.168.10.186 ceph1 admin、mon、mgr、osd、rgw 192.168.10.187 ceph2 mon、mgr、osd、rgw 192.168.10.188 ceph3 mon、mgr、osd、rgw 部署 [root@10dot186 ~]# vim /etc/hosts 192.168.10.186 ceph1 192.168.10.187 ceph2 192.168.10.188
消息: Client name failing to respond to cache pressure
Ceph基础介绍 Ceph是一个可靠地、自动重均衡、自动恢复的分布式存储系统,根据场景划分可以将Ceph分为三大块,分别是对象存储、块设备存储和文件系统服务。在虚拟化领域里,比较常用到的是Ceph的块设备存储,比如在OpenStack项目里,Ceph的块设备存储可以对接OpenStack的cinder后端存储、Glance的镜像存储和虚拟机的数据存储,比较直观的是Ceph集群可以提供一个raw格式的块存储来作为虚拟机实例的硬盘。
Ceph是一个可靠地、自动重均衡、自动恢复的分布式存储系统,根据场景划分可以将Ceph分为三大块,分别是对象存储、块设备存储和文件系统服务。在虚拟化领域里,比较常用到的是Ceph的块设备存储,比如在OpenStack项目里,Ceph的块设备存储可以对接OpenStack的cinder后端存储、Glance的镜像存储和虚拟机的数据存储,比较直观的是Ceph集群可以提供一个raw格式的块存储来作为虚拟机实例的硬盘。
随着项项目的增多,对测试环境的需求越来越大,今天研发要几台测试环境,明天测试也要几台测试环境,连产品都要测试环境了,咱们运维也得有自己的测试环境,之前搭建的exsi已经满足不了需求了。
生产环境建议多网络模式,测试环境可以多网络,也可以单网络模式,需要注意的是的,测试服务器4个磁盘,一个系统盘。2个osd(vdb,vdc),一个日志盘(vdd)
Rook是Kubernetes及其欣欣向荣的社区的一个开源云原生存储协调器,自2016年11月首次公开发行以来,它一直在不断发展壮大。随着代码库通过一系列小版本(从v0.1的底层开始,到去年年底达到v0.9)变得成熟,我们终于非常高兴地宣布Rook的第一个主要版本1.0!
Ceph 很复杂,虽然官方文档已经很努力了,但是我觉得官方文档还没有体现出他的复杂,要等你真正搭建和运维的时候才会见识到 Ceph 的复杂,在组里帮忙运维 Ceph 集群已经有差不多半年了,期间因为各种告警和事故也经常被折磨得寝食难眠,究其原因除了本身对 Ceph 了解不够之外,就是因为一些监控和告警的基础设施没有跟上,随着集群规模的逐渐增大,不可预测的情况越来越多,处理起来越来越棘手,本文就简单的总结一下过去半年的经验,以及也抒发一下对 Ceph 集群监控和告警系统搭建的一些思路。
(VRPinea2月13日电)今日重点新闻:淘宝直播推“云发布会”,VR医疗初创公司Oxford VR完成1250万美元A轮融资,宏碁取消了4K WMR头显ConceptD OJO等。
先明确一下这么做的必要性。Ceph 的客户端,如 RADOSGW,RBD 等,会直接和 OSD 互联,以上传和下载数据,这部分是直接提供对外下载上传能力的;Ceph 一个基本功能是提供数据的冗余备份,OSD 负责数据的备份,跨主机间的数据备份当然要占用带宽,而且这部分带宽是无益于 Ceph 集群的吞吐量的。只有一个网络,尤其是有新的存储节点加入时,Ceph 集群的性能会因为大量的数据拷贝而变得很糟糕。所以对于性能有一定要求的用户,还是有必要配置内外网分离的。
在上一篇中我们完成了连接和发现服务两个动作,那么再发现服务之后要做什么呢?发现服务只是让你知道设备有什么服务,可以做什么事情。
机器之心报道 编辑:蛋酱 AI 反推出来的 prompt,会比人类手写的更好吗? 在各种 AIGC 产品层出不穷的今天,让 AI 画一张图已经不是什么难事。 尽管有着「无需动笔」、「零门槛作画」等一系列优点,但很多人并不能借助 AI 之手轻松获得一幅理想中的作品 —— 难点在于「prompt」。 Prompt 方法是一门极深的管理学问:如果不输入精准的命令描述,生成结果就可能十分随机,甚至与预期相去甚远。但归根结底,如何给出完美的 prompt,如何让模型按照人类用户预设的方式输出结果,甚至如何降低花在 p
先前有读者留言,让小豆芽介绍一下硅光的主要应用领域。目前硅光主要应用于光模块,将原先的分离光器件单片集成在同一块芯片上,进而实现高速率的信号传输。这一类的公司包括Intel、Luxtera、Acacia等,目前相关产品都已经实现了量产。其实硅光的应用领域并不局限于光通信,小豆芽之前的笔记介绍过基于硅光的深度学习芯片(光学AI芯片新玩家——Luminous Computing)。这篇笔记借助于两篇行业新闻,聊一聊硅光的其他应用。
Ceph 的监控可视化界面方案很多----grafana、Kraken。但是从Luminous开始,Ceph 提供了原生的Dashboard功能,通过Dashboard可以获取Ceph集群的各种基本状态信息。 mimic版 (nautilus版) dashboard 安装。如果是 (nautilus版) 需要安装 ceph-mgr-dashboard
2019年4月18日至20日,第九届中国开源黑客松活动在深圳鹏城实验室举办,这是一场持续3日,集结多位社区专家的技术分享大会。
Zabbix运维工程师,熟悉Zabbix开源监控系统的架构。乐于分享Zabbix运维经验,个人公众号“运维开发故事”。
以前找了一台物理服务器直接安装了一个proxmox VE 环境(VE是虚拟化环境的意思),后续又看了官方的admin文档,对整个系统架构有了一定的了解,接下来,准备好好研究一下具体能够落在生产环境上的系统设计。官方文档可以在官网下载,也可以在安装pve之后在web界面上直接查看或者下载,如下图:
领取专属 10元无门槛券
手把手带您无忧上云