首页
学习
活动
专区
圈层
工具
发布

从传统运维到云运维演进历程之软件定义存储(二)

许多Ceph新手在测试环节以及预生产的时候会对Ceph集群的部署以及调优产生困扰,A公司运维小哥也遇到了部署和调优问题。下面来看看A公司运维小哥是如何解决这个问题的。...关卡二:部署调优关(部署) 难度:三颗星 上篇文章开头我也说到了,部署Ceph是新手的噩梦,对于传统运维来说部署一套Ceph是很难的事情,A公司运维小哥在官网以及Ceph中国社区的相关资料和帮助下才渐渐熟悉了什么是...而此时就是考验一个运维人员的处理故障的基本素质,好在这个运维小哥有过一两年的经验,经过基本排查,最终确定了是时间问题。由于三个节点时间不一致而导致的这个问题,这里称之为“OSD打摆子”。...1.某云平台由于时间问题,导致云主机创建不了、宕机等问题。 2.某分布式文件存储由于时间问题,导致数据分布不均衡、脑裂等问题。...所以云平台也好存储也好,都会因为时间而产生不必要的故障问题,建议运维人员要注重时间问题。 ? 图8:Ceph集群 好了言归正传,上图是运维小哥新搭建好的集群。三节点、六个OSD的Ceph小集群。

1.2K10

从传统运维到云运维演进历程之软件定义存储(一)

运维从横向、纵向分可以分为多个维度和层次,本文试图抛开这纷繁复杂的概念,讲述一个传统的企业级运维人员转型到云运维人员,尤其是软件定义存储的运维之间经历的沟沟坎坎。...传统的运维人员,以往接触的更多是硬件,如服务器、设备和风火水电;但是在云数据中心时代,运维人员已经从面向物理设备,转变为面向虚拟化、云的管理方式。...因此,云数据中心的运维对于传统的运维人员提出了新的能力要求——不仅要熟悉传统硬件设备,同时要掌握虚拟化、云系统的部署、监控和管理等运维能力。...本文选取云数据中心的其中一点,即软件定义存储(SDS)的运维为例,试述整个演进历程。...欲知后事,且听下文《从传统运维到云运维演进历程之软件定义存储(二)》,主要讲述了A公司运维小哥在硬件选型完毕之后开始部署Ceph遇到的一些问题以及解决办法。

1.7K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    从传统运维到云运维演进历程之软件定义存储(四)

    2、影响性能的因素 传统存储的封闭特性带来的优势是从存储操作系统软件到专用硬件的深度优化,而软件定义存储、Server SAN的目的是软件和硬件的解耦合,它们带来了灵活性,免除了硬件厂商锁定,但很多时候却不能充分发挥硬件的潜力...适用场景:操作系统运行、软件运行、数据库。...p=465 利用Cosbench来测试Ceph Cosbench是Intel的开源云存储性能测试软件,Cosbench目前已经广泛使用与云存储测试,并作为云存储的基准测试工具使用,Cosbench可在windows...Cosbench是一个分布式的基准测试工具,测试云对象存储系统,目前为止它支持一些云对象存储系统的测试,Cosbench也允许用户创建额外的存储系统适配器。...cosbench安装: 安装Java SDK # yum install  java-1.7.0-openjdk # yum install -y nc java-1.7.0-openjdk 安装curl软件

    2K20

    从传统运维到云运维演进历程之软件定义存储(六)完结

    回到最初的Ceph运维工程师的问题,本系列讲述的是传统运维向新一代云运维转型之软件定义存储部分的转型,运维是企业业务系统从规划、设计、实施、交付到运维的最后一个步骤,也是重要的步骤。...运维小哥最初的梦想搭建一个Ceph存储集群,对接云服务,底层存储实现高可用的数据访问架构。...传统的运维人员,以往接触的更多是硬件,如服务器、设备和风火水电;但是在云数据中心时代,运维人员已经从面向物理设备,转变为面向虚拟化、云的管理方式。...因此,云数据中心的运维对于传统的运维人员提出了新的能力要求——不仅要熟悉传统硬件设备,同时要掌握虚拟化、云系统的部署、监控和管理等运维能力。...通过九篇文章简单介绍了下传统运维向云运维或者说是传统运维向SDS运维的转型之路。

    95220

    从传统运维到云运维演进历程之软件定义存储(五)中

    关卡五:Ceph灾备神兵利器-故障域 重要度:五颗星 转眼六篇文章过去了,还记得大明湖畔(本系列一)的运维小哥吗?...勿忘初心,咱们还是回到最初的运维小哥,运维小哥经历了硬件选型、部署、调优、测试的一系列转型的关卡,终于就要到最后的上线了。...运维小哥最初的梦想搭建一个Ceph存储集群,对接云服务,底层存储实现高可用的数据访问架构。...实现存储资源的统一管理,在降低存储管理难度的同时,提高管理效率;通过软件定义存储保证存储数据的高可用,从而经济地利用存储资源提高业务连续性; 根据现有物理资源规格及配置,在保证最大安全性及空间利用率的情况下合理规划存储资源池

    82820

    从传统运维到云运维演进历程之软件定义存储(五)上

    但在现在云数据中心的兴起带来的是海量数据被集中起来。相较于传统备份行业常见的小容量(小于500GB)RTO、RPO敏感型场景,在云数据中心带来的挑战下完全无法作到有效保护。...但传统备份由于要建立索引表,面对海量小文件时或者是云计算中心的PB级数据量时无论是备份速度还是存储效率都及其有限。...这种方式的好处在于能有效节约带宽,且不需要在上层业务平台安装额外软件或对上层的业务系统照成任何压力。二、实时复制,利用存储自身功能对写入数据做到分流。...但是这种方式需要在主机层面安装一套数据分离软件,所以对操作系统的兼容性有一定限制(暂时市场上此类软件仅仅兼容Windows和少数Linux版本)。...4、基于备份软件的远程复制。 部分备份软件利用自身私有协议,将在本地的备份数据远程同步到远端的备份节点上。 这种方式有效做到了带宽的有效利用和数据的高一至性。

    96420

    私有代码托管平台的搭建与运维

    Git 私有代码托管平台解决方案   目前公有代码托管平台国外主要有 Github、Gitlab、SourceForge、Bitbucket 等,国内主要有 Gitee、Coding 等。...其中,Github、SourceForge、Bitbucket、Gitee 都提供商业化的 Git 私有代码托管平台解决方案,只有 Gitlab 提供开源的 Git 私有代码托管平台解决方案,其他平台暂不了解是否有相应的解决方案...相比之下,gogs 或者 Gitea 则偏向于更加基础、精悍的 Git 私有代码托管平台解决方案。...平台运维 升级 升级路线规划   前面已经提到过 Gitlab 的升级实际上是要遵循 Gitlab 官方提供的路线图的,即按版本逐步迭代升级,具体可以查看 Upgrade-paths。...(采用 CC BY-NC-SA 4.0 许可协议进行授权) 本文标题:《 私有代码托管平台的搭建与运维 》 本文链接:https://lisz.me/tech/docker/gitlab.html

    3.4K20

    腾讯云+运维,助力运维领域技术发展

    在云计算时代和互联网持续高速发展的今天,数据和服务规模迅速升级,传统运维面临着许多新型挑战,如何结合DevOps理念,解决云计算时代的运维难题?...为了更好地推进运维领域技术交流发展,并且让更多的企业能够完成向云计算的转变,腾讯云和织云联合举办“腾讯云运维干货” 系列沙龙。...每期沙龙将会邀请腾讯运维领域专家,分享云计算时代运维的思考和实践,并且为参加沙龙活动的人员提供一定金额的腾讯云代金券,帮助大家0门槛体验腾讯云上各类云产品,而针对企业用户,腾讯云“云+创业”计划更是能给出高达百万的云资扶持...[图片] (腾讯运维技术总监梁定安) 出品人大梁宣布了腾讯云与织云的“6+6运维技术沙龙...六个运维主题覆盖运维的质量、效率、成本、规划、DevOps与AI运维的相关话题,将独家曝光大量运维实践的案例。

    6.3K10

    Hyper容器云及云上运维

    关于Hyper,大家比较好奇,本文将从三个方面重点分享Hyper的原理和容器云运维:从Docker到Hyper Container,Hyper Container用于公有云,容器云上运维的变化。...容器云上运维的变化 最后想分享一下我对于容器时代运维的一些思考。在容器时代,很多运维理念跟以前不太一样了。 资源视角。以前,资源就是机器,不管是物理机还是虚机。...传统的运维都会有一套配置管理的工具(例如Puppet)来保证集群中每台机器的配置一致,但是在容器时代,一个应用所需要的依赖、配置全部打包进镜像里了,Puppet就不再需要了。...传统的运维方式,就是就是把应用的二进制文件编译好了扔到服务器上,替换旧的,重启服务,发现有问题赶紧把旧文件换回来,回滚服务,这是典型的变更方式。...一开始运维可能很不适应,但是我相信未来的趋势是容器,我们要往这个方向去努力。

    4.1K70

    运维的未来:云服务兴起,运维人员会“下岗”吗?

    本文作者 Tyler Treat 是一名软件工程师,他认为运维的未来从很多方面来说都跟质量保证(QA)的未来走向相似。未来,运维要使开发者能够通过工具、自动化和流程实现自助服务。...传统的运维( Ops)没有消失,只是在重组。 云服务的发展看起来让运维人员“丢”了工作,因为从传统意义上说,从本地(on-premise)转移到云平台意味着运维工作在相当大程度上外包给云提供商。...2014 年,Microsoft 转向了联合工程(Combined Engineering)模式,将 SDET 和 SDE(软件开发工程师)合并成一个角色,软件工程师,负责产品代码、测试代码和工具代码。...我对运维未来作为组织能力的想法本质上是将合成工程看作是合理结论。跟 QA 一样,运维能力也应该被嵌入发展团队中。事实是,没有运维技能,你不可能在现代组织中成为一名合格的软件工程师。...随着运维工作转移到云,它需要给予开发团队更多的权利和信任以重塑自身,而不是“闭关锁国”。 运维长存! 【本文转自 36氪 】

    4K40

    腾讯云运维干货沙龙-海量运维实践大曝光 (三)

    作者丨周小军,腾讯SNG资深运维工程师,负责社交产品分布式存储的运维及团队管理工作。对互联网网站架构、数据中心、云计算及自动化运维等领域有深入研究和理解。...3.2.2 一键扩容 [图片] 在我们强大的织云自动化运维平台支撑下,我们的业务模块都是一键式扩容模式,也称一键上云。一个模块下的上百台设备,整个扩容流程跑完只消耗5分钟时间。...织云高效的实践是,它是以运维标准化为基石,以 CMDB 为核心的自动化运维平台。通过 Web 界面的一键式上云,基于业务原子任务和流程引擎,形成一个完整的运维流程,最后并行执行。...这是运维标准化的实践。把架构、配置、监控、软件包、工具等等先实现标准化,然后落实到 CMDB 配置中心,通过工具或流程快速交付。...相关文章 腾讯云运维干货沙龙-海量运维实践大曝光 (一) 腾讯云运维干货沙龙-海量运维实践大曝光 (二) 沙龙PPT下载地址: https://share.weiyun.com/5c406a57164ed4cf7e248160aebf74c3

    6.2K10

    腾讯云运维干货沙龙-海量运维实践大曝光 (二)

    作者丨魏旸:腾讯高级工程师,具有15年运维经验的专家。负责QQ空间、微云、QQ空间相册等的运维工作。 12月16日,首期沙龙“海量运维实践大曝光”在腾讯大厦圆满举行。...沙龙出品人腾讯运维技术总监、复旦大学客座讲师、DevOps专家梁定安,讲师腾讯手机QQ运维负责人郭智文,腾讯高级工程师魏旸,腾讯SNG资深运维专家周小军出席沙龙,并带来精彩的技术分享。...[图片] [图片] 相关文章 腾讯云运维干货沙龙-海量运维实践大曝光 (一) 腾讯云运维干货沙龙-海量运维实践大曝光 (三) 沙龙PPT下载地址: https://share.weiyun.com/5c406a57164ed4cf7e248160aebf74c3

    9.4K10

    腾讯云运维干货沙龙-海量运维实践大曝光 (一)

    作者丨郭智文:腾讯高级工程师,手机QQ运维负责人。...12月16日,首期沙龙“海量运维实践大曝光”在腾讯大厦圆满举行。...沙龙出品人腾讯运维技术总监、复旦大学客座讲师、DevOps专家梁定安,讲师腾讯手机QQ运维负责人郭智文,腾讯高级工程师魏旸,腾讯SNG资深运维专家周小军出席沙龙,并带来精彩的技术分享。...业务运维同事通过腾讯网络中心联系到重庆联通网络负责人,经过多轮沟之后,确认确实是运营商在凌晨时段割接网络引起,运营商与厂商经过两次调整最后故障才得以解决。...总结 相关文章 腾讯云运维干货沙龙-海量运维实践大曝光 (二) 腾讯云运维干货沙龙-海量运维实践大曝光 (三) 沙龙PPT下载地址: https://share.weiyun.com

    6K30

    传统运维 vs 智能运维差距有多大?腾讯云 CloudQ 重新定义运维方式

    维度三:如何传承知识传统运维:知识在人头上。老员工知道哪些坑,新员工需要几个月才能上手运维手册写了但没人看,更没人更新核心人员离职=运维能力断崖式下降智能运维:知识在系统里。...腾讯云CloudQ把腾讯内部多年的运维最佳实践固化成评估模型新人第一天就能通过对话做基本巡检不需要背命令,不需要记配置,自然语言交互差距:智能运维让经验可复用、可标准化,而不是只存在于某几个人的脑子里。...维度四:如何管理多云传统运维:三个云=三份工作。每个云一套控制台,各自登录各自的告警系统,各自的账单,各自的权限管理汇总多云数据需要人工整理,每周半天不止智能运维(CloudQ):一个入口,统一视图。...腾讯云、阿里云、AWS、Azure、GCP,一个对话窗口搞定统一的评估标准,跨云对比资源健康状态一份多云架构报告,自动生成维度五:如何跟进团队协作传统运维:截图、粘贴、手写报告。...总结传统运维和智能运维的差距,不只是工具的差距,是工作方式的差距:从被动响应到主动预防从个人经验到系统知识从多地登录到统一视图从手工报告到自动化推送腾讯云CloudQ(JustQIT!)

    11010
    领券