首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

从传统演进历程之软件定义存储(二)

许多Ceph新手在测试环节以及预生产的时候会对Ceph集群的部署以及调优产生困扰,A公司小哥也遇到了部署和调优问题。下面来看看A公司小哥是如何解决这个问题的。...关卡二:部署调优关(部署) 难度:三颗星 上篇文章开头我也说到了,部署Ceph是新手的噩梦,对于传统来说部署一套Ceph是很难的事情,A公司小哥在官网以及Ceph中国社区的相关资料和帮助下才渐渐熟悉了什么是...而此时就是考验一个人员的处理故障的基本素质,好在这个小哥有过一两年的经验,经过基本排查,最终确定了是时间问题。由于三个节点时间不一致而导致的这个问题,这里称之为“OSD打摆子”。...1.某平台由于时间问题,导致主机创建不了、宕机等问题。 2.某分布式文件存储由于时间问题,导致数据分布不均衡、脑裂等问题。...所以平台也好存储也好,都会因为时间而产生不必要的故障问题,建议人员要注重时间问题。 ? 图8:Ceph集群 好了言归正传,上图是小哥新搭建好的集群。三节点、六个OSD的Ceph小集群。

1K10

从传统演进历程之软件定义存储(一)

从横向、纵向分可以分为多个维度和层次,本文试图抛开这纷繁复杂的概念,讲述一个传统的企业级人员转型到人员,尤其是软件定义存储的之间经历的沟沟坎坎。...传统的人员,以往接触的更多是硬件,如服务器、设备和风火水电;但是在数据中心时代,人员已经从面向物理设备,转变为面向虚拟化、的管理方式。...因此,数据中心的对于传统的人员提出了新的能力要求——不仅要熟悉传统硬件设备,同时要掌握虚拟化、云系统的部署、监控和管理等能力。...本文选取数据中心的其中一点,即软件定义存储(SDS)的为例,试述整个演进历程。...欲知后事,且听下文《从传统演进历程之软件定义存储(二)》,主要讲述了A公司小哥在硬件选型完毕之后开始部署Ceph遇到的一些问题以及解决办法。

1.4K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    从传统演进历程之软件定义存储(四)

    2、影响性能的因素 传统存储的封闭特性带来的优势是从存储操作系统软件到专用硬件的深度优化,而软件定义存储、Server SAN的目的是软件和硬件的解耦合,它们带来了灵活性,免除了硬件厂商锁定,但很多时候却不能充分发挥硬件的潜力...适用场景:操作系统运行、软件运行、数据库。...p=465 利用Cosbench来测试Ceph Cosbench是Intel的开源存储性能测试软件,Cosbench目前已经广泛使用与存储测试,并作为存储的基准测试工具使用,Cosbench可在windows...Cosbench是一个分布式的基准测试工具,测试对象存储系统,目前为止它支持一些对象存储系统的测试,Cosbench也允许用户创建额外的存储系统适配器。...cosbench安装: 安装Java SDK # yum install  java-1.7.0-openjdk # yum install -y nc java-1.7.0-openjdk 安装curl软件

    1.6K20

    从传统演进历程之软件定义存储(六)完结

    回到最初的Ceph工程师的问题,本系列讲述的是传统向新一代转型之软件定义存储部分的转型,是企业业务系统从规划、设计、实施、交付到的最后一个步骤,也是重要的步骤。...小哥最初的梦想搭建一个Ceph存储集群,对接服务,底层存储实现高可用的数据访问架构。...传统的人员,以往接触的更多是硬件,如服务器、设备和风火水电;但是在数据中心时代,人员已经从面向物理设备,转变为面向虚拟化、的管理方式。...因此,数据中心的对于传统的人员提出了新的能力要求——不仅要熟悉传统硬件设备,同时要掌握虚拟化、云系统的部署、监控和管理等能力。...通过九篇文章简单介绍了下传统或者说是传统向SDS的转型之路。

    78420

    从传统演进历程之软件定义存储(五)中

    关卡五:Ceph灾备神兵利器-故障域 重要度:五颗星 转眼六篇文章过去了,还记得大明湖畔(本系列一)的小哥吗?...勿忘初心,咱们还是回到最初的小哥,小哥经历了硬件选型、部署、调优、测试的一系列转型的关卡,终于就要到最后的上线了。...小哥最初的梦想搭建一个Ceph存储集群,对接服务,底层存储实现高可用的数据访问架构。...实现存储资源的统一管理,在降低存储管理难度的同时,提高管理效率;通过软件定义存储保证存储数据的高可用,从而经济地利用存储资源提高业务连续性; 根据现有物理资源规格及配置,在保证最大安全性及空间利用率的情况下合理规划存储资源池

    63620

    从传统演进历程之软件定义存储(五)上

    但在现在数据中心的兴起带来的是海量数据被集中起来。相较于传统备份行业常见的小容量(小于500GB)RTO、RPO敏感型场景,在数据中心带来的挑战下完全无法作到有效保护。...但传统备份由于要建立索引表,面对海量小文件时或者是计算中心的PB级数据量时无论是备份速度还是存储效率都及其有限。...这种方式的好处在于能有效节约带宽,且不需要在上层业务平台安装额外软件或对上层的业务系统照成任何压力。二、实时复制,利用存储自身功能对写入数据做到分流。...但是这种方式需要在主机层面安装一套数据分离软件,所以对操作系统的兼容性有一定限制(暂时市场上此类软件仅仅兼容Windows和少数Linux版本)。...4、基于备份软件的远程复制。 部分备份软件利用自身私有协议,将在本地的备份数据远程同步到远端的备份节点上。 这种方式有效做到了带宽的有效利用和数据的高一至性。

    66920

    腾讯+,助力领域技术发展

    计算时代和互联网持续高速发展的今天,数据和服务规模迅速升级,传统维面临着许多新型挑战,如何结合DevOps理念,解决计算时代的难题?...为了更好地推进领域技术交流发展,并且让更多的企业能够完成向计算的转变,腾讯云和织云联合举办“腾讯干货” 系列沙龙。...每期沙龙将会邀请腾讯领域专家,分享计算时代的思考和实践,并且为参加沙龙活动的人员提供一定金额的腾讯代金券,帮助大家0门槛体验腾讯上各类产品,而针对企业用户,腾讯+创业”计划更是能给出高达百万的资扶持...[图片] (腾讯技术总监梁定安) 出品人大梁宣布了腾讯与织云的“6+6技术沙龙...六个主题覆盖的质量、效率、成本、规划、DevOps与AI的相关话题,将独家曝光大量实践的案例。

    4.9K10

    Hyper容器

    关于Hyper,大家比较好奇,本文将从三个方面重点分享Hyper的原理和容器:从Docker到Hyper Container,Hyper Container用于公有,容器的变化。...容器的变化 最后想分享一下我对于容器时代的一些思考。在容器时代,很多运理念跟以前不太一样了。 资源视角。以前,资源就是机器,不管是物理机还是虚机。...传统的都会有一套配置管理的工具(例如Puppet)来保证集群中每台机器的配置一致,但是在容器时代,一个应用所需要的依赖、配置全部打包进镜像里了,Puppet就不再需要了。...传统的方式,就是就是把应用的二进制文件编译好了扔到服务器上,替换旧的,重启服务,发现有问题赶紧把旧文件换回来,回滚服务,这是典型的变更方式。...一开始可能很不适应,但是我相信未来的趋势是容器,我们要往这个方向去努力。

    3.1K70

    的未来:服务兴起,人员会“下岗”吗?

    本文作者 Tyler Treat 是一名软件工程师,他认为的未来从很多方面来说都跟质量保证(QA)的未来走向相似。未来,要使开发者能够通过工具、自动化和流程实现自助服务。...传统的( Ops)没有消失,只是在重组。 服务的发展看起来让人员“丢”了工作,因为从传统意义上说,从本地(on-premise)转移到平台意味着工作在相当大程度上外包给提供商。...2014 年,Microsoft 转向了联合工程(Combined Engineering)模式,将 SDET 和 SDE(软件开发工程师)合并成一个角色,软件工程师,负责产品代码、测试代码和工具代码。...我对未来作为组织能力的想法本质上是将合成工程看作是合理结论。跟 QA 一样,能力也应该被嵌入发展团队中。事实是,没有技能,你不可能在现代组织中成为一名合格的软件工程师。...随着工作转移到,它需要给予开发团队更多的权利和信任以重塑自身,而不是“闭关锁国”。 长存! 【本文转自 36氪 】

    3K40

    腾讯干货沙龙-海量实践大曝光 (三)

    作者丨周小军,腾讯SNG资深工程师,负责社交产品分布式存储的及团队管理工作。对互联网网站架构、数据中心、计算及自动化等领域有深入研究和理解。...3.2.2 一键扩容 [图片] 在我们强大的织云自动化平台支撑下,我们的业务模块都是一键式扩容模式,也称一键上。一个模块下的上百台设备,整个扩容流程跑完只消耗5分钟时间。...织云高效的实践是,它是以标准化为基石,以 CMDB 为核心的自动化平台。通过 Web 界面的一键式上,基于业务原子任务和流程引擎,形成一个完整的流程,最后并行执行。...这是标准化的实践。把架构、配置、监控、软件包、工具等等先实现标准化,然后落实到 CMDB 配置中心,通过工具或流程快速交付。...相关文章 腾讯干货沙龙-海量实践大曝光 (一) 腾讯干货沙龙-海量实践大曝光 (二) 沙龙PPT下载地址: https://share.weiyun.com/5c406a57164ed4cf7e248160aebf74c3

    4.9K10

    腾讯干货沙龙-海量实践大曝光 (二)

    作者丨魏旸:腾讯高级工程师,具有15年经验的专家。负责QQ空间、微云、QQ空间相册等的工作。 12月16日,首期沙龙“海量实践大曝光”在腾讯大厦圆满举行。...沙龙出品人腾讯技术总监、复旦大学客座讲师、DevOps专家梁定安,讲师腾讯手机QQ负责人郭智文,腾讯高级工程师魏旸,腾讯SNG资深专家周小军出席沙龙,并带来精彩的技术分享。...[图片] [图片] 相关文章 腾讯干货沙龙-海量实践大曝光 (一) 腾讯干货沙龙-海量实践大曝光 (三) 沙龙PPT下载地址: https://share.weiyun.com/5c406a57164ed4cf7e248160aebf74c3

    8.3K10

    腾讯干货沙龙-海量实践大曝光 (一)

    作者丨郭智文:腾讯高级工程师,手机QQ负责人。...12月16日,首期沙龙“海量实践大曝光”在腾讯大厦圆满举行。...沙龙出品人腾讯技术总监、复旦大学客座讲师、DevOps专家梁定安,讲师腾讯手机QQ负责人郭智文,腾讯高级工程师魏旸,腾讯SNG资深专家周小军出席沙龙,并带来精彩的技术分享。...业务同事通过腾讯网络中心联系到重庆联通网络负责人,经过多轮沟之后,确认确实是运营商在凌晨时段割接网络引起,运营商与厂商经过两次调整最后故障才得以解决。...总结 相关文章 腾讯干货沙龙-海量实践大曝光 (二) 腾讯干货沙龙-海量实践大曝光 (三) 沙龙PPT下载地址: https://share.weiyun.com

    4.9K30

    时代,如何保障安全?

    一、 什么是是一个非常广泛的定义,在不同的用户不同的阶段有着不同的职责与定位。...加上近几年计算服务的诞生以及大规模普及,用户的主要对象从硬件(服务器等),转向了面向服务API的,包括主机运维和应用。图片作为核心技术部门,人员的岗位及其重要,但也容易出现问题。...1、相比于传统,更注重安全性,这是因为环境相比于传统IDC,接入端口面向整个网络,这样就造成接入方的不可控,要增强资产的安全性,除了环境本身的安全配置,对于过程中也需要减少可攻击面。...2、需要连接的资产有上和下两种,并且上环境中需要连接多个平台,需要动作做到多云资产管理。...3、往往需要应对多租户模式的环境,这就需要人员必须满足最小授权机制,多个租户的使用人员从软件上进行隔离,避免租户信息的泄露。在复杂的环境中,如何实现呢?

    28930

    VMware管平台管理

    摘要 跨 SDDC 和多云环境从应用到基础架构的智能 IT 管理。...VMware管平台 所有的管平台底层都是要基于软件定义的数据中心。...其中有三大块内容,一个是自动化部署的vRA,一个是做智能的vR Ops,以及做成本分析的vRB,这三块共同支撑起了管平台。 这期我们重点来介绍vR Ops。...vRealize Operations——智能化 在整个平台中,vRealize Operations实现了性能的管理、容量管理、成本管理、配置管理以及合规性管理。...使用vRA,利用分析优化工作负载的初始部署位置。 应用案例及常用使用场景 平台特点 负载动态变迁,运行环境不固定,状态难以跟踪。 配置变化更快,资产生命周期短,统计分析难。

    8.2K50

    计算下的企业IT

    基于计算的高效工作负载监控可在性能发生问题之前就提前发现这些问题的苗头,从而防患于未然。了解你的计算运行详细信息将有助于交付一个更强大的计算使用体验。...收集计算性能指标 IT管理员们必须积极主动地收集和记录计算服务器的性能指标与数据,这主要是因为托管计算工作负载的大多数服务器都是需要使用专用资源的虚拟机。...当无数用户从计算启动桌面服务或应用程序服务时,必须认真考虑这台服务器需要多少个专用核。 RAM需求:基于计算的工作负载可以是RAM密集型的。...网络设计:网络及其架构在计算基层设施与工作负载中起了一个非常重要的作用。监控数据中心和计算内的网络将有助于确定特定速度需求。...计算工作负载可以提出需求。规划是必须的。   主动保留运行日志。除了主动地监控计算工作负载,计算管理人员应当记录在一段时间内这一工作负载或服务器是如何运行的。

    2.1K30
    领券