上回书讲完了部署,部署完成之后,就开始了无休止的调优,对于Ceph运维人员来说最头痛的莫过于两件事:一、Ceph调优;二、Ceph运维。调优是件非常头疼的事情,下面来看看运维小哥是如何调优的,运维小哥根据网上资料进行了一个调优方法论(调优总结)。
硬件架构 从硬件架构图中可以看出以下特点: 每个 CPU 核都包含各自的 local timer,相互独立。 每个 local timer 都支持中断的产生,中断类型为 PPI,即 CPU 的私有中断,GIC 负责分发到指定的 CPU,这些中断都可以用来产生系统事件。local timer的中断为以下四种: Secure Physical Timer event (ID 29,也就是上面device node中的13,29 = 16 + 13) Non-secure Physical Timer even
管理与高CPU活动相关的功耗和废热是数据中心运行的主要关注点之一。对于需要最大限度延长电池寿命的移动设备来说,最大限度地减少功耗也越来越重要。
云豆贴心提醒,本文阅读时间7分钟 现在MySQL运行的大部分环境都是在Linux上的,如何在Linux操作系统上根据MySQL进行优化,我们这里给出一些通用简单的策略。这些方法都有助于改进MySQL的性能。 闲话少说,进入正题。 一、CPU 首先从CPU说起。 你仔细检查的话,有些服务器上会有的一个有趣的现象: 你cat /proc/cpuinfo时,会发现CPU的频率竟然跟它标称的频率不一样: 这个是Intel E5-2620的CPU,他是2.00G * 24的CPU,但是,我们发现第5颗C
最近是沉迷于TiDB,无法自拔,从TiDB集群部署到集群压测、高可用测试、再到参数调优,最后到线上业务从MySQL迁移到TiDB,整个过程下来,感觉整个学习成本还是比较高,不管是TiDB还是分布式数据库,要学习的内容还是非常的多;本文主要分享生产环境部署TiDB v5.0.3版本集群过程,供大家参考学习;
位于南极洲西南部的斯怀茨冰川是地球上最宽的冰川之一,它又被科学家们称为“末日冰川”(doomsday glacier)。因为它一旦崩塌,将导致全球海平面急剧上升4.87米。全球变暖是“末日冰川”崩塌的罪魁祸首。为了缓解全球变暖和气候变化的负面影响,构建可持续的技术基础设施,降低碳排放就成为了IT厂商追逐的目标。
图2-1可以说是标准的生产库环境,处处体现了冗余,有效防止了单点故障。这就是HA(高可用)
优化操作系统的参数可以充分利用硬件的性能。 组件 配置 默认值 是否启用 CPU 关闭CPU节能模式 - - CPU 使用Cgroup绑定Ceph OSD进程到固定的CPU 无 无 RAM 关闭NUMA 开启 是 RAM 关闭虚拟内存 无 是 网卡 设置为大帧模式 无 无 SSD 分区4k对齐 无 无 SSD 调度算法为noop 无 无 SATA/SAS 调度算法为deadline 无 无 文件系统 使用XFS 无 是 文件系统 挂载参数为noatime 无 无 ulimit 调高ulimit 1024 1
最近在开发一个项目,需要用到高精度的延时机制,设计需求是 1000us 周期下,误差不能超过 1%(10us)。
网络信息产业中,芯片被比喻为心脏,操作系统被认为是计算机的灵魂。二十年来,国内信息产业始终在“缺芯少魂”的困境中,中国在高端芯片行业缺乏自主创新能力,国产操作系统自研创新,不仅事关信息技术核心竞争力,更关乎国家信息安全。
数据中心约超过一半的成本是电费,数据存储系统作为数据中心三大件之一,能耗也约占三分之一,面对非结构化数据量的快速增长挑战,以及国家对数据中心绿色节能要求的提高,分布式存储的绿色节能愈来愈加重要。
TencentOS发展历经多年,从2010年开始真正自研,经历三个时期和三个大版本,目前已达到千万级节点,今年正式开启商业化。在技术层面已形成完整生态链,从上游版本到企业级商用版本,再到社区开放版本。当前主要版本是TencentOS Server3(缩写TS3),并服务至2029年。全自研版本TS4预计在2024年跟大家见面。
Energy Aware Scheduler(EAS)是Android手机默认的Scheduler。通过为每个任务选择正确的CPU,达到性能和功耗相平衡。它可以在big.LITTLE和DynamIQArm平台上实现节能调度决策。
1、应用场景挑选 image.png image.png 2、CPU:一个OSD至少1个CPU核 内存:一个OSD1GB内存;恢复时1TB1GB内存 网卡:万兆网卡 硬盘:SSD做日志盘,10-20GB;建议4个OSD数据盘配一个SSD; 3、硬件方面调优: -一个OSD进程对应一个CPU -mon和mds需要2GB内存,osd需要至少1GB内存 -SSD选择:Intel SSD DC S3500 Series -BIOS上开启VT和HT;关闭节能 -关闭NUMA 4、操作系统方面调优:
数据中心,顾名思义就是数据的中心,是处理和存储海量数据的地方,英文全称为Data Center。用专业的名词解释,数据中心是全球协作的特定设备网络,用来在internet网络基础设施上传递、加速、展示、计算、存储数据信息。尽管数据中心听起来神秘高大上,但按照最简单直接的理解,数据中心实际上就是我们个人电脑的扩大版,你的家用电脑就是你个人的数据中心。一般来讲,数据中心主要有几大部分构成:机房(建筑物本身)、供配电系统、制冷系统、网络设备、服务器设备、存储设备等。那数据中心的这些构成模块相当于你家个人电脑的哪些东西呢?做个简单的类比,机房相当于你家的书房,供配电系统相当于你家的插座、电脑电源再加个笔记本的电池,制冷系统相当于你家的空调以及风扇,网络设备相当于你家的路由器以及运营商在你家安装的光猫等,服务器设备相当于你家的电脑主机,存储设备相当于你家的电脑里面的硬盘或者现在的外置存储。
“每年可节省电能2亿度,减少碳排放8万吨,Cpu使用率从15%提升到45%。” 9月17日上午,这则信息在由中国信息通信研究院(简称中国信通院)主持召开的“云计算开源产业联盟(OSCAR)开源产业大会”上吸引了不少业内人士的注意和兴趣。这是来自腾讯操作系统TencentOS Server在节能降耗领域推出的“如意”这一大规模离在线容器集群混部产品所带来的实际落地效果。
Android 15,代号Vanilla Ice Cream,香草冰淇淋,是Android移动操作系统的最新主要版本。它将于2024年下半年正式发布,为用户带来一系列新的功能和改进。
2022 年 10 月 27 日,在国际电信联盟 ITU-T SG5(EMF, environment, climate action, sustainable digitalization, and circular economy)2022-2024 研究期的第 2 次全会上,由中国申请立项的全球首个云计算能耗优化平台《Energy consumption management and optimization platform Framework for cloud computing/云计算能耗管理和优化技术平台框架》(TD530-R1)的技术标准通过全会审议,通过立项。
白嘉庆,西邮陈莉君教授门下研一学生。曾在华为西安研究所任C++开发一职,目前兴趣是学习Linux内核网络安全相关内容。
2022 年 10 月 27 日,在国际电信联盟 ITU-T SG5(EMF, environment, climate action, sustainable digitalization, and circular economy)2022-2024 研究期的第 2 次全会上,由中国申请立项的全球首个云计算能耗优化平台《Energy consumption management and optimization platform Framework for cloud computing/云计算能耗管理
“缺芯少魂”一直是我国信息产业发展的一大难题,而“少魂”就是指操作系统等基础软件薄弱。“拿来主义”这种传统解决方式在给我们带来便利的同时,也桎梏了我们的创新。腾讯的操作系统研发也走过了从拿来主义到创新研发的道路。云计算时代,操作系统向下适配多元化硬件,向上支撑多样化产品,其重要性不言而喻。让我们一起了解下腾讯操作系统的创新之路。
目前国内外政策层面均已经关注到云计算这一高碳排放行业,并对云计算的低碳发展提出相关的政策要求和支持。主要集中在优化现存数据中心的能耗、限制新建数据中心的PUE以及推广可再生能源的使用三个方面。目前海外云服务商在节能减碳方面较为领先,多数头部云服务商均已达成碳中和的目标,下一步准备实现净零排放;国内云服务商均响应国家2030前实现碳中和的目标,承诺在2030年前至少实现自身运营的碳中和,并提出相关的节能减碳计划。
提到编程语言,人们第一时间想到的无非是:哪个编程语言简单易学,亦或是最挣钱等。但是编程语言功耗问题却被很多人忽视。那么作为程序员的我们如何选择编程语言,使其以低能耗高功效地工作呢?
Turbo Boost Switcher Pro for Mac是一款为Mac电脑用户设计的CPU管理工具,它允许你在需要的时候启用或禁用Turbo Boost技术,以此来更好地管理电脑的CPU,提高电脑的效率和性能。Turbo Boost是一种内置在Intel CPU中的动态加速技术,能够按需提高CPU频率以提高性能,但也会消耗较多能量,甚至会加速CPU老化,因此,Turbo Boost Switcher Pro为用户提供了一种灵活的控制方式,根据自己的需求开启或关闭Turbo Boost功能。
点击上方蓝字每天学习数据库 本文作者:黄稚禹,腾讯云数据库产品经理。曾任职新浪彩票数据库总监,精通金融系统的数据运维体系架构。之前为腾讯视频、腾讯新闻、企鹅号、财经自选股等业务的数据平台总负责人。 ---- 大家都知道很多关于MySQL Server相关的优化技巧,比如:MySQL参数配置优化、MySQL的SQL语句优化、MySQL的schema设计优化。但却对运行MySQL的操作系统和硬件优化有所忽略。本文从Linux操作系统和服务器硬件的角度来说下关于MySQL的优化技巧,如果在MySQL Serve
---- 新智元报道 来源:jeffgeerling 编辑:Emil 【新智元导读】随着苹果发布自研的M1处理器以来,它无情碾压各种Inter和AMD成了人们津津乐道的话题。如今又有好事者做了一项有意思的测试,结论是M1比i9处理器快了30%?! 自苹果的M1芯片发布以来,关于它的性能究竟多强悍激起了所有人的兴趣。于是人们开始使用装备了M1芯片的Mac设备PK各种售价高昂的x86架构的电脑,乐此不疲。并且无论是在普通测试,还是在GeekBench、X86-specific code等排行榜中,M1
Linux下有3个特殊的进程,idle进程(PID = 0), init进程(PID = 1)和kthreadd(PID = 2)
ceph-mon和ceph-mds需要2G内存,每个ceph-osd进程需要1G内存。
1、之前将双系统安装在一块nvme硬盘上,然而Windows10时常蓝屏,蓝屏终止代码为WHEA_UNCORRECTABLE ERROR。
(本文内容接《腾讯数据中心制冷节能的十八般武艺——上》) (备注:图片带播放图标的均有视频介绍,视频链接为: http://v.qq.com/vplus/51389fdde8883a85bcfe344f11a106c5/foldervideos/em6000001jms4px, 视频搬运来自youtube) 三、数据中心制冷节能技术现状与趋势 1、海水自然冷却,位置为功能服务 Green Mountain Data Center: 位于挪威西南角,常年利用8℃的深层海水(75米以下),对数据中心进行制
集群是一种计算机系统,通过一组计算机或服务器的软硬件连接起来高度紧密地协作完成计算工作。在客户端看来为其提供服务的只有一台设备,实际上它是一群设备的集合,只不过这些设备提供的服务一样。
Linux 内核最初只是由芬兰人林纳斯·托瓦兹( Linus Torvalds) 在赫尔辛基大学上学时出于个人爱好而编写的。 Linux 是一套免费使用和自由传播的类 Unix 操作系统,是一个基于 POSIX 和 UNIX 的多用户、多任务、支持多线程和多 CPU 的操作系统。 Linux 能运 行主要的 UNIX 工具软件、应用程序和网络协议。它支持 32 位和 64 位硬件。 Linux 继承 Unix 以网络为核心的设计思想,是一个性能稳定的多用户网络操作系统。
电脑的休眠功能,为长时间不用的电脑进行了关闭显示、硬盘停转的深度节能模式,不仅节约能源,还保护设备。
有人把云计算技术视为个人电脑、互联网之后的第三次革新浪潮,认为它即将甚至已经从根本上改变整个信息产业的格局,改变人类使用计算机的习惯和方式,因此云计算技术得到了迅猛发展。但是,它改变世界的同时,自己也需要被改变:由于云计算规模越来越大,它对能源与环境的影响已越来越突出,能效问题是云计算发展道路上必须要跨过的障碍。 在云计算出现之前,想要大量储存和处理数据只能自己搭建服务器系统。这不仅需要很多IT知识,还需要很高的成本,云计算技术的出现改变了这一切。所谓“云服务”,是指通过互联网,让很多用户共享软硬件资源,按
选自pythonfiles.wordpress 机器之心编译 参与:Panda、蒋思源 近日,Python Files 博客发布了几篇主题为「Hunting Performance in Python Code」的系列文章,对提升 Python 代码的性能的方法进行了介绍。在其中的每一篇文章中,作者都会介绍几种可用于 Python 代码的工具和分析器,以及它们可以如何帮助你更好地在前端(Python 脚本)和/或后端(Python 解释器)中找到瓶颈。机器之心对这个系列文章进行了整理编辑,将其融合成了这一篇
X代表Extreme,中文意思是至尊级,代表同一时代性能最强的CPU。如Core i7-5960X、Core i7-4960X。X代表在同一代中只有一款CPU黄袍加身,地位至高无上。加上没有竞争对手可以望其项背,从露面都退出市场,期待的弑君者没有出现。Sandy Bridge时代到现在,竞争的天平一直向Intel倾斜。
" 如果你怀念 SDN 领域丰富的网络能力却在云原生领域苦苦追寻而不得,那么 Kube-OVN 将是你的最佳选择。本系列我们将逐个介绍Kube-OVN高级功能的工作原理及使用路径,帮你尽快征服容器网络难题!"
当能耗也成为了一个重要指标,我们要怎么选择编程语言?2017 年,由 6 名葡萄牙研究者组成的团队决定对这一问题进行调查并发表了一篇名为《Energy Efficiency Across Programming Languages》的论文。他们用 27 种语言写出了 10 个问题的解决方案(遵循同样的算法),然后运行这些方案,记录每种编程语言消耗的电量以及速度和内存使用情况,得到的排序结果如下图所示:
文章声明:此文基于木子实操撰写,本教程仅做为技术分享,请支持正版 生产环境:Proxmox 6.2-11, macOS Big Sur 问题关键字:macOS,macOS Big Sur,macOS Big Sur 虚拟机安装
随着物联网的发展,越来越多的智能设备进入我们的日常生活。这些设备不再是孤立的存在,而是可以通过联动规则实现智能互动。在本文中,我们将介绍如何使用设备联动规则,让多个设备之间实现智能互动。
本文将介绍文章“云环境下面向能耗降低的资源负载均衡方法”。
个人想法:本CPU适合普通用户,适合家用电脑,除了性能可以外而且还省电。 CPU概述 型号 Core i5-8250U 处理器系列 第八代i5 核心名称 Kaby Lake 核心/线程 四核八线程 制程工艺 14nm TDP功耗 15W CPU频率 主频 1.6GHz 加速技术 支持Turbo Boost睿频技术,3.4GHz 最高支持内存频率 DDR4-2400/DDR3L-1600/LPDDR3-2133 CPU缓存 三级缓存 6MB 图形核心 集成显示核心 是 显示核心 Intel UH
硬件解码是图形芯片厂家提出的用GPU资源解码视频流的方案,与之相对的是软解,也就是传统的用CPU承担解码工作的方案;优点是效率高,功耗低、热功耗低,缺点是缺乏有力的支持(包括滤镜、字幕等),局限性较大(例如打开硬件解码后PC的节能方面的功能失效cnq等),设置较为复杂;需要硬件有硬件解码模块、相关的驱动配合、合适的播放软件以及对播放软件正确的设置,缺一而不能开启硬件解码功能,主流的硬件解码方案由Intel、AMD-ATI以及Nvdia推出。
X后缀=至高无上的至尊版
建设绿色数据中心的必要性 中国目前是是全球最大的温室气体排放国,节能减排是“十二五”的重要工作内容。发改委在2013年就明确了首批10个行业的企业温室气体排放核算方法。根据对数据中心测算结果表明,2015年我国数据中心能耗达到1000*100000000kWh左右,相当于三峡电站一年的发电量,而到2020年,这个数据将会是2015年数字的2.5倍。数据中心的高能耗,不仅给企业带来巨大的负担,也造成了全社会能源的巨大浪费。根据国家既定战略,“十三五”期间节能环保方面的投入将是“十二五”期间的两倍以上,
在国际超算大会上,英伟达宣布正式支持Arm CPU,为高性能计算行业开辟了一条全新途径,以构建具有极高能效水平的百万兆级AI超级计算机。
其实将SystemClock 和Thead直接放在一起是不合适的,我们首先来看下他们所在的api。 public final class SystemClock extends Object jav
一开始我只是想在谷歌上搜索一下,为啥我的 Win10 笔记本在盖上盖子以后放入背包中,每次拿出来之后电量都会有所下降,结果就一下子看到了很多很神奇的东西,包括 Win10 的几种节能状态,以及如何设置关闭盖子的行为。且听我一一道来。
选自thenewstack 作者:David Cassel 机器之心编译 编辑:小舟、张倩 在手机快没电时,管理软件往往会提醒我们关掉某些耗电量高的应用。可见,除了硬件厂商外,软件厂商也应该重视能耗问题。在这篇文章中,研究者分析了一下各种编程语言的能耗对比。 当能耗也成为了一个重要指标,我们要怎么选择编程语言?2017 年,由 6 名葡萄牙研究者组成的团队决定对这一问题进行调查并发表了一篇名为《Energy Efficiency Across Programming Languages》的论文。他们用
领取专属 10元无门槛券
手把手带您无忧上云