Linux 内核包含4个IO调度器，分别是 Noop IO scheduler、Anticipatory IO scheduler、Deadline IO scheduler 与 CFQ IO scheduler。
Linux 的 I/O 调度器是一个以块式 I/O 访问存储卷的进程，有时也叫磁盘调度器。Linux I/O 调度器的工作机制是控制块设备的请求队列：确定队列中哪些 I/O 的优先级更高以及何时下发 I/O 到块设备，以此来减少磁盘寻道时间，从而提高系统的吞吐量。
一、 I/O调度程序的总结 1) 当向设备写入数据块或是从设备读出数据块时,请求都被安置在一个队列中等待完成. 2) 每个块设备都有它自己的队列. 3) I/O调度程序负责维护这些队列的顺序,以更有效地利用介质.I/O调度程序将无序的I/O操作变为有序的I/O操作. 4) 内核必须首先确定队列中一共有多少个请求,然后才开始进行调度. 二、I/O调度的4种算法 1) CFQ(Completely Fair Queuing, 完全公平排队) 特点: 在最新的内核版本和发行版中,都选择CFQ做为默认的I/O调度器
通常磁盘的读写影响是由磁头到柱面移动造成了延迟，解决这种延迟内核主要采用两种策略：缓存和IO调度算法来进行弥补。
现代计算机体系中，硬盘是数据存储的持久化介质，硬盘的访问速度相比内存存在数量级的差距，因此有效的调度能更好利用资源，优化响应。 和CPU调度算法相似,调度的本质是对请求排序。在Linux系统中，这由I/O调度层负责。 在I/O调度之前，如果多个I/O在同一个sector中，或者是相邻sector。Linux可以把多个请求合并为一个来减少请求数量。这是在Block层处理的，可以设置开启或关闭。
2018 即将结束，年末正是各种基准测试对比轮番出炉的时候，通过这些报告，我们可以看到 Linux 性能的各个方面在 2018 是如何发展的。但本文的这份性能对比会更加深入 —— 将研究五个主流 Linux 发行版在过去近三年里所经历的性能变化，而测试对象则是从 2016 年初开始的 CentOS, Clear Linux, Fedora, Ubuntu 和 openSUSE，到目前为止已安装稳定更新的最新版本。
本篇文章为大家分享一下Linux系统中MySQL优化小技巧，本文实操记录绝无水文，如果错误或遗漏欢迎各位小伙伴指正。
1.缓冲 I/O，是指利用标准库缓存来加速文件的访问，而标准库内部再通过系统调度访问文件。
Input/output (I/O) scheduling is a term used to describe the method computer operating systems decide the order that block I/O operations will be submitted to storage volumes. I/O Scheduling is sometimes called 'disk scheduling'.
按照[043][译]blkio-controller.txt，我已经学会了如何通过cgroup v1来调整不同进程的IO权重，这个IO权重是在CFQ调度算法中实现的，在深入学习一下CFQ调度算法之前，我决定先看一下CFQ的说明书cfq-iosched.txt。翻译完这个文档之后，我感觉受益良多，比网上很多的资料讲的清楚多了。
Linux I/O（输入/输出）系统是其核心功能之一，负责处理数据在系统内部及与外界之间的流动。为了优化这一流程，Linux进行了一系列努力和抽象化，以提高效率、灵活性和易用性。🚀
http://www.searchdoc.cn/rdbms/mysql/dev.mysql.com/doc/refman/5.7/en/index.com.coder114.cn.html
我们可以在文章的开始就列出一个列表，列出可能影响Linux操作系统性能的一些调优参数，但这样做其实并没有什么价值。因为性能调优是一个非常困难的任务，它要求对硬件、操作系统、和应用都有着相当深入的了解。如果性能调优非常简单的话，那些我们要列出的调优参数早就写入硬件的微码或者操作系统中了，我们就没有必要再继续读这篇文章了。正如下图所示，服务器的性能受到很多因素的影响。
换盘的时候一定要验明正身，原生的ceph-disk方式对磁盘分区的信息标记实在是太粗糙，很容易看花眼,比如下面这个例子，虽然通过PARTLABEL可以区分journal或者data分区，但是很难搞清楚Journal和Data分区具体对应哪个OSD
本文介绍了Linux平台上一个名为“Linux易用剖析器(LEP)”的剖析工具，用于分析Linux应用程序的性能。LEP通过记录和分析系统调用、进程状态、内存使用、I/O操作等方面的信息，帮助开发人员诊断和解决Linux应用程序的性能问题。
相比机械磁盘固态磁盘有更好的随机读写性能，相比机械磁盘固态磁盘有更好的并发支持，相比机械磁盘固态磁盘更容易损坏
fifo_batch: This parameter controls the maximum number of requests per batch.It tunes the balance between per-request latency and aggregate throughput. When low latency is the primary concern, smaller is better (where a value of 1 yields first-come first-served behavior). Increasing fifo_batch generally improves throughput, at the cost of latency variation. The default is 16. front_merges: A request that enters the scheduler is possibly contiguous to a request that is already on the queue. Either it fits in the back of that request, or it fits at the front. Hence it’s called either a back merge candidate or a front merge candidate. Typically back merges are much more common than front merges. You can set this tunable to 0 if you know your workload will never generate front merges. Otherwise leave it at its default value 1. read_expire: In all 3 schedulers, there is some form of deadline to service each Read Request. The focus is read latencies. When a read request first enters the io scheduler, it is assigned a deadline that is the current time + the read_expire value in units of milliseconds. The default value is 500 ms. write_expire: Similar to Read_Expire, this applies only to the Write Requests. The default value is 5000 ms. writes_starved: Typically more attention is given to the Read requests over write requests. But this can’t go on forever. So after the expiry of this value, some of the pending write requests get the same priority as the Reads. Default value is 1. This tunable controls how many read batches can be processed before processing a single write batch. The higher this is set, the more preference is given to reads.
IO体系结构是什么样的？ 📷 系统如何判断设备数据是否就绪方式？ 目前系统判断设备上的数据是否就绪采用了轮询和中断两种方式。轮询方式是不断的重复询问设备上的数据是否可用，如果可用，CPU就读取数据；中断方式中系统为每个CPU提供了中断线，可由各个系统设备共享。每个中断通过一个唯一的标识，内核对使用的每个中断提供一个中断服务。中断将暂停正常系统工作，在外设的数据已经就绪，需要由内核或者应用处理，外设会引发一个中断，系统就不需要频繁检查是否有新的数据可用，外设有新数据的情况会自动通知系统。 内核如何管理磁盘设备
当一个系统的CPU空闲时间或者等待时间小于5%时，我们就可以认为系统的CPU资源耗尽，我们应该对CPU进行性能调优。
这些集群范围内的配置参数定义在Ceph的配置文件中，因此任何一个Ceph守护进程启动时都将会遵循已定义的设置。缺省的配置文件是ceph.conf，放在/etc/ceph目录下。这个配置文件有一个global部分和若干个服务类型部分。任何时候一个Ceph服务启动，都会应用[gloabl]部分，以及进程特定部分的配置。一个Ceph配置文件有多个部分，如下图所示。
Linux之父曾说过read the fucking source code。在学习linux的过程中，我觉得read the fucking document也非常的重要，今天又花了几个小时的时间，翻译了一下blkio-controller.txt，对cgroup如何控制IO有了大概的一个了解，当然有些细节还需要进一步的验证，我会继续努力。
cgroup还有其他一些限制特性，如io，pid，hugetlb等，这些用处不多，参见Cgroupv1。下面介绍下与系统性能相关的io和hugepage，cgroup的io介绍参考Cgroup - Linux的IO资源隔离
在 KVM 虚拟化中，大家对 CPU mode 的关注相对较少，多采用默认值。其实，CPU mode 的选取对 VM 的影响却很大，如果考虑不周，可能会导致稳定性差，维护成本高，影响业务等一系列问题。本文从性能，热迁移，稳定性，应用移植四个角度对 CPU mode 进行分析。
一、分区建议（对于经常访问的目录，单独分区）： 1、/ swap /var /usr /home单独分区 2、/dev/hda1 比 /dev/hda2 比/dev/hda3访问速度快 3、hda1应该式swap分区，第二个分区/var，第三个/usr，剩下/ /home 二、I/O提升调度器 http://www.learnfuture.com/article/2150 1、deadline:数据库要改成这种。截止时间调度算法 2、noop：先进先出，SSD用这种 3、cfq：默认 更改：cat "deadline">/sys/block/sda/queue/scheduler 永久更改：GRUB_CMDLINE_LINUX_DEFAULT="quiet splash elevator=noop" 三、TLB：https://blog.csdn.net/liuchen_csdn/article/details/66975348 1、超大TLB：配置超大TLB的数量：echo x>/proc/sys/vm/nr_hugepages 2、配置后使用方式：
编辑手记：本文主要讲解Linux IO调度层的三种模式：cfp、deadline和noop，并给出各自的优化和适用场景建议。 作者简介： 邹立巍 Linux系统技术专家。目前在腾讯SNG社交网络运营部
0、使用SSD。资金不足的话，使用RAID设备 【建议使用RAID10，因为RAID5的性能并不太高】
Mysql在使用时不仅会受到自己的配置参数影响, 服务器硬件设施, 内核参数也会对性能有影响.
点击上方蓝字每天学习数据库 本文作者：黄稚禹，腾讯云数据库产品经理。曾任职新浪彩票数据库总监，精通金融系统的数据运维体系架构。之前为腾讯视频、腾讯新闻、企鹅号、财经自选股等业务的数据平台总负责人。 ---- 大家都知道很多关于MySQL Server相关的优化技巧,比如:MySQL参数配置优化、MySQL的SQL语句优化、MySQL的schema设计优化。但却对运行MySQL的操作系统和硬件优化有所忽略。本文从Linux操作系统和服务器硬件的角度来说下关于MySQL的优化技巧，如果在MySQL Serve
如果在ubuntu1804上使用mysql，在做大量数据写入时，建议按照如下文档做优化，性能立即提高 2.5 倍：
之前的推文已经分享了数据库优化的方法，链接为https://mp.weixin.qq.com/s/6Atzk9UKPJRxxAs0nsKBXg 。其中操作系统部分介绍了IO调度算法的优化，本文将通过压力测试的方式来对比不同的调度算法下磁盘IO的表现。
官网MySQL有四个版本：GA版、DMR版、RC版、Beta版。一般生产和测试环境使用GA版(常规可用的版本，经过bug修复测试)
System Type arm 占用配置，一般是厂家提供，与第7项代替了原有的Processor type and features
糖豆贴心提醒，本文阅读时间8分钟 OpenStack简介 OpenStack 是一个开源的 IaaS 实现，它由一些相互关联的子项目组成，主要包括计算、存储、网络。 由于以 Apache 协议发布，自 2010 年项目成立以来，超过 200 个公司加入了 OpenStack 项目，其中包括 AT&T、AMD、Cisco、Dell、IBM、Intel、Red Hat 等。 目前参与 OpenStack 项目的开发人员有 17,000+，来自 139 个国家，这一数字还在不断增长中。 OpenStack
从 2016 年 6 月发布 v1.0-rc1 版本开始，至今已整整 5 年时间，runc 历经多个 rc 版本终于发布了 v1.0 版本。整个过程及其思考请参考我之前的文章 《开源项目的 5 年长跑，runc v1.0 终于正式发布！》 。这里我们来看看 v1.0 新版本中带来了哪些值得注意的变更。
Block Layer层在整个I/O中负责承上启下，上接文件系统，下接块驱动。 我不想直接讨论代码，希望从一个架构的演变来初探一下Block Layer层。
# -exec command {} \;是连用的，所有符合的都会放置在{}中，去执行command
2） 通过页面隐藏模型重写Discuz.Web-install-index.aspx页面
登入服务器后，我们的目的是首先要确认当前到底是哪些进程引起的负载高，以及这些进程卡在什么地方，瓶颈是什么。
数据库的操作越来越成为整个应用的性能瓶颈，这对于Web应用尤其明显。关于数据库的性能，这并不只是DBA需要关心的，而更是后端开发需要去关注的事情。
计算机的文件系统是一种存储和组织计算机数据的方法，它使得对其访问和查找变得容易，文件系统使用文件和树形目录的抽象逻辑概念代替了硬盘和光盘等物理设备使用数据块的概念，用户使用文件系统来保存数据不必关心数据实际保存在硬盘（或者光盘）的地址为多少的数据块上，只需要记住这个文件的所属目录和文件名。在写入新数据之前，用户不必关心硬盘上的那个块地址没有被使用，硬盘上的存储空间管理（分配和释放）功能由文件系统自动完成，用户只需要记住数据被写入到了哪个文件中。
云计算介绍 云计算是一种按使用量付费的模式，这种模式提供可用的、便捷的、按需的网络访问，进入可配置的计算资源共享池，（资源包括网络、服务器、存储、应用软件、服务），这些资源能够被快速提供，需要投入很少的管理工作，或与服务供应商进行很少的交互。 1）云计算之前的使用模式 IDC 托管 IDC 租用 虚拟主机（买空间） VPS：虚拟专用主机 2）传统数据中心面临的问题 资源使用率低 资源分配不均 自动化能力差 3）云计算的优势 云计算是一种使用模式，不是一种技术 云计算的使用方式：通过网络访问 云计算的优势：弹
一、简介 数据库服务器需要CPU、内存、 磁盘和网络才能运行，了解这些资源对于DBA来说非常重要，因为任何的超载行为都可能成为限制因素，导致数据库服务器性能不佳。DBA的主要任务就是调整系统和数据库的配置，避免可用资源的过渡利用和利用不足。 首先，性能优化是一个持续的过程，安装MySQL通常是调整操作系统和数据库配置的第一步。而数据库是一个动态系统，这是一个永无止境的故事。你的MySQL数据库起初可能是CPU绑定的，因为你有足够的内存和很少的数据。随着时间地推移，它可能会改变，磁盘访问可能会变得更加频繁。正
云豆贴心提醒，本文阅读时间7分钟 现在MySQL运行的大部分环境都是在Linux上的，如何在Linux操作系统上根据MySQL进行优化，我们这里给出一些通用简单的策略。这些方法都有助于改进MySQL的性能。 闲话少说，进入正题。 一、CPU 首先从CPU说起。 你仔细检查的话，有些服务器上会有的一个有趣的现象： 你cat /proc/cpuinfo时，会发现CPU的频率竟然跟它标称的频率不一样： 这个是Intel E5-2620的CPU，他是2.00G * 24的CPU，但是，我们发现第5颗C
最近是沉迷于TiDB，无法自拔，从TiDB集群部署到集群压测、高可用测试、再到参数调优，最后到线上业务从MySQL迁移到TiDB，整个过程下来，感觉整个学习成本还是比较高，不管是TiDB还是分布式数据库，要学习的内容还是非常的多；本文主要分享生产环境部署TiDB v5.0.3版本集群过程，供大家参考学习；
导语 | 本文主要以一张图为基础，向大家介绍Linux在I/O上做了哪些事情，即Linux中直接I/O原理，希望本文的经验和思路能为读者提供一些帮助和思考。 引言 我们先看一张图： 这张图大体上描述了Linux系统上，应用程序对磁盘上的文件进行读写时，从上到下经历了哪些事情。这篇文章就以这张图为基础，介绍Linux在I/O上做了哪些事情。 一、文件系统 （一）什么是文件系统 文件系统，本身是对存储设备上的文件，进行组织管理的机制。组织方式不同，就会形成不同的文件系统。比如常见的Ext4、XFS、Z
当开发人员设计好表语句后，就需要运维工程师进行服务部署，项目上线。这里应该根据需求进行预估访问量，再进行配置的选择和结构设计。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
