在我们运维的db环境中,一个机器跑多个mysql实例经常会出现某个进程占用了几乎所有的cpu 进而影响其他的实例运行。基于此我们需要限制某个进程的cpu资源,将其使用 的cpu限定在某个或者某几个固定的cpu上，避免对其他的进程产生影响。
很多事情说起来容易，做起来却很难，开始的时候就已经经历了各种选择，而开始才是一个真正开始。
既然有 nethogs 工具，为什么还需要用 goalng 来实现一遍 ？主要是 nethogs 不够灵活，没有开放接口供其他程序调用。对的，我们现在就需要这类接口。当然，不是每个公司都有这类需求，大家通常都是当流量异常时，登上去分析下异常流量。
对于容器的资源限制，在容器出来之前有虚拟化技术，我们可以在一个物理机上创建很多虚拟机，对于一台物理机来讲他的cpu和内存都是配置有限的，对于虚拟机我们在配置的时候也是可以进行限定的。本节跟上节关联比较
对于容器的资源限制，在容器出来之前有虚拟化技术，我们可以在一个物理机上创建很多虚拟机，对于一台物理机来讲他的cpu和内存都是配置有限的，对于虚拟机我们在配置的时候也是可以进行限定的。本节跟上节关联比较紧密，建议一起学习。 ####虚拟机配置 内存配置 [1240] CPU 配置 [image.png] ####容器配置 为什么配置容器，给大家说个很实际的例子，如果一个虚拟机里面就一个容器，切这个容器不设置CPU和内存，当容器内的应用一直在运行的时候，它会一直慢慢的吞噬宿主机上的cpu和内存，最终导致的结果是
本文介绍了 ulimit 内键指令的主要功能以及用于改善系统性能的 ulimit 用法。通过这篇文章，读者不仅能够了解 ulimit 所起的作用。而且能够学会怎样更好地通过 ulimit 限制资源的使用来改善系统性能。
背景 公司内部的云平台为各个业务线提供了大量的实体机和虚拟机来运行业务的服务，经过统计发现，这些分配给业务的机器cpu, memory等资源利用并不充分; 如果能够充分利用这些机器上的空闲资源同时又能保证业务服务的正常运行，将会节省不少的机器资源; 选型 一提到多任务运行和调度，大部分人可能首先都会想到Kubernetes(k8s) + Docker, 跑起来如清风拂面, 顺畅无比。然而我们的业务机器大部分为centos 6.2, linux kernel 2.6的环境,而docker的运行需要Linux
Docker 对外宣称的是Build、Ship 和Run，Docker 要解决的核心问题就是快速地干这三件事情。它通过将运行环境和应用程序打包到一起，来解决部署的环境依赖问题，真正做到跨平台的分发和使用。而这一点和DevOps不谋而合，通过Docker可以大大提升开发、测试和运维的效率。在这个移动互联网的时代，如果一个工具能够节省人力，提升效率，必定会流行起来。
CPU使用率指的是程序在运行期间实时占用的CPU百分比，这是对一个时间段内CPU使用状况的统计。
容器的前世今生 物理机 部署非常慢 购买服务器服务，放在IDC机房，各种走流程，很多流程不可控制流程慢。 成本非常高 物理的服务器，高额的配置成本贵。 资源浪费 资源太多了，针对app的服务可能利用率不够充分。 难于迁移和扩展 迁移app端的服务器，我们要提前准备好一个新的物理服务器，环境需要重新的迁移。资源消耗比较大的话，用户增加比较快需要扩展内存，cpu，硬盘麻烦，可能最后还是选择购买新的物理服务器。 可能会被限定硬件厂家 那些已经采用RISC架构或非x86平台的用户来说，要想体验到x86平台的高效、
每个虚拟机就是一个操作系统，每个操作系统都要分配对应的操作系统资源，大家都用window系统，真正的生产环境一般都是用linux操作系统其中一部分原因就是因为linux系统消耗资源比较少。如果在一个物理服务器上放入10个虚拟机，每个虚拟机系统占用1g资源，等于浪费了10g的内存资源。所以当操作系统越来越多的时候消耗在系统上的资源也就越来越大。
Docker是一个开源的软件项目,让用户程序部署在一个相对隔离的环境运行，借此在Linux操作系统上提供一层额外的抽象，以及操作系统层虚拟化的自动管理机制。需要额外指出的是，Docker并不等于容器（containers），Docker只是容器的一种，其他的种类的容器还有Kata container，Rocket container等等。
「 不加思考地滥读或无休止地读书,所读过的东西无法刻骨铭心,其大部分终将消失殆尽。——叔本华」
通俗的来说容器其实是一种沙盒技术。顾名思义，沙盒就是能够像一个集装箱一样，把你的应用“装”起来的技术。这样，应用与应用之间，就因为有了边界而不至于相互干扰；而被装进集装箱的应用，也可以被方便地搬来搬去。不过，这两个能力说起来简单，但要用技术手段去实现它们，确并不是很容易。所以，本篇文章就来剖析一下容器的实现方式
Eth0表示Linux中的一个网卡，eth0是其名称。Lo（loop，本地回还网卡，其ip地址一般都是127.0.0.1）也是一个网卡名称。
记得博主以前被问到 CPU 负载如何才算高的时候，出过一次糗，具体就不记录了。。。在网上找了一篇比较详细的 Linux 下的 CPU 负载算法教程，科普一下。不感兴趣，或看不懂的朋友无视即可，不必浪费时间哈。 ---- 昨天查看 Nagios 警报信息，发现其中一台服务器 CPU 负载过重，机器为 CentOS 系统。信息如下： 2011-2-15 (星期二) 17:50 WARNING - load average: 9.73, 10.67, 10.49 还有前两个小时发出的警报信息： 2011-2
我们通常说进程是动态的活动实体，这是很形象的，进程就像一个人一样，它会有很多种运行状态，一会儿睡眠、一会儿暂停、一会儿又继续执行运行。而且，他还会死掉变僵尸！
第一行中，03:30:22是当前时间，up 39 min是系统运行的运行了多长时间，1 user指出了当前有几个用户登录到系统，load average指的是系统负载，这后面的三个值分别是1分钟，5分钟，15分钟的系统负载平均值。
自旋锁是专为防止多处理器并发（实现保护共享资源）而引入的一种锁机制。自旋锁与互斥锁比较类似，它们都是为了解决对某项资源的互斥使用。无论是互斥锁，还是自旋锁，在任何时刻，最多只能有一个保持者，也就说，在任何时刻最多只能有一个执行单元获得锁。但是两者在调度机制上略有不同。对于互斥锁，如果资源已经被占用，资源申请者只能进入睡眠状态。但是自旋锁不会引起调用者睡眠，如果自旋锁已经被别的执行单元保持，调用者就一直循环在那里看是否该自旋锁的保持者已经释放了锁，“自旋”一词就是因此而得名。自旋锁在内核中大量应用于中断处理等部分（对于单处理器来说，防止中断处理中的并发可简单采用关闭中断的方式，即在标志寄存器中关闭/打开中断标志位，不需要自旋锁）。
Linux中的进程有生老病死，就跟人一样，我们尤其关注其死，因为进程死后如果不处理，它会变成僵尸！
cgroup 与组调度 linux内核实现了control group功能（cgroup，since linux 2.6.24），可以支持将进程分组，然后按组来划分各种资源。比如：group-1拥有30%的CPU和50%的磁盘IO、group-2拥有10%的CPU和20%的磁盘IO、等等。具体参阅cgroup相关文章。 cgroup支持很多种资源的划分，CPU资源就是其中之一，这就引出了组调度。 linux内核中，传统的调度程序是基于进程来调度的（参阅《Linux 进程调度浅析》）。假设用户A和B共用一台机
例如：需要让张三同学帮忙去楼下小卖铺买一瓶农夫山泉水和清风餐巾纸，在这个指令中“买东西”是指令的主体，买的水和餐巾纸是操作的对象，农夫山泉、清风是操作的选项。|
上面是说的cgroups 是内核提供的功能，但现在我们在用户空间想使用的是cgroup的功能。其原理是：linux 内核有一个很强大的模块叫做VFS(vritual File System)，VFS 把具体的文件系统的细节隐藏起来，给用户态进程提供一个完备的文件系统API接口。linux 也是通过VFS 把cgroups 功能暴漏给用户态进程的，cgroups 与VFS 之间的衔接部分叫做cgroups 文件系统。
在你使用 Linux 系统时，你可能在系统的进程列表中注意到了名为 "kworker" 的进程。你可能会想知道这个进程是什么，它在做什么，以及为什么有时候它会占用大量的 CPU。在这篇文章中，我们将详细地介绍 kworker 进程，它在系统中的角色，以及如何诊断和解决 kworker 导致的性能问题。
docker容器可以理解为在沙盒中运行的进程。这个沙盒包含了该进程运行所必须的资源，包括文件系统、系统类库、shell 环境等等。但这个沙盒默认是不会运行任何程序的。你需要在沙盒中运行一个进程来启动某一个容器。这个进程是该容器的唯一进程，所以当该进程结束的时候，容器也会完全的停止。
在使用 docker 运行容器时，默认的情况下，docker没有对容器进行硬件资源的限制，当一台主机上运行几百个容器，这些容器虽然互相隔离，但是底层却使用着相同的 CPU、内存和磁盘资源。如果不对容器使用的资源进行限制，那么容器之间会互相影响，小的来说会导致容器资源使用不公平；大的来说，可能会导致主机和集群资源耗尽，服务完全不可用。
腾讯运营着海量的服务器，且近年的增长有加速的趋势，成本问题日益严峻。其中，CPU利用率不高一直是影响整机效率的短板。试想一下，如果能让整机的CPU利用率翻一翻，是什么概念？这相当于把一台机器当两台使用，能为公司节省巨额的成本开销。因此，各BG各业务都在想办法提升整机CPU利用率。大家尝试让各种业务混部，试图达到提高整机CPU利用率的目的。然而，方案的实际效果却不尽如人意。现有的混部方案始终无法做到离线业务不影响在线，这种影响直接导致多数业务没有办法混部。
之前在实习时，听了 OOM 的分享之后，就对 Linux 内核内存管理充满兴趣，但是这块知识非常庞大，没有一定积累，不敢写下，担心误人子弟，所以经过一个一段时间的积累，对内核内存有一定了解之后，今天才写下这篇文章记录，分享。
答：栈溢出发生的时候，栈顶指针(SP - Stack Pointer)一定会超出栈的范围，所以也可以在发生线程切换的时候，检测SP指向的地址是否超过了栈的内存限定。
在 Windows 和 Linux 的系统监控过程中，寻找占用 CPU 时间最长的线程/进程是一项非常重要的任务。下面将针对这个问题提供 Windows 和 Linux 平台下分别应该如何进行的解答。
Linux是一个多用户多任务的操作系统。多用户是指多个用户可以在同一时间使用同一个linux系统；多任务是指在Linux下可以同时执行多个任务，更详细的说，linux采用了分时管理的方法，所有的任务都放在一个队列中，操作系统根据每个任务的优先级为每个任务分配合适的时间片，每个时间片很短，用户根本感觉不到是多个任务在运行，从而使所有的任务共同分享系统资源，因此linux可以在一个任务还未执行完时，暂时挂起此任务，又去执行另一个任务，过一段时间以后再回来处理这个任务，直到这个任务完成，才从任务队列中去除。这就是多任务的概念。 上面说的是单CPU多任务操作系统的情形，在这种环境下，虽然系统可以运行多个任务，但是在某一个时间点，CPU只能执行一个进程，而在多CPU多任务的操作系统下，由于有多个CPU，所以在某个时间点上，可以有多个进程同时运行。 进程的的基本定义是：在自身的虚拟地址空间运行的一个独立的程序，从操作系统的角度来看，所有在系统上运行的东西，都可以称为一个进程。
本系列将按照类别对题目进行分类整理，重要的地方标上星星，这样有利于大家打下坚实的基础。
top命令提供运行系统的动态实时视图，其可以显示系统摘要信息，以及当前由内核管理的进程或线程的列表，显示的系统摘要信息的类型以及为任务显示的信息的类型、顺序和大小都是用户可配置的。
之前在实习时，听了 OOM 的分享之后，就对 Linux 内核内存管理充满兴趣，但是这块知识非常庞大，没有一定积累，不敢写下，担心误人子弟，所以经过一个一段时间的积累，对内核内存有一定了解之后，今天才写下这篇博客，记录以及分享。
docker对于现在的我们来说，已经是一个非常熟悉的东西了，docker无论是在部署打包，自动化，等方方面面都起着重要的作用，但是你是否有疑问，docker究竟是如何帮我们创建一个个隔离的环境的呢？今天我们就来看看，仔细说说docker
启动docker测试时,记得使用 --privileged=true 允许超级权限模式
Kmalloc分配的是连续的物理地址空间。如果需要连续的物理页，可以使用此函数，这是内核中内存分配的常用方式，也是大多数情况下应该使用的内存分配方式。
java TestLinuxDemo
缺点:限定了最大进程数目;降低调度效率，挑选一个适合运行的PCB须对表项扫描，平均要花费查半个PCB表长的时间;不适合频繁进程调度。
来源:高效运维 ID:greatops 前言 之前在实习时，听了 OOM 的分享之后，就对 Linux 内核内存管理充满兴趣，但是这块知识非常庞大，没有一定积累，不敢写下，担心误人子弟，所以经过一个一段时间的积累，对内核内存有一定了解之后，今天才写下这篇博客，记录以及分享。 【OOM - Out of Memory】内存溢出 内存溢出的解决办法： 1、等比例缩小图片 2、对图片采用软引用，及时进行 recycle( ) 操作。 3、使用加载图片框架处理图片，如专业处理图片的 ImageLoader 图片加
好文推荐 Linux shell编程常用方法总结 C++基础知识精髓 Linux下AutoMake创建工程流程 Qt5.7.1添加支持openssl zynq平台移植python3.10.5 作为一名Linux软件攻城狮，top命令大家应该并不陌生。top命令是Linux下常用的性能分析工具，能够实时显示系统中各个进程的资源占用状况。top可以动态显示过程,不断刷新当前状态。top命令提供了实时的对系统处理器的状态监视。它将显示系统中的任务列表，内存使用和执行时间对任务进行排序。 1、top命令的使用方式
理想情况下用户对内存的期待是大容量、高速度和持久性，但是现实中却是一个由缓存、主存、磁盘组成的内存架构，该架构中，缓存低容量、速度快但是成本高，主存中速度、中容量和中成本，磁盘就是大容量、持久性但是速度慢。
实时操作系统，当外界事件和数据产生时，系统能以足够快的速度予以处理，其处理结果能在规定的时间内控制生产结果或对系统做出响应，并控制所有实时任务协调一致运行的操作系统。
进程是一个非常重要的概念，我们都知道，操作系统合理地组织、调度计算机的工作与资源。而在引入线程前，进程是操作系统进行资源分配和调度的基本单位。所以，探究Linux进程以及与进程有关的检测与控制是非常有意义的。这次内容如下。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
