Page cache和buffer cache一直以来是两个比较容易混淆的概念,在网上也有很多人在争辩和猜想这两个cache到底有什么区别,讨论到最后也一直没有一个统一和正确的结论,在我工作的这一段时间...,page cache和buffer cache的概念曾经困扰过我,但是仔细分析一下,这两个概念实际上非常的清晰。...当page cache的数据需要刷新时,page cache中的数据交给buffer cache,但是这种处理在2.6版本的内核之后就变的很简单了,没有真正意义上的cache操作。...简单说来,page cache用来缓存文件数据,buffer cache用来缓存磁盘数据。...从上面的分析可以看出,2.6内核中的buffer cache和page cache在处理上是保持一致的,但是存在概念上的差别,page cache针对文件的cache,buffer是针对磁盘块数据的cache
file ps -e -o pid,rss|sort -nk2 -r|head -10 |awk '{print $1}'>/tmp/cache.pids #find all the processs...' cache file #ps -e -o pid>/tmp/cache.pids if [ -f /tmp/cache.files ] then echo "the cache.files...|awk '{print $9}' >>/tmp/cache.files done</tmp/cache.pids if [ -f /tmp/cache.pcstat ] then echo..."the cache.pcstat is exist, removing now" rm -f /tmp/cache.pcstat fi for i in `cat /tmp/cache.files...cat /tmp/cache.pcstat` #rm -f /tmp/cache.
手工释放Linux Cache Memory 为了加速操作和减少磁盘I/O，内核通常会尽可能多地缓存内存，这部分内存就是Cache Memory(缓存内存)。...如果要增加此操作释放的对象数量，可以在写入/proc/sys/vm/drop_cache之前运行sync。这将最大限度地减少系统上脏对象的数量，并创建更多待删除的候选对象。...当系统其它地方需要内存时，Linux内核会自动回收这些对象。 使用该文件可能引发性能问题。...> /proc/sys/vm/drop_caches # free -m total used free shared buff/cache...> /proc/sys/vm/drop_caches # free -m total used free shared buff/cache
Page cache在linux读写文件时，它用于缓存文件的逻辑内容，从而加快对磁盘上映像和数据的访问。...系统将磁盘块首先读入buffer cache，如果cache空间不够时，会通过一定的策略将一些过时或多次未被访问的buffer cache清空。...Buffer cache是由物理内存分配，Linux系统为提高内存使用率，会将空闲内存全分给buffer cache ，当其他程序需要更多内存时，系统会减少cache大小。...假设我们通过文件系统操作文件，那么文件将被缓存到Page Cache。 若需要刷新文件，Page Cache将交给Buffer Cache去完成，因为Buffer Cache就是缓存磁盘块的。...当page cache的数据需要刷新时，page cache中的数据交给buffer cache，但是这种处理在2.6版本的内核之后就变的很简单了，没有真正意义上的cache操作。
Cache 磁盘缓存的大小 -buffers/cache (已用)的内存数:used - buffers - cached +buffers/cache(可用)的内存数:free + buffers...+ cached 可用的memory=free memory+buffers+cached 当在Linux下频繁存取文件后，物理内存会很快被用光，当程序结束后，内存不会被正常释放，而是一直作为caching...drop_caches 3 将/proc/sys/vm/drop_caches值设为3 ---- /proc/sys/vm/drop_caches用法 /proc/sys/vm/drop_caches (since Linux...但实际上，我们都知道这是因为Linux对内存的管理与Windows不同，free小并不是说内存不够用了，应该看的是free的第二行最后一个值：-/+ buffers/cache: 58 191，这才是系统可用的内存大小...我们看linux，只要不用swap的交换空间，就不用担心自己的内存太少。如果常常swap用很多,可能你就要考虑加物理内存了，这也是linux看内存是否够用的标准.
这类问题出现后，开发人员往往束手无策，究其原因在于他们对Page Cache的理解仅仅停留在概念上，并不清楚Page Cache如何和应用、系统关联起来，对它引发的问题自然会束手无策了。...认识Page Cache最简单的方式，就是用数据说话，通过具体的数据你会更加深入地理解Page Cache的本质。 为什么需要Page Cache，Page Cache的产生和回收是什么样的。...最好具备一些Linux编程的基础，比如，如何打开一个文件；如何读写一个文件；如何关闭一个文件等等。 什么是Page Cache？ Page Cache到底是属于内核还是属于用户？...怎么观察Page Cache 在Linux上直接查看Page Cache的方式： /proc/meminfo free /proc/vmstat 命令 内容其实是一致的。...直接使用Direct I/O绕过Page Cache，不使用Cache了，省的去管它了。 为什么需要Page Cache？
在Linux系统中，我们经常用free命令来查看系统内存的使用状态。...Linux好占内存！ 自以为很了解。这样的人一般评估过会说：嗯，根据我专业的眼光看的出来，内存才用了17G左右，还有很多剩余内存可用。...buffer和cache是两个在计算机技术中被用滥的名词，放在不通语境下会有不同的意义。在Linux的内存管理中，这里的buffer指Linux内存的：Buffer cache。...这里的cache指Linux内存中的：Page cache。翻译成中文可以叫做缓冲区缓存和页面缓存。...如何回收cache？ Linux内核会在内存将要耗尽的时候，触发内存回收的工作，以便释放出内存给急需内存的进程使用。一般情况下，这个操作中主要的内存释放都来自于对buffer／cache的释放。
2、什么是cache 为了提高磁盘存取效率，Linux做了一些精心的设计，除了对dentry进行缓存（用于VFS，加速文件路径名到inode的转换），还采取了两种主要Cache方式：Buffer Cache...和Page Cache。...Free中的buffer和cache：（它们都是占用内存）： buffer : 作为buffer cache的内存，是块设备的读写缓冲区 cache: 作为page cache的内存, 文件系统的cache...如果 cache 的值很大，说明cache住的文件数很多。...drop_caches To free pagecache, dentries and inodes: echo 3 > /proc/sys/vm/drop_caches 注意：在清空缓存前我们需要在linux
参考文档 https://lonesysadmin.net/2013/12/22/better-linux-disk-caching-performance-vm-dirty_ratio/ 有关Cache...Linux内核将写磁盘的操作分解成了，先写缓存，每隔一段时间再异步地将缓存写入磁盘。这提升了IO读写的速度，但存在一定风险。数据没有及时写入磁盘，所以存在数据丢失的风险。...同样，也存在cache被写爆的情况。还可能出现一次性往磁盘写入过多数据，以致使系统卡顿。之所以卡顿，是因为系统认为，缓存太大用异步的方式来不及把它们都写进磁盘，于是切换到同步的方式写入。...情景1：减少Cache 你可以针对要做的事情，来制定一个合适的值。...情景2：增加Cache 在一些场景中增加Cache是有好处的。例如，数据不重要丢了也没关系，而且有程序重复地读写一个文件。允许更多的cache，你可以更多地在内存上进行读写，提高速度。
本文主要参考若干kernel资料，对应的kernel源码版本主要包括：linux-0.11, linux-2.2.16, linux-2.4.0, linux-2.4.19, linux-2.6.18。...第二阶段：Page Cache、Buffer Cache两者并存 到Linux-2.2版本时，磁盘文件访问的高速缓冲仍然是缓冲区高速缓冲(Buffer Cache)。...在Linux-2.2版本中， Page Cache 此时用来干什么的？ (1)....第三阶段：Page Cache、Buffer Cache两者融合 介于上述Page Cache、Buffer Cache分离设计的弊端，Linux-2.4版本中对Page Cache、Buffer Cache...Linux内核的文件Cache管理机制介绍 [9]. Linux内核文件Cache机制 [10].
cacheline:64bytes Physically indexed and tagged cache（PIPT） -16路组相连的结构 因为有了多路组相连这个cache，所以也就有了一些术语概念...称之为一个set way：用白话来说，将cache分成了多个块（多路），每一块是一个way cache TAG ：查询到了一行cache后，cachelne由 TAG + DATA组成 cache Data...：查询到了一行cache后，cachelne由 TAG + DATA组成 cache Line 和 entry 是一个概念 6、cache的种类(VIVT,PIPT,VIPT) cache一般是有如下种类...比如把L1/L2看做是inner cache，把L3看做是outer cache。 通常，内部集成的cache属于inner cache，外部总线AMBA上的cache属于outer cache。...L3属于inner cache，如果SOC上挂了System cache（或其它名称）的话，则其属于outer cache 然后我们可以对每类cache进行单独是属性配置，例如： 配置 inner Non-cacheable
本文主要参考若干kernel资料，对应的kernel源码版本主要包括：linux-0.11, linux-2.2.16, linux-2.4.0, linux-2.4.19, linux-2.6.18。...第二阶段：Page Cache、Buffer Cache两者并存 到Linux-2.2版本时，磁盘文件访问的高速缓冲仍然是缓冲区高速缓冲(Buffer Cache)。...在Linux-2.2版本中，Page Cache此时用来干什么的？ (1)....第三阶段：Page Cache、Buffer Cache两者融合 介于上述Page Cache、Buffer Cache分离设计的弊端，Linux-2.4版本中对Page Cache、Buffer Cache...Linux内核的文件Cache管理机制介绍 [9]. Linux内核文件Cache机制 [10].
二、Linux权限的概念 2.1 什么是权限 现实生活中权限的例子，即vip，门禁…。其作用就是，通过一定的条件，拦住一部分人，给另一部分人权力，来访问某种资源。...2.3 Linux中的用户 Linux下有两种用户：超级管理员（root）、普通用户。 超级管理员(root)：可以再linux系统下做任何事情，不受权限约束 普通用户：在linux下做有限的事情。...Linux具有组的概念，主要是在多人协作的时候，更好的进行权限管理！...而在Linux中不通过后缀区分文件类型！但并不是说Linux不用后缀。 那通过什么区分呢？即ls -l第一个属性列。 Linux文件类型： -：普通文件。...这时就引入新的概念，粘滞位。当一个目录被设置为“粘滞位”(使用chmod +t filename指令)，则该目录下的文件只能由：1. 超级管理员(root)删除；2.
今日更新了Linux的进程内容 欢迎大家关注点赞收藏⭐️留言 冯诺依曼体系结构 输入设备：键盘、鼠标、话筒、磁盘、声卡... 输出设备：显示器、声卡、磁盘 .......操作系统 概念 任何计算机系统都包含一个基本的程序集合，称为操作系统(OS)。 操作系统是进行软硬件资源管理的软件。...基本概念 课本概念：程序的一个执行实例，正在执行的程序等 内核观点：担当分配系统资源（CPU时间，内存）的实体。...课本上称之为PCB（process control block），Linux操作系统下的PCB是: task_struct task_struct-PCB的一种 在Linux中描述进程的结构体叫做task_struct...task_struct是Linux内核的一种数据结构，它会被装载到RAM(内存)里并且包含着进程的信息。
线程的概念 首先我们得知道一件事：在Linux中，没有专门为线程设计的TCB，而是使用进程的PCB来模拟线程。...在教科书上面，对线程的概念是：在进程内部运行的一个执行流，属于进程的一部分，粒度要比进程更加细和轻量化。 我们可以对这句话进行解析：在进程内部运行，即线程在地址空间中运行。...了解了什么是线程后，我们来看看在Linux中进程和线程的关系。...看待Linux线程和接口： Linux进程是轻量级的进程，在进程中，OS创建线程，CPU调度线程。...进程和线程的共享和私有： 其实在Linux中没有线程这个东西，我的意思是没有真正独特设计出来的线程。因此在Linux中，所谓的线程，是轻量级的进程。
进程的概念 进程（Process）是计算机中的一个具有独立功能的程序关于某个数据集合的一次运行活动，是系统进行资源分配和调度的基本单位，是操作系统结构的基础。...它可以申请和拥有系统资源，是一个动态的概念，是一个活动的实体。它不只是程序的代码，还包括当前的活动，通过程序计数器的值和处理寄存器的内容来表示。...在Linux中描述进程的结构体叫做 task_struct。 task_struct 是Linux内核的一种数据结构，它会被装载到 RAM(内存) 里并且包含着进程的信息。...子进程崩了，父进程照样运行 (自行验证)~ 而这里的**父进程一般情况下其实就是 bash，也就是 Linux 的具体的一种 shell 外壳程序！...但是很奇怪，一个函数，居然返回了两个值~~ 这在语言层面是不能接收的，但是这其实涉及到了系统层面，关于多进程的概念，那么既然有了多个返回值，也就是说其实这是有两个进程在同时执行的，那么来尝试一下下面这个代码
Page Cache 1.1 Page Cache 是什么？ 为了理解 Page Cache，我们不妨先看一下 Linux 的文件 I/O 系统，如下图所示： Figure1....Linux 文件 I/O 系统 上图中，红色部分为 Page Cache。可见 Page Cache 的本质是由 Linux 内核管理的内存区域。...页是逻辑上的概念，因此 Page Cache 是与文件系统同级的；块是物理上的概念，因此 buffer cache 是与块设备驱动程序同级的。...页是逻辑上的概念，因此 Page Cache 是与文件系统同级的；块是物理上的概念，因此 buffer cache 是与块设备驱动程序同级的。...在 Linux 2.4 版本的内核之前，Page Cache 与 buffer cache 是完全分离的。
1、通过free命令看Linux内存 ? total：总内存大小。 used：已经使用的内存大小（这里面包含cached和buffers和shared部分）。 free：空闲的内存大小。...Cache主要是针对读操作设计的，不过Cache概念可能容易混淆，我理解为CPU本身就有Cache，包括一级缓存、二级缓存、三级缓存，我们知道CPU所有的指令操作对接的都是内存，而CPU的处理能力远高于内存速度...在Linux系统内部有一个守护进程会定期清空Buffer中的内容，将其写入硬盘内，当手动执行sync命令时也会触发上述操作。...3、常见症状 症状一：在Linux中频繁存取文件，物理内存很快用光，而cached一直在增长。...解释：Linux会对每次请求过的数据缓存在cache里，好处就是CPU的处理速度远远高于内存，所以在CPU和内存通讯的时候可以快速从cache中命中结果返回。 症状二：Swap被占用。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
云直播
