编者注：在分析完 Linux inode 基础概念 之后，让我们看下inode在内存中对应的文件系统抽象VFS，然后分析下关于 磁盘操作 中Page Cache的回写策略。...其目的是屏蔽下层具体文件系统操作的差异，为上层的操作提供一个统一接口，正是由于VFS的存在，Linux中允许多个不同的文件系统共存。...VFS中包含着向物理文件系统转换的一系列数据结构，如VFS超级块、VFS的Inode、各种操作函数的转换入口等。...Linux中VFS依靠四个主要的数据结构来描述其结构信息，分别为超级块、索引结点、目录项和文件对象，这些数据结构大都会与磁盘上的对应上。 超级块（Super Block）：超级块对象表示一个文件系统。...然后内核将读取的数据缓存到cache中，这样后续的读请求就可以命中cache了。page可以只缓存一个文件部分的内容，不需要把整个文件都缓存进来。
缓存机制：Linux引入了buffers和 cached机制，buffers与cached都是内存操作，用来保存系统曾经打开过的文件以及文件元数据，这样当操作系统需要读取某些文件时，首先在buffers...为了方便查找文件，linux引入目录项(dentry)描述目录与文件的关系树，Linux为每一个目录建立一个目录项，也为每个文件建立一个目录项。...在Linux系统中数据可分为两大类，数据和元数据，数据泛指普通文件中的实际数据，元数据是用来描述一个文件的特征的系统数据。...根据Linux虚拟内存管理机制，这种行为是正常的。要理解为什么缓存会变得如此之高，以及为什么这不是一个问题，就必须了解I/O在Linux上是如何工作的。...从Linux缓存机制来说，buffers和cached都是系统可用内存，通常情况下看到bufferes和cached占用内存多，这是一个正常现象，它不是一个问题，所以在看到物理内存快要耗尽时，不要惊慌，
继上一篇文章： http://yehe.isd.com/column/support-plan/article-edit/93709 四、file结构体 文件对...
页高速缓存(Page Cache)的用途是加速访问文件数据，给定inode索引节点和文件的页面的偏移量，快速的在内存中找到文件页的内容。这个Page Cache是存在于VFS和实际文件系统之间。...中块缓存关联，每个块缓存和磁盘的盘块进行关联。...块缓存中缓存的单个块大小是以磁盘扇区大小，默认是512个字节。无论应用程序读取多少个字节，在最终访问磁盘的时候，都必须以扇区大小(512个字节)读取；对应的块缓存中缓存块大小页是扇区的大小。...Page Cache(页缓存) Linux页高速缓存任何基于页的数据，所缓存的Page包括普通文件内容、块设备文件、内存映射文件的读写。页缓存中一个页帧的文件数据锁对应的磁盘块不必是连续的。...) 块缓存和页缓存是相对独立的两种缓存机制，通常也可以结合在一起共同描述页缓存中保存文件的数据，向上以页为单位于页缓存交互，向下以块缓存为单位和通用设备层进行交互。
文件系统的注册 这里的文件系统是指可能会被挂载到目录树中的各个实际文件系统，所谓实际文件系统，即是指VFS 中的实际操作最终要通过它们来完成而已，并不意味着它们一定要存在于某种特定的存储设备上。...比如在笔者的 Linux 机器下就注册有 "rootfs"、"proc"、"ext2"、"sockfs" 等十几种文件系统。...3.1 文件系统的数据结构 在 Linux 源代码中，每种实际的文件系统用以下的数据结构表示（include/linux/fs.h）： 1 struct file_system_type { 2...mount：这个函数非常重要，它VFS能够和底层文件系统交互的起始点，该函数是不能放在super_block结构中的，因为super_block是在get_sb执行之后才能建立的。...的关系太过密切，如果说 ext2/ext3 是 Linux 的本土文件系统，那么 rootfs 文件系统则是 VFS 存在的基础。
序本文主要研究一下linux的文件缓存文件缓存linux使用page cache来缓存最近读取的文件，也有目录结构(dcache: Directory Entry Cache)缓存及inode缓存，它们都使用了...要在不重新启动的情况下应用/etc/sysctl.conf文件中的更改，我们可以使用sysctl的-p开关sudo sysctl -pvm.vfs_cache_pressurevm.vfs_cache_pressure...如下设置则让内核倾向于回收page cachesudo sysctl -w vm.vfs_cache_pressure=50vm.swappiness用于控制使用swap分区的倾向性默认值为60，意味着内核会在...memlock unlimited查看ulimit -Ha | grep lockedmax locked memory (kbytes, -l) 2033684小结linux...可以通过vmstat、free、/proc/meminfo来查看可以通过vm.vfs_cache_pressure、vm.swappiness、vm.dirty_*来配置可以通过设置/proc/sys/
缓存为什么会有冷热？ 究其原因，是因为对于内存的访问，可能是CPU发起的，也可以是DMA设备发起的。 如果是CPU发起的，在CPU的硬件缓存中，就会保存相应的页内容。...如果这个页本来没有存在于硬件缓存中，那么它的到来，势必会将原本为其他的页缓存的内容挤出硬件缓存。...但是，如果对于内存的访问是由DMA设备发起的，那么该页不会被CPU访问，就不需要在CPU的硬件缓存中进行缓存，也不会对已经缓存在硬件缓存中的页内容造成伤害。...在Linux操作系统中，每个内存区域(Zone)都分配了hot cache和cold cache，hot cache用来缓存那些很可能被CPU的硬件缓存收纳了的页。...如果gfp_flags中指定的__GFP_COLD，则从冷缓存中分配一页，否则，从热缓存中分配。
Slab简介和进一步调查 Slab Allocation是Linux 2.2之后引入的一个内存管理机制，专门用于缓存内核的数据对象，可以理解为一个内核专用的对象池，可以提高系统性能并减少内存碎片。...: 66232 kB SReclaimable(Linux 2.6.19+)都是clean的缓存，随时可以释放。...vfs_cache_pressure越大，每次回收时，inode cache和dentry cache所占比例越大3。...图片取自The Linux Kernel's VFS Layer vm.min_free_kbytes 系统的"保留内存"的大小，"保留内存"用于低内存状态下的"atomic memory allocation...参考资料 man proc The Linux Kernel's VFS Layer The VFS in Linux Kernel V2.4 openSUSE: System Analysis and
最近挂载了N多的文件系统，大致了不同文件系统的相应特性及挂载方式，却还是对Linux的文件系统没有从源码方面去了解。不求甚解确实不好不好。...于是借鉴一些大牛的博客及自己的理解，总结了博客系列： 一、VFS是什么： VFS是Linux中的一个虚拟文件文件系统，也称为虚拟文件系统交换层（Virtual Filesystem Switch），是一种软件机制...等）； （2）通过系统调用到VFS到实际文件系统的操作。...二、文件系统种类： （1）基于磁盘的文件系统； （2）网络文件系统（NFS）； （3）伪文件系统（sysfs、proc）； VFS 目录树结构： ?...Reference： https://www.ibm.com/developerworks/cn/linux/l-vfs/ 在链接中，文章选用的是Linux2.4.20，我选择Linux3.4.2来分析源码
LoadModule expires_module modules/mod_expires.so #第二种缓存方式 注意：也可以把这个模块放到/etc/httpd/conf/httpd.conf...文件里，模块只能在一个文件中加载 设置缓存规则 vim /var/www/html/.htaccess 末尾添加 第一种缓存方式 FileEtag INode Mtime Size 第二种缓存方式...# 缓存有效时间 1 月 <FilesMatch “\....On #css文件缓存2592000/3600/24=1月 ExpiresByType text/css A2592000 #js文件缓存2592000/3600/24=1月 ExpiresByType...，但设置压缩和缓存之后，网站的访问速度会有所提高
1.3 VFS 虚拟文件系统 VFS 的思想就是在 Linux 上抽象一个通用的文件系统模型，对我们开发人员或者是用户提供一组通用的接口，让我们不用 care 具体文件系统的实现。...VFS 提供的核心数据结构有四个，它们定义在内核源代码的 include/linux/fs.h 和 include/linux/dcache.h 中。...它的中文译名叫页高速缓存。它是 Linux 内核使用的主要磁盘高速缓存，是一个纯内存的工作组件。Linux 内核使用搜索树来高效管理大量的页面。...因为每一个分区都可以单独进行格式化，所以一台 Linux 机器下可以同时使用多个不同的文件系统。 文件系统里提供对 VFS 的具体实现。除了数据结构，每个文件系统还会定义自己的实际操作函数。...其实也不一定，为什么，因为现在的磁盘本身就会带一块缓存。另外现在的服务器都会组建磁盘阵列，在磁盘阵列里的核心硬件Raid卡里也会集成RAM作为缓存。
cloud.tencent.com/developer/article/1053852 三、dentry结构体 目录项：目录项是描述文件的逻辑属性，只存在于内存中，并没有实际对应的磁盘上的描述，更确切的说是存在于内存的目录项缓存...例如：open一个文件/home/xxx/yyy.txt，那么/、home、xxx、yyy.txt都是一个目录项，VFS在查找的时候，根据一层一层的目录项找到对应的每个目录项的inode，那么沿着目录项进行操作就可以找到最终的文件.../ 29 struct list_head d_alias; /* inode alias list */ 30 }; 解释一些字段： d_count：引用计数 d_flags：目录项缓存标识...d_op：目录项操作 d_sb：这个目录项所属的文件系统的超级块 d_vfs_flags：一些标志 d_fsdata：文件系统私有数据 d_iname：存放短的文件名 一些解释：一个有效的dentry结构必定有一个
但通过这个IO栈我们发现，我们对Linux文件的IO的理解还是远远不够，还有好几个内核组件：IO引擎、VFS、PageCache、通用块管理层、IO调度层等模块我们并没有了解太多。...当然了IO引擎也需要VFS、通用块层等更底层的支持才能实现。在sync引擎的read函数里会进入VFS提供的read系统调用。 2. VFS虚拟文件系统 在内核层，第一个看到的是VFS。...VFS提供的核心数据结构有四个，它们定义在内核源代码的include/linux/fs.h和include/linux/dcache.h中。...它的中文译名叫页高速缓存，是Linux内核使用的主要磁盘高速缓存，是一个纯内存的工作组件，其作用就是来给访问相对比较慢的磁盘来进行访问加速。...其实也不一定，为什么，因为现在的磁盘本身就会带一块缓存。另外现在的服务器都会组建磁盘阵列，在磁盘阵列里的核心硬件Raid卡里也会集成RAM作为缓存。
Header append Vary User-Agent 压缩率一般都大于70% 压缩率检测（http://tool.chinaz.com/Gzips/）只能在pc端检测 设置缓存...LoadModule expires_module modules/mod_expires.so #第二种缓存方式 注意：也可以把这个模块放到/etc/httpd/conf/httpd.conf文件里...，模块只能在一个文件中加载 设置缓存规则 vim /var/www/html/.htaccess 末尾添加 第一种缓存方式 FileEtag INode Mtime Size 第二种缓存方式 # 缓存有效时间...文件缓存2592000/3600/24=1月 ExpiresByType text/css A2592000 #js文件缓存2592000/3600/24=1月 ExpiresByType application...，但设置压缩和缓存之后，网站的访问速度会有所提高
00:00: 29 kswapd0 所以在这种情况下，与许多情况一样，swap使用不会降低Linux服务器的性能。现在，让我们看看交换空间实际上如何改善Linux服务器性能。...Linux 内核会将几乎从未使用过的内存页面移动到交换空间中，以确保在内存中为更频繁使用的内存页面提供更多可缓存空间（一个页面就是一块内存）。...考虑按照以下指南调整服务器的缓存压力和swap vm.swappiness。 vfs_cache_pressure – 控制内核回收内存的频率，用于缓存目录和inode对象。...例如，如果你在升级前内存不足，你可以尝试以下操作： vm.swappiness=10 vm.vfs_cache_pressure=200 这将增加缓存压力，这似乎有些适得其反，因为缓存对性能有好处。...在具有大量可用内存的服务器上，使用以下命令： vm.swappiness=10 vm.vfs_cache_pressure=50 这将降低缓存压力。
article/1053842 二、inode结构体：（转自http://blog.csdn.net/shanshanpt/article/details/38943731） inode结构体在（include/linux...( 注意数据分成：元数据+数据本身 ) 同时注意：inode有两种，一种是VFS的inode，一种是具体文件系统的inode。前者在内存中，后者在磁盘中。...其实在Linux内部的时候，访问文件都是通过inode号来进行的，所谓文件名仅仅是给用户容易使用的。...文件操作 i_sb：inode所属文件系统的超级块指针 i_wait：指向索引节点等待队列指针 i_flock：文件锁链表 注意下面：address_space不是代表某个地址空间，而是用于描述页高速缓存中的页面的...一个文件对应一个address_space，一个address_space和一个偏移量可以确定一个页高速缓存中的页面。
不过， 为了支持各种不同的文件系统，Linux 内核在用户进程和文件系统的中间，又引入了一个抽象层，也就是虚拟文件系统 VFS(Virtual File System)。...这里，下图是 Linux 文件系统的架构图，帮我们更好地理解系统调用、VFS、缓存、文 件系统以及块存储之间的关系。...通过这张图，可以看到，在 VFS 的下方，Linux 支持各种各样的文件系统，如 Ext4、 XFS、NFS 等等。按照存储位置的不同，这些文件系统可以分为三类。...这下我们也应该可以理解，“Linux 一切皆文件”的深刻含义。无论是普通文件和块设备、还是网络套接字和管道等，它们都通过统一的 VFS 接口来访问。...为了支持各类不同的文件系统，Linux 在各种文件系统实现上，抽象了一层虚拟文件系统(VFS)。 VFS 定义了一组所有文件系统都支持的数据结构和标准接口。
不过， 为了支持各种不同的文件系统，Linux 内核在用户进程和文件系统的中间，又引入了一个抽象层，也就是虚拟文件系统 VFS(Virtual File System)。...这里，下图是 Linux 文件系统的架构图，帮我们更好地理解系统调用、VFS、缓存、文 件系统以及块存储之间的关系。...这下我们也应该可以理解，“Linux 一切皆文件”的深刻含义。无论是普通文件和块设备、还是网络套接字和管道等，它们都通过统一的 VFS 接口来访问。...，inode_cache 行，表示 VFS 索引节点缓存，其 余的则是各种文件系统的索引节点缓存。...为了支持各类不同的文件系统，Linux 在各种文件系统实现上，抽象了一层虚拟文件系统(VFS)。 VFS 定义了一组所有文件系统都支持的数据结构和标准接口。
前言 为什么 Linux 内核的文件系统类型那么多，都能挂载上呢？为什么系统里可以直接 mount 其他文件系统呢？...甚至能把 windows 下的文件夹挂载到 windows 上，为什么 Linux 的虚拟文件系统这么强大？这得益于它的数据结构设计得十分精妙。好像听过，Linux 有什么解决不了的？加一层。...VFS 是什么 虚拟文件系统，简称 VFS（Virtual Filesystem），是一个内核软件层。...因此，Linux 有一句经典的话：一切皆文件。 关键数据结构介绍 Linux VFS 抽象出 4 种类型的数据结构，实现将不同类型的文件系统挂载到目录结构中。...struct list_head f_tfile_llink; #endif /* #ifdef CONFIG_EPOLL */ struct address_space *f_mapping; //页缓存映射
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
