《Linux设备驱动》 -- 也就是我们所说的LDD3了； 适合一定基础的人阅读，深入学习Linux不可或缺的知识； 《UNIX环境高级编程》 这本书并不是面对linux内核的书，但是我是从最基础看这本书逐步入门的...； 《Linux内核完全剖析》 本书对早期Linux内核（v0.12）全部代码文件进行了详细、全面的注释和说明，旨在帮助读者用较短的时间对Linux的工作机理获得全面而深刻的理解，为进一步学习和研究Linux...虽然选择的版本较低，但该内核已能够正常编译运行，并且其中已包括了Linux工作原理的精髓。...《Linux那些事》 由复旦一群大神所写，团队为fudan_adc，主要写了我是xxx系列，本人比较喜欢对USB 部分的描述，不得不说大神就是大神。...《Linux设备驱动开发详解》 由华清远见出身的大神所写，宋宝华大神所写，华清远见出来的技术杠杠的。 《深入理解计算机操作系统》 当然啦，不得不说大学学过的操作系统啊！！！！
而linux就是受其影响。。。。 ? 第五版是2012年出的，也比较新。...本书称不上非常的通俗，但是在有一定的基础的情况下还是比较容易看懂的。本书是世面上极少见的讲述内部网关路由技术的经典书籍，内容极为丰富。...网络体系结构：linux内核中网络协议的设计与实现》 ?...Protocols in the Linux Kernel 书名: Linux网络体系结构 说明：翻译的很不好，建议看原版，可以下电子版。...一本在kernel实现网络功能的基础书籍，最好还是看英文版的，翻译的实在太烂了。有条件的还是看原版吧，没办法啊，中国的此类书籍基本上落后老美3-4年。结合linux源代码分析一书收获更多。
但是，当Linux物理内存超过1G时，线性访问机制就不够用了，因为只能有1G的内存可以被映射，剩余的物理内存无法被内核管理，所以，为了解决这一问题，Linux把内核地址分为线性区和非线性区两部分，线性区规定最大为...DMA Zone通常很小，只有几十M，低端内存区与高端内存区的划分来源于Linux内核空间大小的限制。...Linux内核高端内存的由来 2.1 为什么需要高端内存？ 高端内存是指物理地址大于 896M 的内存。对于这样的内存，无法在“内核直接映射空间”进行映射。...1G) 2.3 Linux内核高端内存的理解 前 面我们解释了高端内存的由来。...4 页框管理 4.1 页框管理 Linux采用4KB页框大小作为标准的内存分配单元。
移除交换空间 ---- 概念 内存管理是Linux系统重要的组成部分。...为了解决内存紧缺的问题，Linux引入了虚拟内存的概念。为了解决快速存取，引入了缓存机制、交换机制等。...当需要用到原始内容时，这些信息会被重新从交换空间读入物理内存。 Linux的内存管理采取的是分页存取机制。...要深入了解Linux内存运行机制，需要知道下面提到的几个方面。 首先，Linux系统会不时地进行页面交换操作，以保持尽可能多的空闲物理内存。...其次，Linux进行页面交换是有条件的，不是所有页面在不用时都交换到虚拟内存中，Linux内核根据“最近最经常使用”算法，仅仅将一些不经常使用的页面文件交换到虚拟内存中。
点击上方“小强的进阶之路”，选择“星标”公众号 优质文章，及时送达 预计阅读时间: 18分钟 写在前面 本文主要分析 Linux 系统内存统计的一些指标以及进程角度内存使用监控的一些方法。...所以下文直接就找一台 Intel x86_64 架构下安装了 64bit Linux 系统的服务器作为例进行相关的实验和结果分析。...Linux 的内存管理从物理内存管理到虚拟内存管理涉及的概念和统计项实在太多，本文从实用和系统运维的角度出发，只列举一些最实用的统计。...的内存页、SHM_LOCK的共享内存页（也统计在Mlocked中）、和Ramfs等 Mlocked — mlock() 系统调用锁定的内存大小 共享内存在 Linux 中细分的话可以分为以下几种： SystemV...共享内存、可执行程序的文件、动态库、mmap的文件等都统计在这里 Shmem — 共享内存的大小，包括Shared Memory、tmpfs和devtmpfs 注意 Linux 的内存是真正使用时才分配的
saved_auxv[AT_VECTOR_SIZE]； struct linux_binfmt *binfmt; cpumask_t cpu_vm_mask; mm_counter_t...unsigned int last_interval; unsigned long flags; struct core_state *core_state; } 分配的每个虚拟内存区域都由一个...vm_area_struct 数据结构来管理，包括虚拟内存的起始和结束地址，以及内存的访问权限等，通常命名为vma；vm_area_struct 数据结构的定义如下： ?...区域的链接列表，按地址排序*/ struct vm_area_struct *vm_next, *vm_prev; struct rb_node vm_rb; /* 此VMA左侧最大的可用内存间隙...）*/ void * vm_private_data; /* 是vm_pte（共享内存） */ #ifndef CONFIG_MMU struct vm_region *vm_region;
推荐两篇文章，讲Linux进程内存分布的。 1. 这篇比较简单，如果只是想大概了解下，可以只看这篇。 https://en.wikipedia.org/wiki/Data_segment ? 2....这篇相对复杂些，但写的是真好，推荐认真看看。 https://manybutfinite.com/post/anatomy-of-a-program-in-memory/ ? 完。
而当我们使用free命令查看Linux系统内存使用情况时，会 发现内存使用一直处于较高的水平，即使此时系统并没有运行多少软件。...这正是Windows和Linux在内存管理上的区别，乍一看，Linux系统吃掉我们的内存（Linux ate my ram），但其实这也正是其内存管理的特点。 ?...而Linux会充分利用这些空闲的内存，设计思想是内存空闲还不如拿来多缓存一些数据，等下次程序再次访问这些数据速度就快了，而如果程序要使用内存而系统中内存又不足时，这时不是使用交换分区，而是快速回收部分缓存...因此，可以看出，buffers/cached真是百益而无一害，真正的坏处可能让用户产生一种错觉——Linux耗内存！...其实不然，Linux并没有吃掉你的内存，只要还未使用到交换分区，你的内存所剩无几时，你应该感到庆幸，因为Linux缓存了大量的数据，也许下一次你就从中受益！
有趣的是，尽管进程和内存的关系如此紧密，但进程并不能直接访问内存。在Linux下，进程不能直接读写内存中地址为0x1位置的数据。...因此，Linux采用了分页（paging）的方式来记录对应关系。所谓的分页，就是以更大尺寸的单位页（page）来管理内存。在Linux中，通常每页大小为4KB。...Linux把物理内存和进程空间都分割成页。 内存分页，可以极大地减少所要记录的内存对应关系。我们已经看到，以字节为单位的对应记录实在太多。...因此，Linux中的分页表，采用了多层的数据结构。多层的分页表能够减少所需的空间。 我们来看一个简化的分页设计，用以说明Linux的多层分页表。...最新Linux系统中的分页表多达3层，管理的内存地址也比本章介绍的长很多。不过，多层分页表的基本原理都是相同。 综上，我们了解了内存以页为单位的管理方式。
CPU访问本地内存的速度比访问远程内存的速度要快 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大....因此linux内核需要用一种体系结构无关的方式来表示内存....因此linux内核把物理内存按照CPU节点划分为不同的node, 每个node作为某个cpu结点的本地内存, 而作为其他CPU节点的远程内存, 而UMA结构下, 则任务系统中只存在一个内存node, 这样对于...系统中的NUMA结点都是从0开始编号的 3.1 linux-2.4中的实现 pgdat_next指针域和pgdat_list内存结点链表 而对于NUMA结构的系统中, 在linux-2.4.x之前的内核中所有的节点...-3.x~4.x的实现 node_data内存节点数组 在新的linux3.x~linux4.x的内核中，内核移除了pg_data_t的pgdat_next之指针域, 同时也删除了pgdat_list链表
文章目录 一、Linux 内核 动态分配内存 系统接口函数 二、统计输出 vmalloc 分配的内存 一、Linux 内核 动态分配内存 系统接口函数 ---- Linux 内核 " 动态分配内存 "...是通过 " 系统接口 " 实现的 , 下面介绍几个重要的 接口函数 ; ① 以 " 页 " 为单位分配内存 : alloc_pages , __get_free_page ; ② 以 " 字节 " 为单位分配..." 虚拟地址连续的内存块 " : vmalloc ; ③ 以 " 字节 " 为单位分配 " 物理地址连续的内存块 " : kmalloc ; 注意 该 " 物理地址连续的内存块 " 是以 Slab 为中心的...; 二、统计输出 vmalloc 分配的内存 ---- 执行 grep vmalloc /proc/vmallocinfo 命令 , 可以统计输出 通过 vmalloc 函数分配的 " 虚拟地址连续的内存块
在测试NAS性能，用fstest长时间写，分析性能变差的原因，发现server主机内存使用率很高。...发现内存基本用完，究竟是什么进程占用？top命令发现排名第一的%MEM才零点几。 2.通过 vmstat -m命令查看内核空间的内存使用。...发现这两项值很高： xfs_ili xfs_inode 占用了大量的内存。...查资料说linux将用过的文件缓存到内存中。...不过以后在优化nfs-server端有一定的指导意义。卷越多，必然占用的内存越多。做机头的内存配置要高。
1 Linux如何描述物理内存 Linux把物理内存划分为三个层次来管理 层次 描述 存储节点(Node) CPU被划分为多个节点(node), 内存则被分簇, 每个CPU对应一个本地物理内存, 即一个...内存中的每个节点都是由pg_data_t描述,而pg_data_t由struct pglist_data定义而来, 该数据结构定义在include/linux/mmzone.h, line 615, 每个结点关联到系统中的一个处理器...简单来说, 页是一个数据块, 可以存放在任何页框(内存中)或者磁盘(被交换至交换分区)中 我们今天就来详细讲解一下linux下物理页帧的描述 2 页帧 内核把物理页作为内存管理的基本单位....，每一位代表一种状态，所以至少可以同时表示出32中不同的状态,这些状态定义在linux/page-flags.h中 virtual 对于如果物理内存可以直接映射内核的系统, 我们可以之间映射出虚拟地址与物理地址的管理...因此在后来linux-2.4.x的更新中, 删除了这个字段, 取而代之的是page->flags的最高ZONE_SHIFT位和NODE_SHIFT位, 存储了其所在zone和node在内存区域表zone_table
2 (N)UMA模型中linux内存的机构 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大. 因此linux内核需要用一种体系结构无关的方式来表示内存....Linux内核通过插入一些兼容层, 使得不同体系结构的差异很好的被隐藏起来, 内核对一致和非一致内存访问使用相同的数据结构 2.1 (N)UMA模型中linux内存的机构 非一致存储器访问(NUMA)模式下...而内存管理的其他地方则认为他们就是在处理一个(伪)NUMA系统. 2.2 Linux物理内存的组织形式 Linux把物理内存划分为三个层次来管理 层次 描述 存储节点(Node) CPU被划分为多个节点..., 我们会在后面典型架构(x86)上内存区域划分详细讲解x86_32上的内存区域划分 因此Linux内核对不同区域的内存需要采用不同的管理方式和映射方式, 为了解决这些制约条件，Linux使用了三种区:...2.6 高端内存 由于能够被Linux内核直接访问的ZONE_NORMAL区域的内存空间也是有限的，所以LINUX提出了高端内存（High memory）的概念，并且允许对高端内存的访问
在Linux内核，对于进程的内存使用与Cgroup的内存使用统计有一些相同和不同的地方。...进程的内存统计 一般来说，进程使用的内存主要有以下几种情况： （1）用户空间的匿名映射页（Anonymous pages in User Mode address spaces），比如调用malloc分配的内存...，以及使用MAP_ANONYMOUS的mmap；当系统内存不够时，内核可以将这部分内存交换出去； （2）用户空间的文件映射页（Mapped pages in User Mode address spaces...实际上，进程使用的共享内存，也是算到file_rss的，因为共享内存基于tmpfs。...小结 （1）进程rss与cgroup rss的区别 进程的RSS为进程使用的所有物理内存（file_rss＋anon_rss），即Anonymous pages＋Mapped apges（包含共享内存）
因此相对于任何一个CPU访问本地内存的速度比访问远程内存的速度要快, 而Linux为了兼容NUMAJ结构, 把物理内存相依照CPU的不同node分成簇, 一个CPU-node对应一个本地内存pgdata_t..., 我们会在后面典型架构(x86)上内存区域划分详细讲解x86_32上的内存区域划分 因此Linux内核对不同区域的内存需要采用不同的管理方式和映射方式, 因此内核将物理地址或者成用zone_t表示的不同地址区域...Linux使用enum zone_type来标记内核所支持的所有内存区域 3.1 内存区域类型zone_type zone_type结构定义在include/linux/mmzone.h, 其基本信息如下所示...位系统中, Linux内核虚拟地址空间只有1G, 而0~895M这个986MB被用于DMA和直接映射, 剩余的物理内存被成为高端内存....Linux必须处理如下两种硬件存在缺陷而引起的内存寻址问题： 一些硬件只能用某些特定的内存地址来执行DMA 一些体系结构其内存的物理寻址范围比虚拟寻址范围大的多。
本篇介绍 本篇介绍下Linux的内存管理，用系统角度看内存的寻址和分配机制。 内容介绍 内存管理应该是系统中最难的模块之一了，而且历史也悠久，就先来简单回顾下。...计算机刚出现的时候，并没有这些，刚开始是直接使用的物理地址，也就是代码中操作的地址是可以直接和物理地址对应上的，可是后来随着多进程调度的需求，以及有限的物理内存，于是人们就开始做规定，比如对于一块内存，...分页机制可以完全避免内存碎片问题么？ 公布下答案： 的确有分页机制就可以完全不需要分段机制，目前linux是在分段的基础上实现了分页，这个也有考虑到是兼容性问题。...分页机制只是将内存管理的粒度变小了，不过还是不能完全避免内存碎片问题，只是目前的内存碎片一定会小于页框大小，比起之前的方案已经改进很多了。...mmap流程如下： image.png 缺页异常 linux 是在不得不使用物理内存的时候才会分配物理内存。这句话该怎么理解呢？
Linux运行一段时间之后，内存会越来越多，导致内存不够用，需要释放一下内存才行 echo "1" > /proc/sys/vm/drop_caches 说明，释放前最好sync一下，防止丢数据。...因为LINUX的内核机制，一般情况下不需要特意去释放已经使用的cache。这些cache起来的内容可以增加文件以及的读写速度。...再用free -m 命令查看一下，剩余的内存 如果没有什么效果，可以使用 echo "2" > /proc/sys/vm/drop_caches 或者 echo "3" > /proc/sys/vm/drop_caches...请注意，使用3的时候，可能会导致程序异常，请小心使用。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
