文档建议反馈控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Linux内核编程--内存映射和共享内存

文件的内存映射示意图： 对于用户进程和内核进程： 将用户进程的一段内存区域映射到内核进程，映射成功后，用户进程对这段内存区域的修改直接反映到内核空间，同样，内核进程对这段内存区域的修改也直接反映到用户空间...没有内存映射的I/O操作示意图： 磁盘->内核空间->用户空间 有内存映射的I/O操作示意图：少了一个copy操作 内存映射的优点： 减少了拷贝次数，节省I/O操作的开支 用户空间和内核空间可以直接高效交互...： 内存映射和共享内存的区别： 1.内存映射与文件关联，共享内存不需要与文件关联，把共享内存理解为内存上的一个匿名片段。...一般用信号量来同步共享内存的访问。 共享内存区在系统存储中的位置： 为什么要用共享内存： 对于涉及到内核操作的，内核和进程之间，经历了四次复制操作，开销很大。..., int shmflg) --shmid：共享内存区的标识id，shmget的返回值 --shmaddr：共享内存附加到本进程后在本进程地址空间的内存地址，若为NULL，由内核分配地址。

5.9K10

Linux内核高端内存

Linux内核地址映射模型 x86 CPU采用了段页式地址映射模型。进程代码中的地址为逻辑地址，经过段页式地址映射后，才真正访问物理内存。 段页式机制如下图。 ?...Linux内核地址空间划分 通常32位Linux内核地址空间划分0~3G为用户空间，3~4G为内核空间。注意这里是32位内核地址空间划分，64位内核地址空间划分是不同的。 ?...Linux内核高端内存的由来 当内核模块代码或线程访问内存时，代码中的内存地址都为逻辑地址，而对应到真正的物理内存地址，需要地址一对一的映射，如逻辑地址0xc0000003对应的物理地址为0x3，0xc0000004...Linux内核高端内存的理解 前面我们解释了高端内存的由来。...2、64位内核中有高端内存吗？ 目前现实中，64位Linux内核不存在高端内存，因为64位内核可以支持超过512GB内存。若机器安装的物理内存超过内核地址空间范围，就会存在高端内存。

4.4K31
您找到你想要的搜索结果了吗？
是的
没有找到

【Linux 内核 内存管理】内存管理系统调用 ⑤ ( 代码示例 | 多进程共享 mmap 内存映射示例 )

文章目录 一、进程一描述 二、进程二描述 三、mmap 进程共享内存展示 一、进程一描述 ---- 在上一篇博客 【Linux 内核 内存管理】内存管理系统调用 ④ ( 代码示例 | mmap 创建内存映射...在这段休眠的时间段 , 运行 进程二 , 在 进程二中 , 创建相同文件的 mmap " 文件映射 " , 读取在 进程一 中写入的文件内容 ; 二、进程二描述 ---- 进程二 的源码 , 与上一篇博客 【Linux...内核 内存管理】内存管理系统调用 ④ ( 代码示例 | mmap 创建内存映射 | munmap 删除内存映射 ) 中 进程一 源码类似 , 只是将写入 mmap 文件映射 数据 , 修改为 读取 该..., 该内存页的内容可以 读取 写入 // MAP_SHARED : 指定映射关系 , 指的是该映射是进程的共享内存空间 // fd : 文件描述符 , 被映射的文件 //...mmap_demo_02.c 文件中 , 执行 gcc mmap_demo_02.c -o mmap_demo_02 命令 , 编译该源码 , 编译出的可执行文件为 mmap_demo_02 ; 三、mmap 进程共享内存展示

3.5K30

【Linux 内核 内存管理】Linux 内核内存布局 ③ ( Linux 内核 动态分配内存 系统接口函数 | 统计输出 vmalloc 分配的内存 )

文章目录 一、Linux 内核 动态分配内存 系统接口函数 二、统计输出 vmalloc 分配的内存 一、Linux 内核 动态分配内存 系统接口函数 ---- Linux 内核 " 动态分配内存 "...是通过 " 系统接口 " 实现的 , 下面介绍几个重要的 接口函数 ; ① 以 " 页 " 为单位分配内存 : alloc_pages , __get_free_page ; ② 以 " 字节 " 为单位分配..." 虚拟地址连续的内存块 " : vmalloc ; ③ 以 " 字节 " 为单位分配 " 物理地址连续的内存块 " : kmalloc ; 注意 该 " 物理地址连续的内存块 " 是以 Slab 为中心的...; 二、统计输出 vmalloc 分配的内存 ---- 执行 grep vmalloc /proc/vmallocinfo 命令 , 可以统计输出 通过 vmalloc 函数分配的 " 虚拟地址连续的内存块

5.1K30

【Linux】system V 共享内存

可以，其他进程也可以通信 所以在任何时刻，可能有多个共享内存在被使用 系统中一定会存在很多共享内存同时存在 操作系统要不要整体管理所有的共享内存呢？要 操作性系统如何管理多个共享内存呢？...先描述，在组织 并不是在内存中开辟空间即可，系统为了管理共享内存，构建对应的描述共享内存的结构体对象 共享内存=共享内存的内核数据结构(伪代码:struct shm)+真正开辟的内存空间 2....创建共享内存 获取共享内存 创建共享内存，调用shmget函数，通过两个选项 若共享内存不存在则创建，若存在则报错 而获取共享内存，调用shmget函数，则返回已有的共享内存 ---- 此时运行可执行程序...将自己和共享内存关联起来 输入 man shmat 指令 at代表 关联 将共享内存和目标值关联起来 返回值为 共享内存的虚拟地址的起始地址 我们不知道应该把共享内存放在虚拟空间的什么地址处...删除共享内存 创建共享内存的进程已经早就退出了，但是共享内存还存在 确认共享内存存在： ipcs ipc作为进程间通信的简写 ipc表示资源 s表示有多个资源 显出来的为ipc通信系统所支持的三种

19920

Linux共享内存及函数

共享内存的概念 共享内存是指多个进程可以把一段内存共同的内存映射到自己的进程空间中，从而实现数据的共享和传输，它是存在与内核级别的一种资源，是所有进程间通信中方式最快的一种。...对于每一个共享内存段，内核会为其维护一个shmid_ds类型的结构体： // 摘自所用ubuntu18.04电脑中的/usr/include/i386-linux-gnu/bits/shm.h struct...key不为IPC_PRIVATE，且flag设置了IPC_CREAT位，而没有设置IPC_EXCL位时，如果key为内核中的已存在的共享内存键值，则打开，否则创建一个新的共享内存。...key不为IPC_PRIVATE，且flag设置了IPC_CREAT和IPC_EXCL位时，则只执行创建共享内存操作。如果key为内核中的已存在的共享内存键值，返回EEXIST错误。...参考： 《精通Linux C编程》- 程国钢 《Linux C编程完全解密》- 闫敬 吴淑坤

6K10

Linux进程间通信【共享内存】

前言 共享内存出自 System V 标准，是众多 IPC 解决方案中最快的一种，使用共享内存进行通信时，不需要借助函数进入内核传递数据，而是直接对同一块空间进行数据访问，至于共享内存是如何使用的、通信原理是怎么实现的...注意： 共享内存块的创建、进程间建立映射都是由 OS 实际执行的 ---- 2、共享内存的相关知识 在正式使用共享内存通信之前，需要先学习一下 共享内存的相关知识，因为这里的共享内存出自 System...结论： 共享内存 = 共享内存的内核数据结构（struct shmid_ds） + 真正开辟的空间 ---- 3、共享内存简单使用 当两个进程与同一块共享内存成功关联后，可以直接对该区域进行读写操作，...减少拷贝（IO）次数 得益于共享内存的这种特性，可以让进程通信的时候，减少拷贝次数，所以共享内存是所有进程通信中，速度最快的 4.3、共享内存的缺点 共享内存这么快，为什么不直接只使用共享内存呢？...》 ---- 总结 以上就是本次关于 Linux 进程间通信之 共享内存 的全部内容了，共享内存 是所有 IPC 中最快的一种，因为它省去了很多不必要的 IO 操作，进程直接对话进程，效率极高，不过在狂飙的后果就是不安全

26900

Linux 内核 VS 内存碎片 （下）

从 Linux 内核 VS 内存碎片 （上） 我们可以看到根据迁移类型进行分组只是延缓了内存碎片，而并不是从根本解决，所以随着时间的推移，当内存碎片过多，无法满足连续物理内存需求时，将会引起性能问题。...因此仅仅依靠此功能还不够，所以内核又引入了内存规整等功能。...内存规整 在内存规整引入之前，内核还使用过 lumpy reclaim 来进行反碎片化，但在我们当前最常用的 3.10 版本内核上已经不存在了，所以不做介绍，感兴趣的朋友请从文章开头整理的列表中自取，我们来看内存规整...对于 3.10 版本内核，内存规整的时机如下： 在分配高阶内存失败后 kswapd 线程平衡 zone； 直接内存回收来满足高阶内存需求，包括 THP 缺页异常处理路径； khugepaged 内核线程尝试...，但需要对内核相关子系统的工作原理要有一定理解，对客户的内核版本也有一定要求。

3.6K30

Linux进程通信之共享内存

Linux进程通信之共享存储 概念： 共享内存指 (shared memory)在多处理器的计算机系统中，可以被不同中央处理器（CPU）访问的大容量内存。...任何一个缓存的数据被更新后，由于其他处理器也可能要存取，共享内存就需要立即更新，否则不同的处理器可能用到不同的数据。...共享内存是 Unix下的多进程之间的通信方法 ,这种方法通常用于一个程序的多进程间通信，实际上多个程序间也可以通过共享内存来传递信息。...PHP中的封装： php中封装了shm开头的函数和shmop开头的函数，实际效果是一样的，具体使用方式请查看官方手册 ，下面我们以shm开头的为例演示 特点： 共享内存是将内存映射到其他进程的地址空间中...，所以说共享内存也是最快的IPC进程通信方式 前提： 在使用IPC进程通信时，也就是信号量、消息队列、共享存储时，首先要先确定自己的PHP扩展是否已经开启，使用php -m 查看 编写代码 父子进程

4.8K31

速通 Linux 共享内存原理

共享内存是一个非常有意思的话题，一方面共享内存避免了通讯过程中的内存复制问题，是 Linux IPC 通讯中效率最高的一种。...从使用方式上讲，Linux 提供了三种共享内存的方式，包括 Unix 味的 POSIX 和 SysV 接口，还提供了直接文件映射内存的 mmap。...本文尝试分别介绍 Linux 共享内存的基本原理，并做一个 “违背祖宗的决定”，如何在 Golang 中使用共享内存。...没关系，内核在初始化时，会自动 mount 一个不可见的 tmpfs，挂载为 shm_mnt，用来分配共享内存： static struct file_system_type shmem_fs_type...总结 从原理上讲 Linux 共享内存的主要方式只有两种，一是基于文件的 mmap，另一种就是 tmpfs，用一张图描述 Linux 几种实现共享内存的方式：

4K20

Linux 内核 VS 内存碎片 （上）

（外部）内存碎片是一个历史悠久的 Linux 内核编程问题，随着系统的运行，页面被分配给各种任务，随着时间的推移内存会逐步碎片化，最终正常运行时间较长的繁忙系统可能只有很少的物理页面是连续的。...由于 Linux 内核支持虚拟内存管理，物理内存碎片通常不是问题，因为在页表的帮助下，物理上分散的内存在虚拟地址空间仍然是连续的 （除非使用大页），但对于需要从内核线性映射区分配连续物理内存的需求来说就会变的非常困难...如果内核编程不再依赖线性地址空间的高阶物理内存分配，那么内存碎片问题就从根本上解决了，但对于 Linux kernel 这样庞大的工程来说，这样的修改显然是不可能的，所以从 Linux 2.x 版本至今...反碎片简史 在开始正题前，先为大家汇总了部分 Linux 内核开发史上为改善高阶内存分配而做出的所有努力。这里的每一篇文章都非常值得细细的读一读，期望这个表格能为对反碎片细节感兴趣的读者带来便利。...Linux 在经典算法的基础上做了一些个扩展： 分区的伙伴分配器； Per-CPU pageset； 根据迁移类型进行分组； 我们以前介绍过 Linux 内核使用 node, zone, page 来描述物理内存

3.4K40

详解Linux内核内存管理架构

内存管理子系统可能是linux内核中最为复杂的一个子系统，其支持的功能需求众多，如页面映射、页面分配、页面回收、页面交换、冷热页面、紧急页面、页面碎片管理、页面缓存、页面统计等，而且对性能也有很高的要求...linux的内存映射管理是通过页表来实现的，但是页表是放在内存中的，如果每次地址转换过程都需要访问一次内存，其效率是十分低下的。这里CPU通过TLB硬件单元来加速地址转换。...直接内存动态分配地址空间：因为访问效率等原因，内核对内存采用简单的线性映射，但是因为32位CPU的寻址能力（4G大小）和内核地址空间起始的设置（3G开始），会导致内核的地址空间资源不足，当内存大于1GB...高端内存动态分配地址空间：高端内存分配的内存是虚拟地址连续而物理地址不连续的内存，一般用于内核动态加载的模块和驱动，因为内核可能运行了很久，内存页面碎片情况严重，如果要申请大的连续地址的内存页会比较困难...内存管理软件架构 内核内存管理的核心工作就是内存的分配回收管理，其内部分为2个体系：页管理和对象管理。

3K42

【Linux 内核 内存管理】内存管理架构 ① ( 内存管理架构组成 | 用户空间 | 内核空间 | MMU 硬件 | Linux 内核架构层次 | Linux 系统调用接口 )

文章目录 一、内存管理架构组成 ( 用户空间 | 内核空间 | MMU 硬件 ) 二、Linux 内核架构层次 三、Linux 系统调用接口 一、内存管理架构组成 ( 用户空间 | 内核空间 | MMU..." ; ② 内核空间 : Linux 内核启动后 , 一直 驻留在内存 中 , 应用程序 不能 读写 内核空间数据 , 不能直接调用 内核源码 中的函数 ; 只能通过 " 系统调用 " 间接调用 内核函数...组成 ; 层次架构如下 : Linux 内核 需要 " 管理硬件 " , 如 : CPU 处理器 , 内存 , I/O 设备 , 网络设备 等 ; Linux 内核 还需要 向上层的 " 应用程序..." 或 " Library Routine " 提供 API 接口 , 如 : 系统调用 ; 三、Linux 系统调用接口 ---- " 系统调用 " 接口 , 可以调用 " " Linux 内核 "...中的如下功能 : ① 进程调度 : 内核 调用 CPU 处理器 实现 进程调度 ; ② 内存管理 : 内核 调用 物理内存 实现 内存管理 ; ③ IPC 跨进程通信 ④ VFS 虚拟文件系统

9.5K40

Linux驱动开发-内核共享工作队列

，一个工作简单理解就是对应于一个函数，可以通过内核调度函数来调用work_struct中func指针所指向的函数。...案例代码 3.1 共享工作队列-按键驱动 下面这份代码是在一个按键驱动代码，在按键中断服务函数里调度共享队列，最终在工作函数里完成按键值的检测打印。工作队列采用的是共享工作队列。...module_exit(tiny4412_interrupt_drv_exit); /*许可证*/ MODULE_LICENSE("GPL"); 3.2 自定义工作队列-按键驱动 工作队列除了可以使用内核共享队列以外...*中断IO口定义*/ #include /*内核定时器相关*/ #include /*等待队列相关*/ #include...内核分配给设备的主设备号和设备名字 /*动态分配cdev结构体,返个cdev结构;如果执行失败,将返回NULL。

2K50

Linux 进程间通信 : 共享内存（上）

前言 本文主要说明在Linux环境上如何使用共享内存。阅读本文可以帮你解决以下问题： 什么是共享内存和为什么要有共享内存？ 如何使用mmap进行共享内存？ 如何使用XSI共享内存？...此时可以在key的参数所在位置填：IPC_PRIVATE，这样内核会在保证不产生冲突的共享内存段id的情况下新建一段共享内存。...实际上，在内核底层实现上，两种内存共享都是使用的tmpfs方式实现的，所以它们实际上的内存使用都是一致的。...相关的参数包括： SHM_HUGETLB (since Linux 2.6) SHM_HUGE_2MB, SHM_HUGE_1GB (since Linux 3.8) 使用大页内存的好处是提高内核对内存管理的处理效率...接Linux进程间通信:共享内存 （下）

11.1K33

Linux进程间通信：共享内存 （下）

接Linux进程间通信:共享内存 （上） POSIX共享内存 POSIX共享内存实际上毫无新意，它本质上就是mmap对文件的共享方式映射，只不过映射的是tmpfs文件系统上的文件。 什么是tmpfs？...Linux提供一种“临时”文件系统叫做tmpfs，它可以将内存的一部分空间拿来当做文件系统使用，使内存空间可以当做目录文件来用。...现在绝大多数Linux系统都有一个叫做/dev/shm的tmpfs目录，就是这样一种存在。具体使用方法，大家可以参考我的另一篇文章《Linux内存中的Cache真的能被回收么？》。...Linux提供的POSIX共享内存，实际上就是在/dev/shm下创建一个文件，并将其mmap之后映射其内存地址即可。...那么从这个角度说，mmap匿名共享内存、XSI共享内存和POSIX共享内存在内核实现本质上其实都是tmpfs。

8K12
点击加载更多

扫码

添加站长 进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

更多标签

活动推荐

    运营活动

    活动名称
    广告关闭

    腾讯云开发者

    扫码关注腾讯云开发者

    扫码关注腾讯云开发者

    领取腾讯云代金券

    热门产品

    热门推荐

    更多推荐

    Copyright © 2013 - 2024 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

    深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 深公网安备号 44030502008569

    腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号 | 京公网安备号11010802020287

    领券