首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

速通 Linux 共享内存原理

共享内存是一个非常有意思的话题,一方面共享内存避免了通讯过程中的内存复制问题,是 Linux IPC 通讯中效率最高的一种。...另一方面,因为可以直接对内存甚至其他进程的内存进行修改,利用共享内存可以实现一些常规操作无法做到的奇技淫巧。...本文尝试分别介绍 Linux 共享内存的基本原理,并做一个 “违背祖宗的决定”,如何在 Golang 中使用共享内存。...mmap 的实现也并不复杂,众所周知 Linux 通过虚拟内存做了内存的虚拟化,进程看到的并不是实际的内存地址,要通过页表等中间层的翻译才能对物理地址进行访问,通过 VMA(vm_area_struct...总结 从原理上讲 Linux 共享内存的主要方式只有两种,一是基于文件的 mmap,另一种就是 tmpfs,用一张图描述 Linux 几种实现共享内存的方式:

4.1K20

一文搞定 | Linux 共享内存原理

但有时候为了让不同进程之间进行通信,需要让不同进程共享相同的物理内存,Linux通过 共享内存 来实现这个功能。下面先来介绍一下Linux系统的共享内存的使用。 共享内存使用 1....共享内存实现原理 我们先通过一幅图来了解一下共享内存的大概原理,如下图: 通过上图可知,共享内存是通过将不同进程的虚拟内存地址映射到相同的物理内存地址来实现的,下面将会介绍Linux的实现方式。...在Linux内核中,每个共享内存都由一个名为 struct shmid_kernel 的结构体来管理,而且Linux限制了系统最大能创建的共享内存为128个。...shmget() 函数实现 通过前面的例子可知,要使用共享内存,首先需要调用 shmget() 函数来创建或者获取一块共享内存。...shmat() 函数实现 shmat() 函数用于将共享内存映射到本地虚拟内存地址,由于 shmat() 函数的实现比较复杂,所以我们分段来分析这个函数: asmlinkage long sys_shmat

1.1K40
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    一文读懂 | Linux共享内存原理

    但有时候为了让不同进程之间进行通信,需要让不同进程共享相同的物理内存,Linux通过 共享内存 来实现这个功能。下面先来介绍一下Linux系统的共享内存的使用。 共享内存使用 1....共享内存实现原理 我们先通过一幅图来了解一下共享内存的大概原理,如下图: 通过上图可知,共享内存是通过将不同进程的虚拟内存地址映射到相同的物理内存地址来实现的,下面将会介绍Linux的实现方式。...在Linux内核中,每个共享内存都由一个名为 struct shmid_kernel 的结构体来管理,而且Linux限制了系统最大能创建的共享内存为128个。...shmget() 函数实现 通过前面的例子可知,要使用共享内存,首先需要调用 shmget() 函数来创建或者获取一块共享内存。...shmat() 函数实现 shmat() 函数用于将共享内存映射到本地虚拟内存地址,由于 shmat() 函数的实现比较复杂,所以我们分段来分析这个函数: asmlinkage long sys_shmat

    98130

    一文搞定 | Linux共享内存原理

    但有时候为了让不同进程之间进行通信,需要让不同进程共享相同的物理内存,Linux通过 共享内存 来实现这个功能。下面先来介绍一下Linux系统的共享内存的使用。 共享内存使用 1....共享内存实现原理 我们先通过一幅图来了解一下共享内存的大概原理,如下图: 通过上图可知,共享内存是通过将不同进程的虚拟内存地址映射到相同的物理内存地址来实现的,下面将会介绍Linux的实现方式。...在Linux内核中,每个共享内存都由一个名为 struct shmid_kernel 的结构体来管理,而且Linux限制了系统最大能创建的共享内存为128个。...shmget() 函数实现 通过前面的例子可知,要使用共享内存,首先需要调用 shmget() 函数来创建或者获取一块共享内存。...shmat() 函数实现 shmat() 函数用于将共享内存映射到本地虚拟内存地址,由于 shmat() 函数的实现比较复杂,所以我们分段来分析这个函数: asmlinkage long sys_shmat

    4K40

    linux进程通信之共享内存原理(基于linux 1.2.13)

    1 有一个全局的结构体数据,每次需要一块共享的内存时(shmget),从里面取一个结构体,记录相关的信息。...struct shmid_ds { // 权限相关 struct ipc_perm shm_perm; /* operation perms */ // 共享内存的大小 int shm_segsz...page_table) return -ENOMEM; pte_val(*page_table) = shm_sgn; } 3 进程访问共享内存范围中的地址时,触发缺页中断。...同理,其他进程共享该块内存的时候,如果访问范围内的地址,处理过程是类似的。进程访问某一个地址,发生缺页中断,然后进入do_swap_page函数处理,再到shm_swap_in。...发现这时候共享内存已经映射了物理地址。最后改写自己的页表项。因为各个进程都对应同一块内存,所以操作的时候会互相感知,实现通信。 ?

    2K20

    nginx共享内存:共享内存的实现

    nginx中, 作者为我们提供了方便共享内存的使用的接口,关于共享内存的使用在我之前的文章中有介绍。这次我们来研究一下nginx是如何实现的。...*tag; }; 我们再看看ngx_shared_memory_add这个函数的实现,该函数先检查要添加的共享内存是否已存在,如果已存在,则直接返回,否则,创建一个新的。...两个相同名字的共享内存大小要一样。 2. 两个相同名字的共享内存tag要一样。 3. 如果当前共享内存已经存在,则不需要再次添加。会返回同一个共享内存 4....接下来,在我们的init函数里面,将共享内存强制转换成slab,以后,我们对共享内存的分配与释放,就可以通过这个slab来实现了(可以参考我前一篇文章中共享内存的使用相关的分析)。...另外,共享内存的实际创建是通过ngx_shm_alloc来实现的,nginx里面包含了共享内存的实现的多种方式,linux中默认使用mmap来实现,实现代码比较简单,看看: ngx_int_t ngx_shm_alloc

    4.6K30

    初识Linux · 共享内存

    在Linux源码里面是有共享内存对应的结构体的,这里因为不介绍,所以不放出对应的源码了,肯定就有人说了,怎么又又又是结构体?...因为Linux就是C语言写的呀,并且,C语言想要对某个对象管理,结构体不是最好的选择吗? 所以我们得出一个结论,共享内存 = 共享内存的数据 + 共享内存的属性!!...所以获取共享内存标识符的方法是不能让进程生成的,肯定是要让用户自己形成的,所以需要介绍到一个函数为ftok: 我们需要给一串路径,一个id,那么在ftok内部,就可以通过某种算法,实现key的生成。...当然是shmid了,对于key不过是共享内存的一个标识符,告诉OS可以通过key来找到对应的共享内存,对于shmid,是可以实现用户级别进行管理的一个值,所以我们作为用户,肯定是通过shmid进行管理的...具体实现交给大家了~ 感谢阅读!

    8610

    MemoryFile 共享内存原理分析

    Android 上层提供了一些内存共享工具类,比如 MemoryFile。你使用过吗?知道它的实现原理吗?...MemoryFile 使用方法大致如下: 「进程 A 中申请一块共享内存写入数据,并准备好文件描述符:」 MemoryFile memoryFile = new MemoryFile(name, size...ex) {         ex.rethrowAsIOException();     } } 可以看到构造 MemoryFile 时通过 SharedMemory create 方法申请了一块匿名共享内存...int ashmem_create_region(const char *name, size_t size){     int ret, save_errno;    //创建匿名共享内存 int fd...进行了一层包装,但实际还是通过 Linux 来执行的,最后调用到 Linux 中的 native mmap 方法,native 中对应的实现是 mmap.cpp: void* mmap(void* addr

    1.2K40

    共享内存+互斥量实现 Linux 进程间通信

    一、共享内存简介     共享内存是进程间通信中高效方便的方式之一。...共享内存允许两个或更多进程访问同一块内存,就如同 malloc() 函数向不同进程返回了指向同一个物理内存区域的指针,两个进程可以对一块共享内存进行读写。    ...互斥量用于线程的互斥,信号量用于线程的同步,这是互斥量与信号量的本质区别,其次信号量实现互斥量的功能。    ...本文结合个人实际项目需求,采用互斥量实现进程间访问共享内存的互斥,即同一时刻只能允许一个进程对共享内存进行写操作,当然也可以用信号量来完成进程间的互斥,这里就不再赘述。...四、 示例源码     鄙人以实际项目开发过程中实现进程间通信的源码,为大家展示如何利用上面总结的系统调用接口 来实现进程间的通信。 1.  定义存储成员变量的类,共享内存将用于存放该类的成员数据。

    2.3K30

    【Linux】system V 共享内存

    共享内存原理 第一阶段原理 进程A和进程B都通过自己的页表映射到物理内存中的特定区域,进而找到该进程匹配的代码和数据 为了让进程A和进程B通信,前提是两者要看到同一份资源 假设在物理内存上开辟一块空间...就完成了让进程A和进程B看到同一份资源,这份资源就被称为共享内存 第二阶段原理 系统中可以用ssh进行通信 ,是不是只能有一对进程使用共享内存呢?...先描述,在组织 并不是在内存中开辟空间即可,系统为了管理共享内存,构建对应的描述共享内存的结构体对象 共享内存=共享内存的内核数据结构(伪代码:struct shm)+真正开辟的内存空间 2....直接写代码--编写代码进行原理介绍 ---- 打开vscode,创建文件client.cc和server.cc(后缀为cc说明是c++)的文件 创建公共路径 comm.hpp shmget函数 创建共享路径接口...创建共享内存 获取共享内存 创建共享内存,调用shmget函数,通过两个选项 若共享内存不存在则创建,若存在则报错 而获取共享内存,调用shmget函数,则返回已有的共享内存 ---- 此时运行可执行程序

    25320

    Linux进程通信--共享内存

    本地通信方案:system V IPC: 共享内存 消息队列 信号量 共享内存基本原理 每一个进程有自己的地址空间,经过页表转化,找到物理内存,由于进程具有独立性,每个进程有自己的代码和数据,内核数据结构独立...如何实现共享内存呢? 假设目前有两个进程,进程A和进程B。...首先由操作系统在物理内存中开辟一段内存空间,共享内存虽然是操作系统创建的,但是这些进程中的某一个需要来创建这个共享内存,这个共享内存属于操作系统的。...由此,操作系统就要对共享内存进程管理(先描述,再组织),共享内存不是简单的一段内存空间,也要有描述并管理共享内存的数据结构和匹配算法。简单来说,对共享内存的管理,就变成了对链表的增删查改。...总结一下: 共享内存=内存空间(数据)+共享内存的属性 共享内存的操作 创建共享内存函数接口 创建共享内存函数接口为:shmget #include #include <sys

    11610

    【Linux】详解如何利用共享内存实现进程间通信

    在操作系统中,共享内存通常是通过映射一段能被其他进程所访问的内存实现的。一个进程可以创建一个共享内存段,并将该段连接到其地址空间中。其他进程也可以将这段共享内存连接到它们的地址空间中。...这样,所有进程都可以访问同一段内存,实现数据的共享。 在内核中共享内存可以存在很多个,操作系统必须先创建描述共享内存的结构体,再把这些结构体组织起来管理。...五、代码实现共享内存通信 5.1、获取key值 其实获取key可以封装成函数也可以不封装,这里我是将其封装成函数了。...共享内存是为了实现两方或是多方通信的,这里我就设置成为两方通信。...七、说明 因为实现共享内存的文件数较多,所以以上并不是全部代码,如果想获取全部实现代码,请移步到本人码云:C++代码: C++代码保存的地方 - Gitee.com

    1.9K10

    Linux内核编程--内存映射和共享内存

    一,内存映射 对于磁盘文件和进程: 将一个文件或其它对象映射到进程地址空间,实现文件在磁盘的存储地址和进程地址空间中一段虚拟地址的映射关系。...进程可以直接操作磁盘文件,用内存读写代替 I/O读写 应用场景: 1.进程间通信 使用内存映射实现进程间通信的两个场景: 场景1.有亲缘关系的进程间通信(父子进程) step1: 父进程创建内存映射区...step2: 进程a通过磁盘文件创建内存映射区 step3: 进程b通过磁盘文件创建内存映射区 step4: 进程a和进程b共同修改内存映射区实现进程通信 *基于内存映射区的进程间通信,是非阻塞的。...: 内存映射和共享内存的区别: 1.内存映射与文件关联,共享内存不需要与文件关联,把共享内存理解为内存上的一个匿名片段。...*buf) --shmid:共享内存标识符 --cmd:共享内存控制指令 IPC_STAT:得到共享内存的状态 IPC_SET:改变共享内存的状态 IPC_RMID:删除该共享内存 --shmid_ds

    6.2K10

    【Linux修炼】16.共享内存

    共享内存 一.共享内存的原理 二.共享内存你的概念 2.1 接口认识 2.2演示生成key的唯一性 2.3 再谈key 三.共享资源的查看 3.1 如何查看IPC资源 3.2 IPC资源的特征 3.3...----以共享内存的方式 一.共享内存的原理 在之前学过的进程地址空间的基础上,我们知道,进程之间具有独立性,因为每个进程的内核数据结构的数据以及页表的映射都是独立的。...而对于共享内存,我们同样了解,这是为了让进程之间能够进行通信的公共空间,接下来就通过进程地址空间的结构去了解共享空间的位置及原理: OS为了让两个毫不相关的进程之间进行通信,进行了三个工作: 在对应的内存当中让用户帮...---- 3.3 进程之间通过共享内存进行关联 上述我们已经实现了shm_server与共享内存的关联,如果想让两个进程之间进行通信,那就需要另一个shm_client也与同一个共享内存进行关联: 但对于这段代码...,不需要释放共享内存,因为在shm_server.cc中已经实现。

    4K00

    【Linux】进程间通信——共享内存

    共享内存(Shared Memory) 什么是共享内存 共享内存(Shared Memory)是一种 进程间通信(IPC) 机制,允许多个进程共享同一块物理内存,从而提高数据交换效率。...共享内存的特点 高效:数据直接在内存中共享,避免了进程间数据拷贝的开销。 进程可见:多个进程可以同时访问同一块共享内存,实现高速数据传输。...第二个参数表示标志位进行什么操作,下面是可以进行的操作,红框框起来的,表示删除共享内存,我们可以用这个宏来实现删除共享内存。...第三个参数是获取共享内存的信息,放在一个结构体当中,如果我们不需要获取直接传nullptr 接口讲完了,接下来用共享内存实现进程间通信 共享内存实现进程间通信 ShareMemory.hpp #...通过 shmget、shmat、shmctl 等函数,Linux 系统为我们提供了灵活的共享内存操作接口。

    9110

    Linux进程通信之共享内存

    Linux进程通信之共享存储 概念: 共享内存指 (shared memory)在多处理器的计算机系统中,可以被不同中央处理器(CPU)访问的大容量内存。...任何一个缓存的数据被更新后,由于其他处理器也可能要存取,共享内存就需要立即更新,否则不同的处理器可能用到不同的数据。...共享内存是 Unix下的多进程之间的通信方法 ,这种方法通常用于一个程序的多进程间通信,实际上多个程序间也可以通过共享内存来传递信息。...PHP中的封装: php中封装了shm开头的函数和shmop开头的函数,实际效果是一样的,具体使用方式请查看官方手册 ,下面我们以shm开头的为例演示 特点: 共享内存是将内存映射到其他进程的地址空间中...,至于非血缘关系的通信,则看我之前的文章,自己实现即可 当然,IPC进程间的通信数据也会保存在Linux系统中,可通过下面的方式,具体查看相关信息 并且如果想知道系统调用的哪些底层函数,则可以用

    4.8K31
    领券