Python进程间通信之共享内存

前一篇博客说了怎样通过命名管道实现进程间通信,但是要在windows是使用命名管道,需要使用python调研windows api,太麻烦,于是想到是不是可以通过共享内存的方式来实现。查了一下,Python中可以使用mmap模块来实现这一功能。

Python中的mmap模块是通过映射同一个普通文件实现共享内存的。文件被映射到进程地址空间后,进程可以像访问内存一样对文件进行访问。

不过,mmap在linux和windows上的API有些许的不一样,具体细节可以查看mmap的文档。

下面看一个例子:

server.py

这个程序使用 test.dat 文件来映射内存,并且分配了1024字节的大小,每隔一秒更新一下内存信息。

import mmap
import contextlib
import time

with open("test.dat", "w") as f:
    f.write('\x00' * 1024)

with open('test.dat', 'r+') as f:
    with contextlib.closing(mmap.mmap(f.fileno(), 1024, access=mmap.ACCESS_WRITE)) as m:
        for i in range(1, 10001):
            m.seek(0)
            s = "msg " + str(i)
            s.rjust(1024, '\x00')
            m.write(s)
            m.flush()
            time.sleep(1)

client.py

这个程序从上面映射的文件 test.dat 中加载数据到内存中。

import mmap
import contextlib
import time

while True:
    with open('test.dat', 'r') as f:
        with contextlib.closing(mmap.mmap(f.fileno(), 1024, access=mmap.ACCESS_READ)) as m:
            s = m.read(1024).replace('\x00', '')
            print s
    time.sleep(1)

上面的代码可以在linux和windows上运行,因为我们明确指定了使用 test.dat 文件来映射内存。如果我们只需要在windows上实现共享内存,可以不用指定使用的文件,而是通过指定一个tagname来标识,所以可以简化上面的代码。如下:

server.py

import mmap
import contextlib
import time

with contextlib.closing(mmap.mmap(-1, 1024, tagname='test', access=mmap.ACCESS_WRITE)) as m:
    for i in range(1, 10001):
        m.seek(0)
        m.write("msg " + str(i))
        m.flush()
        time.sleep(1)

client.py

import mmap
import contextlib
import time

while True:
    with contextlib.closing(mmap.mmap(-1, 1024, tagname='test', access=mmap.ACCESS_READ)) as m:
        s = m.read(1024).replace('\x00', '')
        print s
    time.sleep(1)

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • Python制作Windows系统服务Python制作Windows系统服务

    kongxx
  • HBase客户端API-表操作

    kongxx
  • Python Socket编程Python Socket编程

    kongxx
  • Services Marketing

    Reliability Ability to perform the promised service dependably and accurately

    lilugirl
  • CDN静态加速Github Pages

    今天,是时候做些改变了 -> 使用CDN静态加速全站,虽然之前已经静态加速图片了,但是解决不了国内某些区域访问不了或者慢的问题。

    用户1093396
  • 给爬虫爱好者的福利 SelectGadget

    相信爬虫的爱好者们都经历过这样一个爬虫前期的准备过程,那就是用浏览器的审查元素进行爬取目标的定位。每次我们都要浪费部分时间去寻找定位点和xpath,这样既不很方...

    Python数据科学
  • 如何避免TCP的TIME_WAIT状态(高并发)

    如何减少 tcp time_wait 状态 方法1 :线程池 线程池作用socket连接不关闭 自然减少time_wait状态 方法2: 通过sets...

    程序员小王
  • Linux 环境写文件如何稳定跑满磁盘 I/O 带宽?

    在 限制内存 的情况下,假定我们每次写入 4k 的数据,如何保证 kill -9 不丢数据的情况下,仍然稳定的跑满磁盘的 IO?因为需要保证 kill -9 不...

    kirito-moe
  • 卡特兰数总结

    中间部分,小部分内容摘自百度百科 结尾部分,小部分内容摘自http://blog.sina.com.cn/u/1885661061 卡特兰数是组合数学中一个...

    ShenduCC
  • 哈佛大学报告:人工智能与国家安全(四)AI变革潜力之信息优势

    应美国情报高级研究计划局(IARPA)的要求,哈佛大学肯尼迪政治学院贝尔弗科学与国际事务中心与2017年7月发布《人工智能与国家安全》报告,分析人工智能(AI)...

    企鹅号小编

扫码关注云+社区

领取腾讯云代金券