问python多线程读取只读内存缓冲区绕过GIL

EN

简而言之，不是。

尽管Python (特别是CPython)是一种多线程语言，但解释器在任何时刻都只能运行一段python代码。因此，如果您的纯python程序不包含阻塞I/O (例如，访问无锁内存缓冲区)，那么无论您做什么，它都会降低单线程程序的性能。实际上，与实际的单线程程序相比，性能会更差，因为与其他线程的同步存在开销。

(特别感谢Graham Dumpleton!)其中一个solution就是为CPython编写C扩展。并在进入“C领域”时释放GIL。请注意，如果没有GIL保护，您不能访问python内容，否则它将导致细微的bug，或者直接崩溃。

有几个实现不使用GIL，例如，Jython和Cython (不是CPython)。您可以尝试使用它们。但请记住，编写正确的多线程程序是困难的。编写一个快速的多线程程序就更难了。我的建议是写多进程程序而不是多线程。并通过IPC或类似的方式传递数据(比如ZeroMQ，它很容易使用，而且很轻量级)。

让我在@HKTonyLee的回答中补充几点。

所以Python有这个GIL。但在执行例如文件I/O时，它会被释放。这意味着您可以并行读取文件。由于从进程的角度来看，没有文件，只有文件描述符(假设是posix)，那么您读取的任何内容都不必存储在磁盘上。

总而言之，如果你移动你的文件到(例如) tmpfs或内存磁盘或任何类似的地方，那么你应该比使用固态硬盘获得更好的性能。但是要注意风险:如果你需要修改文件，你可能会丢失更新。