腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
python
多
处理
队列
不在
共享
内存
中
、
end我所期待的是the size of queue is 10为什么multiprocessing.queue
不在
共享
内存
中
?请给我建议。
浏览 29
提问于2017-08-24
得票数 1
回答已采纳
2
回答
如何在
python
和C/C++中使用
共享
内存
、
、
、
我正在尝试修改
python
程序,以便能够使用
共享
内存
与C++程序通信。
python
程序的主要职责是从
共享
内存
中
的输入
队列
中
读取一些视频帧,对视频帧执行一些操作,并将其写回
共享
内存
中
的输出
队列
。我相信我几乎没有什么需要去实现的,如果有人能给我一些启示,那就太好了:
共享
内存
:在C/C++
中
,您可以使
浏览 5
提问于2018-03-05
得票数 15
回答已采纳
1
回答
具有“内部”/“外部”守护进程线程的应用程序之间的功能差异
、
、
有3个守护进程线程的应用程序和4个单独的应用程序(多
处理
队列
/管道和从
队列
/管道应用程序读取的3个守护进程线程应用程序)在线程操作功能上是否有区别? 'TradingStrategy‘1守护进程线程:从
队列
中提取、检
浏览 0
提问于2016-10-21
得票数 0
1
回答
Python
多
处理
的进程通信
、
、
、
、
我了解了
Python
多进程的管道/
队列
/
共享
ctype对象/管理器,并希望将它们与Linux的匿名管道、命名管道、
共享
内存
、套接字等进行比较。我现在有以下问题
Python
multiprocessing.sharedctypes支持独立的进程通信吗?它们
中
的哪一个仅用于亲子关系或兄弟关系的过程,哪些可以在独立
浏览 1
提问于2018-04-29
得票数 8
回答已采纳
1
回答
我可以从一个Xenomai实时任务访问非RT
共享
内存
对象和互斥对象吗?
、
、
、
、
例如,我是否可以创建一个
共享
内存
对象(shm_open)并
共享
互斥,即使其中一个位于RT环境
中
? 如果答案是肯定的,我是否应该使用Xenomai的POSIX皮肤?如果答案是否定的,我如何安全地
共享
数据/通信?命名管道是我唯一能想到的办法.
浏览 6
提问于2013-11-07
得票数 0
1
回答
Python
:不适用于半大型数据的多
处理
Queue.put
、
、
、
我正在测试模块多
处理
中
队列
结构的功能。我不明白为什么这段简单的代码不能终止一个几乎不太大的数据集。
浏览 3
提问于2013-10-08
得票数 3
回答已采纳
1
回答
Python
-
共享
内存
和多
处理
队列
、
、
、
需要集成
队列
或
共享
内存
,以便多个进程可以同时运行不同的分片。实际上,脚本将多次发送相同的“新代码”。
浏览 21
提问于2021-10-02
得票数 0
1
回答
如何有效地将大量数据块排入
Python
中
的多个并发子进程?
、
、
、
我在Windows中使用
Python
3.5.2 (x64)。我正在用大块读取二进制数据(按兆字节的顺序),并希望将这些数据高效地
共享
到'n‘并发
Python
子进程
中
(每个进程将以一种独特和计算上昂贵的方式
处理
这些数据)。我关注
共享
内存
(数组(锁定/解锁)和RawArray):将数据块从文件
中
读取到缓冲区非常快,但是将该块复制到
共享
内存
的速度要慢得多。 使用
队列
,相对于
共享
浏览 3
提问于2016-10-30
得票数 0
回答已采纳
1
回答
使用
Python
多
处理
更新
共享
只读数据
、
、
、
我正在尝试使用
Python
的多
处理
库来试验分布式神经网络。目前,我已经设置了它,以便服务器进程创建神经网络,并将输入分块以进行小批量梯度下降,将批放入
共享
队列
,由客户端进程
处理
,并将结果放入单独的
共享
队列
。到目前为止,一切都正常,除了为了
处理
批
处理
和产生渐变,子进程需要一个网络权重的副本,我已经使用多
处理
数组
共享
了它。客户端进程只需要权重的只读副本,但服务器进程在每个训练时期之后更新本地副本。我的问
浏览 1
提问于2013-02-03
得票数 2
1
回答
如何在
Python
中
的多线程和进程之间有效地
共享
数据?
、
、
这允许我使用threading.Thread()来交互启动新线程,在“实时”
中
执行模拟。每次仿真结果都是put()在multiprocessing.Queue()中进行的。我读过matplotlib并不是线程安全的,所以图作为一个multiprocessing.Process()和get()运行,仿真结果来自
队列
。不幸的是,一旦从
队列
中
收集到项目,它们就会从
队列
中
删除,并且不能用于其他线程或进程。这意味着我可以从模拟线程发送数据到绘图进程,但不能在我的主线程
中
同时使用模
浏览 0
提问于2018-10-14
得票数 4
回答已采纳
1
回答
光线多
处理
的好处被增加的函数运行时间所抵消
、
、
函数的第一部分查询字典,查找与'element‘ID有关的结果,并将它们提取到Numpy数组
中
。这些都被放大,并进行了一些简单的算术计算。注这两个字符串和整数用作额外的标识符和计算的起始id。因此,我一直在研究各种多
处理
模块,试图加速运行时(Multiprocessing / Dask / joblib),但老实说,并不是很成功。我还没有让它们
中
的任何一个减少串行运行时间。elm) for elm in reqd_elements] 我使用ray.put()
浏览 0
提问于2020-11-14
得票数 1
1
回答
Python
3.6是否有erlang风格的消息
队列
?
、
、
、
我正在寻找一个
Python
3.6(这个确切版本)的消息
队列
实现,可以用来在multiprocess.Processes之间通信,具体地说,它应该是一个
多
生产者,单消费者,优先接收应用程序特定类型的消息的先进先出(例如,如果在
队列
的中间有一个系统消息(在erlang术语
中
),在
队列
的头部有一个正常的消息,那么下一个接收应该返回系统消息,而不是正常的消息) 但我怀疑会不会有这样的库,所以问题变成了,有没有标准的库或第三方的库给我一块
共享
内存
,或者更好的列表
浏览 19
提问于2021-06-10
得票数 1
回答已采纳
2
回答
使用只读
共享
内存
的
Python
中
的多
处理
?
、
、
、
我有一个单线程的
Python
程序,我想对它进行修改,以利用它所运行的服务器上的所有32个
处理
器。正如我所设想的那样,每个工作进程将从
队列
中
接收其作业,并将其输出提交到
队列
。然而,要完成其工作,每个工作进程都需要对复杂的
内存
中
数据结构进行只读访问--相互链接的数十亿字节的字典和对象。在
python
中
,有没有一种简单的方法来
共享
这个数据结构,而不是为每个工作进程复制它?
浏览 0
提问于2013-10-15
得票数 5
1
回答
如何在POSIX
中
实现零拷贝机制?
、
、
我希望在本地/网络的两个进程之间
共享
/传输数据。可以使用通用的IPC机制、
共享
内存
和消息
队列
来传输数据。但这些机制涉及多个副本。 我遇到了零拷贝机制,它减少了CPU上的拷贝开销。这些API
不在
POSIX
中
。如何仅使用POSIX实现零拷贝?
浏览 32
提问于2015-09-09
得票数 4
1
回答
如何从
python
中
的本机代码
中
捕获运行时错误?
、
在
python
中
,C
中
是否有类似叉子()的东西,可以创建具有相同
内存
结构的相同进程的副本,等等?使用os.fork(),但只在OS env.等unix
中
工作。 使用多进程和
共享
内存
模型在进程之间
共享
大对象。通常的序列化将无法
处
浏览 4
提问于2020-10-23
得票数 0
回答已采纳
2
回答
C/C++和
Python
之间的
共享
内存
、
、
、
有没有办法在C/C++和
python
之间
共享
内存
以
共享
openCV映像( C+++
中
的MAT和
python
中
的numpy )?
多
平台是不需要的,我是在linux
中
做的,我想在mmap或类似的思考之间
共享
。 我有两个正在运行的进程,一个是用C编写的,另一个是
python
,我需要在它们之间
共享
一个映像。我将通过套接字从c进程调用
python
,但我需要发送、映
浏览 12
提问于2017-10-07
得票数 7
回答已采纳
1
回答
POSIX消息
队列
文件夹
、
几天来,我一直在远程
处理
POSIX消息
队列
。现在我想在我自己的PC上这样做,但是我发现没有创建
队列
的/dev/mqueue文件夹;这意味着我不知道它们在哪里(是否有),所以我无法访问那里来删除它们,以防我的程序意外结束。我注意到由于“僵尸”
队列
,我的代码没有正常运行,但是我不能像使用信号量和
共享
内存
那样从文件夹
中
删除它们(托管在/dev/shm
中
)。提前谢谢你, 爱德华
多
浏览 8
提问于2015-12-15
得票数 2
回答已采纳
2
回答
我是否需要显式地将multiprocessing.Queue实例变量传递给在实例方法上执行的子进程?
、
、
当涉及到使用
Python
的multiprocessing模块时,我有几个基本问题: def __init__(self如果是,它如何知道这些
队列
是为IPC
共享
的,并且它不应该在子进程
中
复制work_queue和result_queue?
浏览 0
提问于2014-10-07
得票数 12
2
回答
为什么我要使用node.js作为http服务器?
、
、
像apache这样的服务器获得一个请求,分叉一个进程,为进程分配
内存
,
处理
请求&在进程完成后释放它。如果一次收到数千个http请求,那么apache将等待进程
队列
释放进程。单线程环境下的node.js是如何
处理
这么
多
http请求的。所有传入的请求都有自己的事件循环。所有这些事件循环
共享
相同的
内存
。如何使用node.js来
处理
数百万比使用apache更可伸缩的http请求?
浏览 0
提问于2014-02-28
得票数 1
2
回答
什么dbus性能问题可以阻止它从嵌入式系统?
、
、
、
、
如果需要传递大量数据,解决方案之一是将数据放入
共享
内存
或堆
中
,然后使用dbus通知。正在考虑的其他ipc机制有:信号、匿名管道、命名管道或FIFO、SysV消息
队列
、POSIX消息
队列
、SysV
共享
内存
、POSIX
共享
内存
、SysV信号量、POSIX信号量、FUTEX锁、文件支持和匿名
共享
内存
我应该提到 (尽管它以apache为中心): 能同时
处理</em
浏览 1
提问于2014-08-01
得票数 10
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
云直播
活动推荐
运营活动
广告
关闭
领券