腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
在
CUDA
中
编写内核
函数
的正确方式?
、
、
、
现在很明显,我的旧程序
一个
接
一个
地执行许多
函数
,我
在
主程序中分离了这些
函数
,并按顺序调用每个
函数
。好了,现在我想把这些
函数
转换成内核,然后
并行
运行
函数
中
的任务。 是不是就像以
并行
方式重写每个
函数
,然后
在
我的主程序中
一个
接
一个
地调用每个内核一样简单?这是否比它需要的速度慢?显然,我会将所有
运行
时
浏览 0
提问于2012-07-19
得票数 7
回答已采纳
2
回答
如何在python中将
多个
函数
应用于多核上的dataframe列
、
、
我有
一个
pandas
数据
帧
,并希望
在
多个
核心上
并行
地对其中一列应用三个不同的
函数
。(x): return(x**3) return(x**4) 我希望将这三个
函数
并行
应用于列'col2‘,
在
多个
核心上,并将结果作为
数据
帧
中<
浏览 0
提问于2021-10-23
得票数 0
1
回答
在
一个
函数
中
并行
运行
多个
数据
帧
、
、
、
假设我有
一个
函数
, def corr_array(data): return data 和下面的
数据
帧
, import numpy as np pc = {f"pc_{i + 1}": v for i, v in enumerate(np.array_split(
浏览 12
提问于2020-07-27
得票数 0
回答已采纳
1
回答
Python/Pandas dataframe:
在
程序停止时完成对文件的写入
、
、
对于
多个
CSV文件,我使用pandas
数据
帧
的to_csv()
函数
以
并行
方式将
数据
附加到python
中
的
数据
帧
中
。 然而,当我停止程序
运行
时,一些文件被完全清空了。
浏览 22
提问于2021-06-28
得票数 0
3
回答
长流程
并行
化与性能优化
、
、
、
、
我想
并行
处理
多个
视频剪辑的应用程序一
帧
一
帧
。每个剪辑的每个
帧
的顺序是重要的(显然)。我决定使用,因为我认为这是
数据
流(电影
帧
就是
数据
)的
一个
很好的例子。因此,我有
一个
从
数据
库加载
帧
的过程(比方说,
在
一批500
帧
中
,所有这些都已打包)。每个ActionBlock都是顺序的,但理想情况下,
多个
电影的
多个</
浏览 16
提问于2012-11-14
得票数 2
回答已采纳
1
回答
如何映射-减少序列
数据
,其中Kn+1->Vn+1 = f(Kn->Vn)?
、
我有
一个
更理论性的问题,但它涉及到我过去
在
没有Hadoop的情况下解决的任务转换为映射-还原平台。例如,我们有
一个
视频文件,在技术上是
一个
帧
序列,我们需要检测每个
帧
中
某个圆形对象的特征:(x,y,大小,失真)。该检测算法以
帧
本身和前一
帧
的识别结果为输入。这里的问题是,如何将这样的问题转化为映射-减少范式,以便:
浏览 1
提问于2012-09-13
得票数 2
1
回答
数据
帧
上的spark GROUPED_MAP udf是否
并行
运行
?
、
、
、
我正在尝试应用
一个
PandasUDFType.GROUPED_MAP
函数
,该
函数
将
一个
数据
帧
作为输入,并产生
一个
数据
帧
作为输出。当我执行sdf.groupby(key).apply(pandas_udf)时,它是基于可用资源将
函数
并行
应用于
多个
组,还是按顺序将
函数
应用于
一个
组后另
一个
组?我还没有更改spark的任何默认设置。如果
浏览 41
提问于2020-08-11
得票数 0
2
回答
禁用Systemd
并行
化和Cpu过快
并行
化
我正在尝试找到一种方法来改变systemd初始化进程,以禁用进程的
并行
化,从而使我的cpu
在
启动时不会崩溃。我的系统是
一个
明确的游戏系统,基本内置
在
bios
中
的超频控制
中
,我研究了调整linux系统的所有方法,在这个时候debian,为了
在
一般使用和游戏中获得最大的性能。对于这个问题,我可能想不出另一种解决方案,但很明显,启动进程的
并行
化造成了导致我的系统崩溃的条件,而我
在
bios
中
打开cpu超时。
浏览 0
提问于2023-02-03
得票数 0
1
回答
方法可以重叠执行吗?
、
摘要:
在
单线程上执行时,我试图找出单个方法是否可以
在
重叠的情况下执行两次。或者,如果两种不同的方法可以
在
重叠
中
执行,当它们共享对特定变量的访问时,可能会发生一些不必要的行为。2)
在
单个线程环境
中
,是否存在方法可以重叠执行的其他场景,或者AVM2是否仅限于一次执行
一个
方法?Studies: --我读过,它解释了AVM2有
一个
用于
运行
代码的堆栈,而对方法的描述似乎表明,如果没有第二个堆栈,堆栈系统一次只能容纳
一个
方法的
浏览 4
提问于2015-10-09
得票数 1
回答已采纳
1
回答
Pandarellel没有进展并处于死锁状态
、
、
我正在使用具有初始化4核的
并行
包在pandas
数据
帧
上
运行
应用
函数
。但不幸的是,该过程甚至没有处理一条记录。
在
没有Pandarallel
并行
功能的情况下,需要3分钟才能完成该过程。
在
1000个记录的
数据
帧
上
运行
实验。实际上我有两百万个
数据
集,这就是我研究
并行
的地方。
数据
集的大小为6 MB,RAM为16 GB。这
浏览 1
提问于2020-04-20
得票数 0
3
回答
游戏中的
并行
编程
、
、
在
我的游戏中,我有一些实体(大约2000-5000),它们每
帧
(或每2
帧
或3
帧
)都会进行非常繁重的性能计算。每次我调用Parallel类的
函数
时,它会启动许多线程吗??这个游戏的目标fps是60 fps,所以
浏览 1
提问于2011-11-09
得票数 0
3
回答
如何在几个
并行
运行
的R作业完成后
运行
另
一个
Rscript?
、
、
、
、
关于如何
运行
脚本的安排首先是使用rstudioapi::jobRunScript()
函数
并行
运行
4R脚本。
并行
运行
的每个脚本都不会从任何环境导入任何内容,而是将创建的
数据
帧
导出到全局环境
中
。我的第5个R脚本构建在由
运行
在
并行
中
的4R脚本创建的
数据
帧
上,这个第5个脚本也
在
控制台中
运行
。如果有一种方法可以让在后台中
浏览 4
提问于2020-08-28
得票数 3
回答已采纳
1
回答
在
多线程
中
同时加载不同的
数据
帧
、
、
我有
一个
flask服务器,它对
数据
帧
执行读写查询。我有
一个
缓存机制(使用cacheout库)
在
收到请求时缓存
数据
帧
,然后
在
接收到对相同
数据
帧
的请求时使用缓存的
数据
帧
。目前,我正在使用
一个
锁,它使所有线程依次加载它们(不同的)
数据
帧
,然后进一步处理加载的
数据
帧
。我想要的是,当我收到对不同
浏览 0
提问于2019-02-08
得票数 0
2
回答
火花结构化流处理每一行
、
、
、
本质上,我需要获取消息,获取一些键值,
在
HBase
中
查找它们,并在dataset上执行更多的biz逻辑。最终结果是需要写入另
一个
Kafka队列的字符串消息。但是,由于传入消息的抽象是dataframe (无限制的表结构流),我必须通过mapPartitions (由于HBase客户端不可串行化而导致的分区)
在
触发器期间迭代所接收的
数据
集。
在
我的过程
中
,我需要迭代每一行来执行相同的业务流程。 是否有更好的方法可以帮助我避免dataFrame.mapPartitions
浏览 9
提问于2017-05-25
得票数 3
2
回答
将csv文件拆分成
多个
txt。文件
、
我有
一个
很大的csv
数据
集,我想将其拆分为
多个
txt文件。我希望每个文件的名称来自ID列,每个文件的内容来自Text列。我的
数据
看起来像这样。
浏览 25
提问于2020-06-15
得票数 0
1
回答
加快从视频文件
中
读取
帧
的速度
、
、
有没有办法用OpenCV
并行
读取视频文件
中
的
帧
,或者以其他方式加快读取速度? 我尝试
在
多个
线程中使用cap.read(frame)
函数
,但应用程序崩溃。我还尝试使用VideoCapture对象数组cap,所有对象都引用相同的视频文件,然后
在
每个线程
中
我可以使用caps[i].read(frame),因此我可以
并行
读取,但我只是多次读取相同的
帧
。
浏览 22
提问于2021-06-02
得票数 0
回答已采纳
1
回答
将
一个
数据
帧
拆分为
多个
数据
帧
,并对这些
数据
帧
并行
执行过程
、
、
我有
一个
数据
框dfA。其中包含超过一百万条记录。我想根据'GROUP_ID‘将
数据
帧
拆分成
多个
数据
帧
,然后对这些
数据
帧
执行一些操作。此循环将基于唯一的组id创建
数据
帧
。问题是,这段代码需要3天的时间才能
运行
,所以我想知道如何使用多进程
并行
来实现这一点。
浏览 1
提问于2018-01-31
得票数 0
3
回答
图形处理器
中
的
并行
性- CUDA / OpenCL
、
我对图形处理器上的CUDA或OpenCL代码的
并行
性有
一个
一般性的问题。我使用的是NVIDIA GTX 470。 我
在
Cuda编程指南中简短地阅读了一下,但没有找到相关的答案,因此在这里提问。我有
一个
顶级
函数
,它调用CUDA内核(对于相同的内核,我有它的OpenCL版本)。对于3个不同的
数据
集(图像
数据
R,G,B),这个顶级
函数
本身在主
函数
的“for循环”中被调用了3次,而实际的codelet也对图像/
帧
<
浏览 1
提问于2011-12-22
得票数 4
回答已采纳
1
回答
分组拆分后的
数据
帧
并行
处理
、
我有
一个
大约有5000000行的
数据
框。我正在使用自定义
函数
执行操作,并使用apply调用它。因为行数很大,所以应用
函数
的速度非常慢。我想要
并行
化这一点,但问题是我执行的操作每次需要每个用户完成
数据
(即按电子邮件分组),因此我需要划分我的
数据
帧
,以便在
多个
进程
中
不存在相同的电子邮件。 如何使用python多处理库做到这一点?注意:避免使用自定义
函数
是不可能的,因此请回答有关
并行
部分
浏览 17
提问于2021-08-02
得票数 0
1
回答
Linq 2 SQL
并行
处理
、
、
、
我有
一个
长期
运行
的任务,它受益于多线程。由于需要实体的单个实例,因此很难为每个线程使用
多个
datacontext。
在
使用Linq to SQL之前,我是
在
经过一定数量的
并行
迭代后序列化到XML的。这工作得很好,但此后
数据
变得更加复杂,需要SQL中提供的关系/查询; 一些附加信息:任务是分析视频的
帧
,以找到相似
帧</
浏览 0
提问于2012-12-13
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
将多个Excel工作表合并到一个Pandas数据帧中
如何只用一行代码让 Pandas 加速四倍?
仅用几行代码,让Python函数执行快30倍
如何只用一行代码让Pandas加速四倍?
100万帧数据仅1秒!AI大牛颜水成团队强化学习新作,代码已开源
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券