如何将Cython中的大型malloc数组作为Python对象返回或保存？
在Cython中，可以使用<type>[]语法来声明大型malloc数组，并将其作为Python对象返回或保存。以下是一种常见的方法：
- 首先，在Cython代码中导入必要的模块和函数：
cimport numpy as np
from libc.stdlib cimport malloc, free- 然后，定义一个函数来创建和返回大型malloc数组：
def create_large_array(int size):
cdef int* arr = <int*>malloc(size * sizeof(int))
# 在此处进行数组初始化或其他操作
return <np.ndarray[np.int32_t, ndim=1]>np.PyArray_SimpleNewFromData(1, &size, np.NPY_INT32, <void*>arr)在上述代码中，我们使用malloc函数分配了一块内存来存储整型数组，并使用np.PyArray_SimpleNewFromData函数将其转换为NumPy数组对象。最后，我们将其强制转换为Cython中声明的类型np.ndarray[np.int32_t, ndim=1]。
- 如果要保存大型malloc数组到文件中，可以使用以下代码：
def save_large_array(np.ndarray[np.int32_t, ndim=1] arr, str filename):
cdef FILE* file = fopen(filename.encode(), "wb")
fwrite(arr.data, sizeof(int), arr.shape[0], file)
fclose(file)在上述代码中，我们使用fopen函数打开文件，并使用fwrite函数将数组数据写入文件。最后，使用fclose函数关闭文件。
需要注意的是，使用完大型malloc数组后，应该使用free函数释放内存：
free(arr)这样，你就可以在Cython中创建和返回大型malloc数组，并将其保存到文件中。这种方法可以提高性能，特别是在处理大量数据时。
相关·内容
我想使用Cython从一个模型创建大量模拟样本，稍后需要使用Python进行分析。我的模拟脚本一次运行的结果应该是一个10000 x 10000的数组。在寻找解决方案时，我了解到这个问题是由在堆栈而不是堆上分配内存引起的，所以我决定使用PyMem_Malloc来分配内存。下面是我想要做的事情的最低版本： import cython
from cpython.mem cimport PyMem_<em
浏览 102提问于2021-10-25得票数 1
回答已采纳
1回答
我正在编写一个函数，该函数构造一个malloc‘s unsigned char *数组，然后重新运行指针。在纯Cython或C中，这很容易。您所要做的就是在函数上设置一个返回类型，并返回指向数组的指针。好了。但是，我已经到了需要将指向用Cython创建的数组的指针返回到Python的地步。我知
浏览 2提问于2014-07-15得票数 9
回答已采纳
我希望使用Cython来减少将两个数组(按元素划分)添加到一起所需的时间，而不使用使用Numpy数组。我发现最快的基本Python方法是使用列表理解，如下所示： return [m + n for m,n in zip(a,b)]
我的Cython方法有点复杂另外，我还关心一个非常大的数组(大小为640000)，我发现如果我只使用cdef int Carr[64000
浏览 1提问于2020-03-31得票数 2
回答已采纳
我试图用cython编写一个函数，它应该从python接收一个列表参数，通过在C/C++中生成一个2D数组，以某种方式操纵它，然后将它作为2D列表返回到python。我简化了代码以问我的问题：
我希望c_Func完成我可以编译它的过程，而不会出错。第二个函数是可调用函数，但显然它不能工作。首先，我必须处理列表不能被double*替换的问题，其次是py_Func不能返回double*的问题。
浏览 1提问于2014-05-12得票数 1
回答已采纳
3回答
如何高效地将cython中的malloc数组指针(或numpy数组指针)返回给python3。只要我不返回数组指针，cython代码就可以完美地工作def double complex* randn_zig(int n): ...return r
相当于c11 (
浏览 1提问于2014-08-03得票数 7
1回答
对于给定的ctype数组或python列表，如何将python对象强制转换为？我现在的做法是这样的(_arr是python )：if int_t is NULL:for i in xrange(len(
浏览 3提问于2013-08-08得票数 1
回答已采纳
1回答
我正试图为一个包含C指针的cython类编写一个__reduce__()方法，但是到目前为止，它还没有找到关于进行这种操作的最佳方法的信息。关于如何在使用numpy数组作为成员数据时正确地编写__reduce__()方法，有大量的示例。我希望远离Numpy数组，因为它们似乎总是作为python对象存储，并且需要调用python。我来自C背景，所以我非常乐意手动使用对mall
浏览 8提问于2016-03-30得票数 9
回答已采纳
1回答
我想知道如何检查值或对象是否存在于数组中，就像在python中一样：b = 4 print("True!")else:我想知道在cython中是否已经存在类似的东西。我有一个指针的结构对象数组；我想知道该对象是否存在于此数组中</e
浏览 37提问于2013-02-27得票数 25
回答已采纳
1回答
我从一个已经分配和初始化的结构中获得了一些数据。我可以保证在这些对象的生命周期内不会释放数据。如何将其封装在Cython中的Python对象中？以下内容不起作用，但我希望它能解释我的意图： int x
cdefself.fo
浏览 3提问于2013-03-08得票数 4
1回答
想知道如何在Cython中读取二进制文件并将字符串返回给Python。我有以下内容，但在fread(缓冲区)上遇到错误。线路。我不太熟悉C/ Cython，所以如果有更简单的内置函数将二进制文件读入字符串，我将不胜感激cdef FILE * cfile length = ftell(cfile)
fseek (cfile, 0, SEEK
浏览 17提问于2017-06-23得票数 2
回答已采纳
我使用numpexpr对大型数组进行快速计算，但如果数组的大小小于CPU缓存，则使用简单的数组数学方法在Cython中编写代码会更快，特别是在多次调用函数的情况下。问题是，如何在Cython中使用数组，或者更明确地说:在Cython中是否有到Python的array.array类型的直接接口？我想要做的
浏览 1提问于2011-03-19得票数 9
在Cython中，假设我有一个C函数，它返回一个用malloc()分配的大缓冲区，并期望稍后用free()释放。现在，我需要将这个缓冲区作为(字节) str对象传递给Python，它将获得它的所有权，并在稍后str对象消失时调用free()。这是可能的吗?如何实现？
浏览 0提问于2012-04-24得票数 4
回答已采纳
我有一个涉及大型n维数组的应用程序，它非常稀疏。scipy.sparse有一个有用的“矢量化获取和设置”特性，因此可以使用Cython快速填充稀疏矩阵。
一个用于n维数组的python包，具有矢量化的</em
浏览 3提问于2013-11-21得票数 22
回答已采纳
我有一个用常规Python创建的浮点值的数组，我想将它传递给一个cython函数，该函数是底层C函数的前端。C函数要求数组作为浮点指针传递，如下所示：cython包装器如下所示：如何将顶点转换为cython数组？我想
浏览 1提问于2012-07-27得票数 9
回答已采纳
我已经编写了一小段cython代码，它是from libc.stdlib cimport atoi
return atoi(s)from distutils.core import setup我使用以下命令运行setup.py
python setup.py bui
浏览 0提问于2015-05-14得票数 16
回答已采纳
1回答
CPLEX矩阵分解及机器学习应用
、、、、
我正在处理大矩阵，我的代码有时会在我的终端中以'killed:9‘消息结束。我正在研究Mac OSx。yy = np.random.rand(nn,1)我必须存储这个巨大的矩阵XX，我的猜测是：
upp =
浏览 2提问于2017-02-01得票数 0
我试图在Cython中创建一个C函数，它返回一个numpy数组，如下所示。但是如果我移除函数的返回类型 ...谢谢
浏览 3提问于2015-02-12得票数 8
回答已采纳
我正在对来自的素数生成器的一个变体进行一些性能测试。以下性能指标与kmax=1000一起使用纯Python实现，在Cython中运行:0.07 p = [if i == k: k = k + 1 return p
使用int*：0.003 s的<
浏览 5提问于2014-03-19得票数 17
回答已采纳
我对Cython非常陌生，在浏览了Cython文档之后，我遇到了Cython 扩展类型。我想知道它比普通Python类有什么好处？我试图将先前的Python类(它的数据成员中有列表)转换为Cython扩展类型，但似乎不能将列表声明为扩展类型的数据成员。我唯一能做的就是将使用原始C数据类型的数据成员的Python类转换为Cython扩展类型。
我在
浏览 9提问于2017-10-02得票数 1
2回答
我想用c样式做一个纯函数，它以数组作为参数(指针)，并对它做一些事情。但我无法找到如何为cdef函数定义数组参数。这是我做的一些玩具代码。cdef double *v #Copy in the python array
for i in range搜索如何在Cython中定义C数组，但还没有找到如何定义C数组<
浏览 3提问于2015-11-26得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
