首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >python中的PyArrow与C++中的Arrow进行接口时如何将Arrow表转换为Arrow表

python中的PyArrow与C++中的Arrow进行接口时如何将Arrow表转换为Arrow表
EN

Stack Overflow用户
提问于 2019-09-10 11:41:28
回答 1查看 782关注 0票数 2

我有一个针对Apache Arrow C++库构建的python库,它使用Pybind绑定到python。我希望能够用C++编写一个函数来获取用PyArrow构造的表,例如:

代码语言:javascript
运行
复制
void test(arrow::Table test);

传入PyArrow表,如下所示:

代码语言:javascript
运行
复制
tab = pa.Table.from_pandas(df)
mybinding.test(tab)

如果我像上面那样做一个简单的函数,我会得到:

代码语言:javascript
运行
复制
TypeError: arrow_test(): incompatible function arguments. The following argument types are supported:
    1. (arg0: arrow::Table) -> None

Invoked with: pyarrow.Table

我也尝试过编写一个接受py::object.cast<arrow::Table>()参数的函数,但我不能进行强制转换:

代码语言:javascript
运行
复制
RuntimeError: Unable to cast Python instance to C++ type (compile in debug mode for details)

有谁知道怎么让它工作吗?

EN

回答 1

Stack Overflow用户

发布于 2019-09-12 20:45:14

您必须使用arrow/python/pyarrow.h标头中提供的功能。此标头是自动生成的,以支持将Cython pyarrow.Table对象展开为C++ arrow::Table实例。构建并链接到libarrow.so就足够了。它还需要加载pyarrow python包,但这只是一个运行时,而不是编译时依赖项。

代码语言:javascript
运行
复制
// header that 
#include <arrow/python/pyarrow.h>

// Ensure that the Python module was loaded
arrow::py::import_pyarrow();

PyObject* pyarrow_table = …
// With pybind11 you can also use
// pybind11::object pyarrow_table = …

// Convert PyObject* to native C++ object
std::shared_ptr<Table> table = unwrap_pyarrow_table(pyarrow_table);
票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/57863751

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档