标签: python-c-api

Python c-api 和 unicode 字符串

我需要在 python 对象和各种编码的 c 字符串之间进行转换。使用 PyUnicode_Decode 从 ac 字符串到 unicode 对象相当简单,但是我不知道如何走另一条路

//char* can be a wchar_t or any other element size, just make sure it is correctly terminated for its encoding
Unicode(const char *str, size_t bytes, const char *encoding="utf-16", const char *errors="strict")
    :Object(PyUnicode_Decode(str, bytes, encoding, errors))
{
    //check for any python exceptions
    ExceptionCheck();
}
Run Code Online (Sandbox Code Playgroud)

我想创建另一个函数,它接受 python Unicode 字符串并使用给定的编码将其放入缓冲区中,例如:

//fills buffer with a null terminated string in encoding
void AsCString(char *buffer, size_t bufferBytes,
    const char *encoding="utf-16", const char *errors="strict")
{
    ... …
Run Code Online (Sandbox Code Playgroud)

c python python-c-api

5
推荐指数
1
解决办法
3522
查看次数

通过 C API 在 Python 模块中定义全局变量

我正在使用 C API 为 Python 开发一个模块。如何创建一个在 Python 中被视为全局的变量?

例如,如果我的模块是module,我想创建一个g执行此任务的变量:

import module
print module.g
Run Code Online (Sandbox Code Playgroud)

尤其,g是一个整数。

Alex Martelli 的解决方案

PyObject *m = Py_InitModule("mymodule", mymoduleMethods);
PyObject *v = PyLong_FromLong((long) 23);

PyObject_SetAttrString(m, "g", v);
Py_DECREF(v);
Run Code Online (Sandbox Code Playgroud)

c python python-module global-variables python-c-api

5
推荐指数
1
解决办法
2377
查看次数

为什么 PyRun_SimpleString 的“从导入”失败?

我正在开发一个简单的(?)嵌入式 Python 项目。我有一个自定义包,已使用“setup.py install”安装到站点包中,例如:

在 C:\Python27\Lib\site-packages\ 中:

mypackage\
    __init__.py
    subpackage\
        __init__.py
        subpackage.py
    .... 
    mymodule.py
Run Code Online (Sandbox Code Playgroud)

只是做了一些简单的嵌入调用,我得到的一些行为与运行 Python 的 cmd 窗口中得到的行为不匹配。具体来说:

PyRun_SimpleString("import mypackage") //Success (return == 0)
PyRun_SimpleString("from mypackage import subpackage") //Success
PyRun_SimpleString("from mypackage import mymodule") //Fail (return == -1)
Run Code Online (Sandbox Code Playgroud)

...而所有这些在 cmd 窗口中都工作得很好(没有 ImportError,并且我可以在例如上获得预期结果dir(mymodule)

我知道结果的解释器与Py_Initialize()您在 cmd 窗口中得到的解释器有点不同,特别是 sys.path...阅读了一些其他答案后,我尝试插入 '' 作为 sys 的第一个元素.path: PyRun_SimpleString("import sys\nsys.path.insert(0,'')")在导入失败之前,但运气不好,仍然返回-1。还尝试附加 sys.path 与 'C:\Python27\Lib\site-packages\mypackage' ,但仍然没有成功导入 'mymodule' (mymodule.py)。

基于SO和其他网站上的其他示例,我尝试了一些导入变体,例如

__import__('mypackage',globals(), locals(), fromlist=['mymodule'])
__import__('mypackage.mymodule',globals(), locals(), fromlist=['mymodule'])
Run Code Online (Sandbox Code Playgroud)

也尝试过PyImport_ImportModuleEx,与 PyRun_SimpleString 一样,它适用于除“from mypackage import mymodule”之外的所有内容。

此外:这个场景在 MacOS/Python 2.7 …

c python python-embedding python-c-api

5
推荐指数
1
解决办法
1366
查看次数

PyErr_CheckSignals 未拾取信号

我有一个 C 扩展,它实现了 LRU 缓存https://github.com/pbrady/fastcache。我最近注意到,在一个大量使用缓存的应用程序(SymPy)中,超时信号丢失,而应用程序继续运行。仅当使用我的 C 扩展而不是使用纯 Python LRU 缓存(即 functools.lru_cache)时才会发生这种情况https://github.com/pbrady/fastcache/issues/26。

我在例程中添加了对 PyErr_CheckSignals() 的调用,信号丢失的频率降低了,但这种情况仍然会发生。请注意,在调用期间,缓存将调用 PyObject_Hash、PyDict_Get/Set/DelItem 和 PyObject_Call(在未命中的情况下)。

这是 SymPy 代码的相关片段(超时是一个整数):

def _timeout(self, function, timeout):
    def callback(x, y):
        signal.alarm(0)
        raise Skipped("Timeout")
    signal.signal(signal.SIGALRM, callback)
    signal.alarm(timeout)  # Set an alarm with a given timeout
    function()
    signal.alarm(0)  # Disable the alarm    enter code here
Run Code Online (Sandbox Code Playgroud)

有什么东西会覆盖信号吗?如果是这样,我该如何解决这个问题?

c python signals python-c-api python-c-extension

5
推荐指数
1
解决办法
826
查看次数

无法在我的 python C 扩展上启动 dbg

我使用安装在 pyenv 中的 python3.6.1。我在我的代码上运行 gdb 时遇到问题。当我运行gdb --args python mycode.py它以错误结束"/home/vydra/.pyenv/shims/python": not in executable format: File format not recognized

python gdb python-c-api pyenv

5
推荐指数
1
解决办法
631
查看次数

在用 C 编写 python 扩展时,如何将 python 函数传递给 C 函数?

首先,为令人困惑的标题道歉。

我想要实现的是以下内容:假设我有foo一个函数,它接受一个函数和一个整数作为输入。例如

int foo(int(*func)(), int i) {
    int n = func() + i;
    return n;
}
Run Code Online (Sandbox Code Playgroud)

现在,我想将此函数包装在 python 扩展模块中。所以我开始编写我的界面:

#include <Python.h>

extern "C" {
    static PyObject* foo(PyObject* self, PyObject* args);
}

static PyMethodDef myMethods[] = {
    {"foo", foo, METH_VARARGS, "Runs foo"},
    {NULL, NULL, 0, NULL}
}

// Define the module
static struct PyModuleDef myModule = {
    PyModuleDef_HEAD_INIT,
    "myModule",
    "A Module",
    -1,
    myMethods
};

// Initialize the module
PyMODINIT_FUNC PyInit_BSPy(void) {
    return PyModule_Create(&myModule);
}

//Include the function
static PyObject* …
Run Code Online (Sandbox Code Playgroud)

c python python-c-api

5
推荐指数
1
解决办法
1449
查看次数

在 C/C++ 中嵌入 Python

在我的计算机科学高级项目中,我正在制作一款益智视频游戏,该游戏将教人们如何使用 Python 进行编码。设计的最大部分涉及创建用户可以分类的引人入胜的谜题。然而,拼图设计不是我目前遇到的问题。

虽然我最初的想法是让每个“问题”都有一系列预期的答案来检查用户的答案,但我学校的 CS 部门负责人(主持高级研讨会)建议我改用嵌入式 Python,他建议两者都进行挑战me,并使数据更容易嵌入一个简单的解释器,该解释器将根据预期输出检查用户代码输出。

快进四个星期,我学到了很多关于 Python 实际工作原理的知识。我什至让解释器将简单的 C 字符串作为 python 代码,比如 print("hello") 或 print("hello/tworld"),只要 C 字符串中没有空格。

该代码看起来像

#include "pch.h"
#include <iostream>
#include <string>
#include <fstream>
#include <Python.h>

void exec_pycode(const char* code);

int main()
{
    using namespace std;
    Py_Initialize();

    string input;

    cin >> input;
     /*Though the variable gets passed to a const char* definition,
    the pointer is constant over the character, because the pointer ALWAYS points
    to the same function*/
    char const *PyCode = input.data();

    exec_pycode(PyCode); …
Run Code Online (Sandbox Code Playgroud)

c++ python python-c-api

5
推荐指数
1
解决办法
592
查看次数

如何通过诗歌构建 C 扩展?

要构建一个由poetry我管理的 python 项目,我需要先构建 C 扩展(相当于python setup.py build)。poetry能够根据这个github 问题来做到这一点。但是对我来说pyproject.toml,在使用poetry build?

python python-c-api python-poetry

5
推荐指数
1
解决办法
1720
查看次数

如果在包根目录中,则无法导入 C++ 扩展

注:由于问这个问题,我后来对发现python -m pip install -e .将扩展安装到cmod具有.venv/lib/python3.8/site-packages/hello-c-extension.egg-link指向在当前目录中的项目。我还在src以后的提交中切换到布局,并发现https://pythonwheels.com/是分发轮子的高质量软件包的重要参考。但是,我仍然很想知道setup.py子命令的行为。


作为对manylinux的一些研究的一部分,我正在使用一个玩具项目为 C++ 扩展模块构建不同的平台轮子。

好像在本地构建安装的时候,如果我的当前目录是项目根目录,就无法导入C++扩展模块。 这使我无法运行单元测试等。我相信这样做的原因是它.成为 的第一个组件sys.path,因此选择了纯 Python 版本,而未编译扩展名。

我怎样才能解决这个问题?我是否正确运行本地构建/安装?

包结构如下所示:

$ tree hello-c-extension/
hello-c-extension/
??? LICENSE
??? Makefile
??? README.md
??? cmod
?   ??? __init__.py
?   ??? _cmodule.cc
?   ??? pymod.py
??? setup.py
??? tests
    ??? __init__.py
    ??? test_cext.py
Run Code Online (Sandbox Code Playgroud)

我在 GitHub 上也有这个项目;我从29fef5b 开始问这个问题。

要构建/安装,我使用:

$ tree hello-c-extension/
hello-c-extension/ …
Run Code Online (Sandbox Code Playgroud)

python python-c-api python-3.x

5
推荐指数
1
解决办法
287
查看次数

如果放在命名空间包中,子模块的python导入路径

我有一个用 C 编写的 python 模块,它有一个主模块和一个子模块(名称带点,不确定这是否可以称为真正的子模块):

PyMODINIT_FUNC initsysipc(void) {
    PyObject *module = Py_InitModule3("sysipc", ...);
    ...
    init_sysipc_light();
}

static PyTypeObject FooType = { ... };
PyMODINIT_FUNC init_sysipc_light(void) {
    PyObject *module = Py_InitModule3("sysipc.light", ...);
    ...
    PyType_Ready(&FooType);
    PyModule_AddObject(module, "FooType", &FooType);
}
Run Code Online (Sandbox Code Playgroud)

该模块被编译为sysipc.so,当我将它放在当前目录中时,以下导入工作没有问题:

import sysipc
import sysipc.light
from sysipc.light import FooType
Run Code Online (Sandbox Code Playgroud)

问题是我想把这个模块放在一个命名空间包中,文件夹结构是这样的:

company/
company/__init__.py
company/dept/
company/dept/__init__.py
company/dept/sys/
company/dept/sys/__init__.py
company/dept/sys/sysipc.so
Run Code Online (Sandbox Code Playgroud)

所有三个__init__.py只包括标准setuptool导入行:

__path__ = __import__('pkgutil').extend_path(__path__, __name__)
Run Code Online (Sandbox Code Playgroud)

在当前目录中,以下导入不起作用:

from company.dept.sys import sysipc;
from company.dept.sys.sysipc.light import FooType;
Run Code Online (Sandbox Code Playgroud)

sysipc.light在这种情况下,我应该如何导入模块中定义的类型和方法?

====================================

更新实际错误:

我已经sysipc.so …

python python-module python-c-api python-2.7

5
推荐指数
1
解决办法
402
查看次数