标签: cpython

我无法弄清楚如何获取 Python 中标准mmap对象的虚拟地址（来自 mmap 模块）。记录的方法似乎仅以字节数组或字符串的形式访问内存。

但我需要一次精确地访问 mmap'ped 内存 2 或 4 个字节 - 因为我的应用程序中的该内存被映射到硬件寄存器（想想 /dev/mem 或 GPIO 等）。使用ctypes模块可以以这种方式访问​​内存- 但为此我需要映射的指针- 或虚拟地址。

目前，我通过使用 libc 中的本机 open() 和 mmap() 函数（感谢相同的 ctypes）来克服这个问题，但我宁愿不这样做。

为什么 mmap 模块不提供简单的方法来获取内存地址？希望我错过了一些明显的东西......

-- DD

我发现了一个有趣的事情，它比在分隔符之后获取整个子字符串partition更快。split我已经在 Python 3.5 和 3.6 (Cpython) 中进行了测试

In [1]: s = \'validate_field_name\'\n\nIn [2]: s.partition(\'_\')[-1]\nOut[2]: \'field_name\'\n\nIn [3]: s.split(\'_\', maxsplit=1)[-1]\nOut[3]: \'field_name\'\n\nIn [4]: %timeit s.partition(\'_\')[-1]\n220 ns \xc2\xb1 1.12 ns per loop (mean \xc2\xb1 std. dev. of 7 runs, 1000000 loops each)\n\nIn [5]: %timeit s.split(\'_\', maxsplit=1)[-1]\n745 ns \xc2\xb1 48.8 ns per loop (mean \xc2\xb1 std. dev. of 7 runs, 1000000 loops each)\n\nIn [6]: %timeit s[s.find(\'_\')+1:]\n340 ns \xc2\xb1 1.44 ns per loop (mean \xc2\xb1 std. dev. of 7 runs, 1000000 …

我的 Python 项目是从 C++ 应用程序嵌入和解释的。此应用程序还将某些类/函数公开到 Python 可以导入的名为“Monsters”的模块中。因此，从中导入“史莱姆”类将如下所示：from Monsters import Slime

问题是 PyLint 由于其实现的性质而无法检测到此模块。因此，它会生成错误，例如：Unable to import 'Monsters'。这些类型的错误本身不是问题，因为它们可以被抑制而不会出现问题。

但是，该模块包含需要在 Python 中扩展的类。这些子类可以访问它们在 C++ 实现中构建的父变量/函数。访问它们会导致另一个错误：Instance of 'Child_Slime' has no 'x' member。“x”属性在父类中实现，但 PyLint 不知道它。

这种检查对象/类中的某些成员是否存在的能力是我想使用 PyLint 的一个重要原因，所以如果我不必完全抑制警告，我更愿意。有什么方法可以生成类似于 MyPy 的存根文件，但用于 PyLint？如果没有，是否有任何替代的 Python linter 包含这样的功能？

如果您查看了有关通过 C 调用运行 Python 代码的Python C-API文档，您总会发现提到PyCompilerFlags，但除了文档的最后一部分之外，没有任何内容真正描述它是什么，并且没有说明其可能的值及其对执行的影响。

我正在尝试从Unofficial Windows Binaries for Python Extension Packages安装 OpenCV 。

我下载了以下文件：opencv_python\xe2\x80\x913.4.3\xe2\x80\x91cp37\xe2\x80\x91cp37m\xe2\x80\x91win_amd64.whl，\n当我这样做时pip install "opencv_python\xe2\x80\x913.4.3\xe2\x80\x91cp37\xe2\x80\x91cp37m\xe2\x80\x91win_amd64.whl"，弹出了一条错误消息。

错误：opencv_python-3.4.3+contrib-cp37-cp37m-win_amd64.whl is not a supported wheel on this platform.

根据我在谷歌搜索和 SO-ing 后了解到的情况，这是由于CPython构建之间不匹配（下载的 Wheel 文件和我系统上的 Python 环境之间）造成的问题。

因此，我尝试寻找方法来确定我的系统上是哪个 CPython 版本，但失败了。

到目前为止我尝试过的：

import platform\nplatform.python.implementation()\n

这给出了：

\'CPython\' \n

此外，我尝试了 \nplatform.architecture()\n 给出了：

(\'64bit\', \'WindowsPE\')\n

后来我只是搜索了我的site-packages文件夹并找到了一些文件，例如__init__.cpython-36.pyc，因此假设我正在使用 CPython 3.6。

是否有更多基于编程的方法来通过终端检查相同的内容？

任何形式的帮助表示赞赏。TIA。

我试图获取一个函数的源代码，向其中添加代码，然后将其放回原始函数中。

基本上是这样的：

new_code = change_code(original_code)
throwaway_module = ModuleType('m')
exec(new_code, throwaway_module.__dict__)
func.__code__ = getattr(throwaway_module, func.__name__).__code__

当new_code不包含任何不在原始函数中的名称时，这非常有效。

但是，当new_code包含原始中不存在的变量名称时，func在最后一行我收到以下错误：

ValueError: func() requires a code object with 1 free vars, not 0

有任何想法吗？

编辑：

似乎我在 CPython 源代码中找到了引发此异常的位置（文件 funcobject.c）。为清楚起见省略了一些行：

static int
func_set_code(PyFunctionObject *op, PyObject *value, void *Py_UNUSED(ignored))
{
    Py_ssize_t nfree, nclosure;

    // ... lines omitted

    nfree = PyCode_GetNumFree((PyCodeObject *)value);
    nclosure = (op->func_closure == NULL ? 0 :
            PyTuple_GET_SIZE(op->func_closure));
    if (nclosure != nfree) {
        PyErr_Format(PyExc_ValueError,
                     "%U() requires a code object …

python gc.collect()是一个停止世界（STW）垃圾收集器吗？

如果是 STW 垃圾收集器，何时何地停止世界？

我知道 python 使用确定性引用计数，这不需要停止世界。然而，在处理循环时，python 是否需要停止世界？

经过一段时间在这里寻找重复项后，我发现唯一的事情是无操作并使用 Cython 进行优化，这是完全不相关的。我想要完成的是在运行时动态设置python -O标志。

基本上，有一个值sys.flags.optimize是只读的。我正在寻找一个选项来更改它或找到一个可以更改该值并影响字节码生成的位置。

根据文档，官方方法是在解释器启动之前调用它，所以我想知道这是否可能，但这就是我发现的：

• Python/compiler.c -> c_optimize
• optimization_level通过环境变量在 C 中设置PYTHONOPTIMIZE
• Lib/py_compile.py

这似乎py_compile被称为“某处”（GitHub 搜索仅显示文档或测试，而不是运行时的实际调用者）并optimization_level从compiler.c上面管理。这意味着我可以在 Python 中更改它，并让编译的解释器在同一会话/进程中对经过或不经过优化的代码进行汇编。

我似乎找不到 CLI 参数解析，也找不到任何可以在运行时更改的相关“状态”。

我的目标（目前）是选择性地允许/删除assert关键字，该关键字可以单独完成-O（通过compiler_assert()需要级别集，但是我正在努力寻找构建 AST 的 C 代码和实际的 Python 代码之间的“缺失的链接”）似乎保持配置状态（因为py_compile包含原始optimize值）并且似乎正在为解释器本身编译和加载字节码。

有什么方法可以改变，optimization_level以便我可以实现这种行为，并且几乎可以在单个 Python 会话中完成此操作？

>>> # change optimize to 1
>>> def test(): assert True
>>> import dis
>>> dis.dis(test)
  1           0 LOAD_CONST               0 (None)
              2 …

大概两者mylist.reverse()和list.reverse(mylist)最终reverse_slice在listobject.cvialist_reverse_impl或 中执行PyList_Reverse。但他们实际上是如何到达那里的？从 Python 表达式到该 C 文件中的 C 代码的路径是什么？是什么将它们联系起来？它们经历了这两个反向函数中的哪一个（如果有的话）？

赏金更新：Dimitris 的回答（更新 2：我的意思是原始版本，现在扩展之前）及其下面的评论解释了部分内容，但我仍然缺少一些东西，希望看到一个全面的答案。