标签: python-import

如何防止动态库的多次初始化

我正在使用Python 2.7版.我有一个用C编写的Python模块扩展.模块初始化函数PyMODINIT_FUNC initmymodule包含一些初始化OpenSSL库的代码.我的模块构建为共享库并通过加载imp.load_dynamic

这个模块可能加载很多次,我无法控制它.Django和python这样做.当它加载两次然后OPENSSL_config函数调用两次.它导致流程崩溃.

我无法用C代码控制它,我无法用Python代码控制它.

在这里查看文档 http://docs.python.org/2.7/library/imp.html 它说:

imp.load_dynamic加载并初始化一个实现为可动态加载的共享库的模块,并返回其模块对象.如果模块已经初始化,它将再次初始化.

尼斯.

我发现在Python 3.4版中解决了类似的问题 http://hg.python.org/cpython/file/ad51ed93377c/Python/import.c#l459

支持多次初始化的模块将其m_size字段设置为非负数(表示模块特定状态的大小).它们仍然记录在扩展字典中,以避免两次加载共享库.

但是我应该在Python 2.7中做些什么呢?

c python openssl initialization python-import

8
推荐指数
1
解决办法
540
查看次数

如何为python 3.0的仅关键字参数导入__future__?

python2.6中的以下代码抛出语法错误

>>> def f(a,*args,c):
  File "<stdin>", line 1
    def f(a,*args,c):
                  ^
SyntaxError: invalid syntax
Run Code Online (Sandbox Code Playgroud)

但是这种语法在python3.0中是有效的.我想知道我应该在我的解释器中导入什么才能使它工作.即.from import __future__ ????

对于print function3.0的导入,我会这样做from __future__ import print_function

同样,这种定义在2.6中无效

def f(a,*b,c=5,**kwargs):
Run Code Online (Sandbox Code Playgroud)

虽然它在3.0中是合法的

python variadic-functions python-import python-3.x

8
推荐指数
2
解决办法
1285
查看次数

从python中的另一个包中导入一个包

请假设以下项目结构:

/project
  /packages
    /files
      __init__.py
      fileChecker.py
    /hasher
      __init__.py
      fileHash.py
    mainProject.py
    /test
Run Code Online (Sandbox Code Playgroud)

我想从模块fileHash.py 中访问模块fileChecker.py。这是某种全局包。

一种方法是将路径附加到 sys.path。[顺便说一下,这是 PYTHONPATH 吗?]

分发项目时有什么解决方案?

  • 和上面一样吗?--> 但是在 PYTHONPATH 中可能存在同名模块的路径?
  • setuptools 能完成所有工作吗?

我怎样才能以一种漂亮而干净的方式实现它?

非常感谢。


更新:

另请参阅下面的答案 --> 当直接从其包目录中调用 fileHash.py(包括从文件导入 fileChecker 之类的导入)时,需要将项目的路径添加到 sys.path(如下所述)。

测试用例位于内/试验(见结构上方)也需要的路径添加到sys.path中,从内/测试时调用。

python python-import

8
推荐指数
1
解决办法
9473
查看次数

从父目录内的python模块导入到子目录内的jupyter笔记本文件

我有这样的文件结构:

project_folder/
     notebooks/
          notebook01.ipynb
          notebook02.ipynb
          ...
          notebookXY.ipynb
     module01.py
     module02.py
     module03.py
Run Code Online (Sandbox Code Playgroud)

在.ipynb文件notebook/夹内的文件中,我想从module01.py, module02.py和导入类和函数module03.py。

我在这个问题中找到了答案,可以在每个笔记本中使用以下代码行并每次将这些行作为第一个单元格运行:

import os
import sys
module_path = os.path.abspath(os.path.join('..'))
if module_path not in sys.path:
    sys.path.append(module_path)
Run Code Online (Sandbox Code Playgroud)

请问有更好的方法吗?如果.ipynb文件notebooks/夹中有很多文件,我是否必须在每个文件的开头粘贴这些代码行?有没有更好、更简约或更干净的方式?

python python-module python-import jupyter-notebook

8
推荐指数
2
解决办法
3855
查看次数

如何将另一个 python 脚本 (.py) 导入到主 python 文件中

有没有办法将多个python文件导入一个主python文件?

我有一堆 py 文件,每个文件都必须在主 python 文件中运行,并将数据保存到 json 文件中。

这是我尝试过的,它给了我一个错误。

import light.py as light 
Run Code Online (Sandbox Code Playgroud)

错误:

Traceback (most recent call last):
File "<frozen importlib._bootstrap>", line 2218, in  _find_and_load_unlocked
AttributeError: 'module' object has no attribute '__path__'

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
File "/home/pi/Desktop/majorproject/pillar1.py", line 8, in <module>
import sensorkey.py as sensorkey
ImportError: No module named 'sensorkey.py'; 'sensorkey' is not a package
Run Code Online (Sandbox Code Playgroud)

我还尝试指定 py 文件的路径,但它也不起作用,并不断给出无效的语法错误。

import /home/pi/Desktop/json/light.py as light
Run Code Online (Sandbox Code Playgroud)

更新:我设法修复了导入错误,但现在,在导入这个 light.py 文件后,我必须将字典(键)中的某些键打印到这个新文件中,然后将其导出到 json 文件。我目前正在使用 TinyDB …

python json python-import

8
推荐指数
2
解决办法
5万
查看次数

如何从python3中的子文件夹导入模块(空__init__.py)

我想从子文件夹中的文件调用函数.我宁愿做静态的.我使用空__init__.py文件,因为我已经读过,在简单的情况下,它们可能是空的(我的可能不是更简单),或者从3.5开始,我根本不需要它们.但我愿意填补它们.

我有以下文件结构:

test
??? callfoo.py   (main)
??? __init__.py  (empty)
??? folder
    ??? submodule.py
    ??? __init__.py (empty)
Run Code Online (Sandbox Code Playgroud)

callfoo.py:

#import statement wanted

def main():
    foo()

if __name__ == "__main__":
        main()
Run Code Online (Sandbox Code Playgroud)

submodule.py

def foo():
    print('foo')
Run Code Online (Sandbox Code Playgroud)

对于我尝试过的import语句:

import test.folder.submodule
from test.folder import submodule
from test.folder.submodule import foo

每一个导致ModuleNotFoundError: No module named 'test.folder' 我在这里有点困惑,因为它们是直接从文档中获取的

import .folder.submodule- > invalid syntax importlib.import_module('test.folder.submodule') ModuleNotFoundError:没有名为'test.folder'的模块

这有效:

import importlib.util
spec = importlib.util.spec_from_file_location("submodule", "/home/.../test/folder/submodule.py")
foo = importlib.util.module_from_spec(spec)
spec.loader.exec_module(foo)
Run Code Online (Sandbox Code Playgroud)

但我真的不想动态地这样做,特别是对于几个文件.

这个ModuleNotFoundError:没有名为x的模块处理我的错误消息,但是根据我的判断,它没有处理子文件夹(对于我来说,submodule.py它在同一级别上工作正常callfoo.py) …

python-import python-3.x

8
推荐指数
1
解决办法
7232
查看次数

导入 mlxtend python 的问题

我是python的新手,如果这是一个愚蠢的问题,我很抱歉。

我正在尝试使用 mlxtend,并已使用 pip 安装它。Pip 确认它已安装(当我输入“pip install mlxtend”时,它指出要求已经满足)。但是,当我尝试使用“import mlxtend as ml”在 python 中导入 mlxtend 时,出现错误:“ModuleNotFoundError:没有名为‘mlxtend’的模块”。我使用相同的过程来安装和导入 pandas 和 numpy,它们都有效。有什么建议吗?

我应该注意到,我已经从 mlxtend(先验和关联规则)中删除了我需要的特定代码,这是有效的,但不是一个好的长期策略!

我正在使用 python 版本 3.6.5。

谢谢!

python python-import importerror mlxtend

8
推荐指数
2
解决办法
2万
查看次数

如何从python3中的同级目录导入?

我有以下文件结构:

bot
??? LICENSE.md
??? README.md
??? bot.py # <-- file that is executed from command line
??? plugins
?   ??? __init__.py
?   ??? debug.py
?   ??? parsemessages.py
??? helpers
?   ??? __init__.py
?   ??? parse.py
?   ??? greetings.py
??? commands
    ??? __init__.py
    ??? search.py
Run Code Online (Sandbox Code Playgroud)

bot.py当从命令行执行时,将加载plugins目录中的所有内容。

我想从目录plugins/parsemessages.py导入,所以我这样做:parsehelpers

# parsemessages.py
from ..helpers import parse
parse.execute("string to be parsed")
Run Code Online (Sandbox Code Playgroud)

我python3 bot.py从命令行运行。

我收到以下错误:

File "/home/bot/plugins/parsemessages.py", line 2, in <module>
  from ..helpers import parse
ValueError: …
Run Code Online (Sandbox Code Playgroud)

siblings python-import importerror python-3.x

8
推荐指数
1
解决办法
2391
查看次数

在joblib`Parallel`上下文中对`matlab`对象进行腌制时出错

我正在从Python上下文中并行运行一些Matlab代码(我知道,但这就是要发生的事情),并且遇到了涉及的导入错误matlab.double。相同的代码在中可以正常工作multiprocessing.Pool,因此我很难弄清楚问题出在哪里。这是一个最小的再现测试用例。

import matlab
from multiprocessing import Pool
from joblib import Parallel, delayed

# A global object that I would like to be available in the parallel subroutine
x = matlab.double([[0.0]])

def f(i):
    print(i, x)

with Pool(4) as p:
    p.map(f, range(10))
    # This prints 1, [[0.0]]\n2, [[0.0]]\n... as expected

for _ in Parallel(4, backend='multiprocessing')(delayed(f)(i) for i in range(10)):
    pass
# This also prints 1, [[0.0]]\n2, [[0.0]]\n... as expected

# Now run with default `backend='loky'`
for _ in …
Run Code Online (Sandbox Code Playgroud)

python matlab python-import python-3.x joblib

8
推荐指数
1
解决办法
344
查看次数

如何在 Google Colab 中获取已安装软件包的系统路径?

我试图让我的代码可以从 Github 安装。

在我的 github 文件夹中,我有一些具有相对导入的脚本。我尝试运行脚本,但出现错误。

根据这个SO question Run script within python package

编辑 - 如果您的 script.py 使用相对导入(并且您不想更改它),那么除了将该根路径放入环境之外,别无他法。如果需要,您可以在脚本中执行此操作,而不是在 cmd shell 或批处理文件中进行设置。但它需要在某个地方完成。以下是在脚本中设置环境路径的方法:

import sys
sys.path.append(r'..\..\path\to\my\package')
import package.other.anotherscript
Run Code Online (Sandbox Code Playgroud)

所以现在我想弄清楚我安装的 Github 的路径是什么,但我似乎找不到它。它似乎已正确安装,但它只是不存在。

这是我的 Github

https://github.com/Santosh-Gupta/MedicalQA

这些是我的脚本,它们具有相对导入

https://github.com/Santosh-Gupta/MedicalQA/tree/master/Scripts

这是我用来安装我的 Github 的。

!pip install https://github.com/Santosh-Gupta/MedicalQA/archive/master.zip
Run Code Online (Sandbox Code Playgroud)

我尝试使用

print(sys.path)
os.listdir('lib')
os.listdir('lib/python3.6')
os.listdir('lib/python3.6/site-packages')
Run Code Online (Sandbox Code Playgroud)

任何其他用于获取具有相对导入的脚本和代码以在 python 包中工作的信息将不胜感激。

python python-import jupyter-notebook google-colaboratory

8
推荐指数
1
解决办法
6277
查看次数