标签: python-import

从另一个python程序运行python程序(有一定的要求)

假设我有两个python脚本A.py和B.py.我正在寻找一种方法从A中运行B,方式是:

  1. B认为它是__main__(因此if __name__=="__main__"B 中的块中的代码将运行)
  2. B实际上不是__main__(所以它不会,例如,覆盖"__main__"sys.modules中的条目)
  3. B中引发的异常传播到A(即,可以用exceptA中的条款捕获).
  4. 这些异常(如果未捕获)会在B中生成正确的回溯引用行号.

我尝试了各种技术,但似乎都没有满足我的所有要求.

  • 使用子进程模块中的工具意味着B中的异常不会传播到A.
  • execfile("B.py", {}) 运行B,但它不认为它是主要的.
  • execfile("B.py", {'__name__': '__main__'})让B.py认为它是主要的,但它似乎也搞砸了异常回溯打印,因此回溯指的是A中的线(即真实的__main__).
  • 使用imp.load_sourcewith __main__作为名称几乎可以工作,除了它实际上修改了sys.modules,从而踩到了现有的值__main__

有什么方法可以得到我想要的东西吗?

(我这样做的原因是因为我正在对现有的库进行一些清理.这个库没有真正的测试套件,只有一组产生特定输出的"示例"脚本.我试图利用它们作为测试以确保我的清理不会影响库执行这些示例的能力,因此我想从我的测试套件中运行每个示例脚本.我希望能够在测试脚本中看到这些脚本的异常,以便测试脚本可以报告失败的类型,而不是仅在示例脚本引发某些异常时报告通用的SubprocessError.)

python subprocess python-import execfile

5
推荐指数
1
解决办法
634
查看次数

当主脚本在子模块中时,正确初始化sys.path

sys.path根据文档,第一个条目是当前脚本的目录.在以下设置中,我想更改此默认值.想象一下以下目录结构:

src/
    core/
        stuff/
        tools/
            tool1.py
            tool2.py
    gui/
        morestuff/
        gui.py
Run Code Online (Sandbox Code Playgroud)

脚本tool*.py和gui.py旨在为运行脚本,如下所示:

python src/core/tools/tool2.py
python src/gui/gui.py
Run Code Online (Sandbox Code Playgroud)

现在所有工具都从中导入src.core.stuff,并且需要GUI gui.morestuff.这意味着sys.path[0]应该指向src/,但它指向src/core/tools/或src/gui/默认.

我可以调整sys.path[0]每个脚本(使用类似下面的结构,例如,在开头gui.py):

if __name__ == '__main__':
    if sys.path[0]: sys.path[0] = os.path.dirname(os.path.abspath(sys.path[0]))
Run Code Online (Sandbox Code Playgroud)

但是,这有点多余,对于拥有数千个脚本的成熟代码库来说,这将变得乏味.我也知道-m开关:

python -m gui.gui
Run Code Online (Sandbox Code Playgroud)

但这需要当前目录src/.

有没有更好的方法来实现所需的结果,例如通过修改__init__.py文件?

编辑:这是为Python 2.7:

~$ python -V
Python 2.7.3
Run Code Online (Sandbox Code Playgroud)

python module path python-import

5
推荐指数
2
解决办法
2240
查看次数

setup.py之后的Python ImportError

安装我的python项目setup.py并在终端中执行它后,我得到以下错误:

...
from ui.mainwindow import MainWindow
  File "/usr/local/lib/python2.7/dist-packages/EpiPy-0.1-py2.7.egg/epipy/ui/mainwindow.py", line 9, in <module>
    from model.sir import SIR
ImportError: No module named model.sir
Run Code Online (Sandbox Code Playgroud)

...

我们假设我们的项目有以下结构cookies:

.
??? setup.py
??? src
    ??? a
    ?   ??? aa.py
    ?   ??? __init__.py
    ??? b
    ?   ??? bb.py
    ?   ??? __init__.py
    ??? __init__.py
    ??? main.py
Run Code Online (Sandbox Code Playgroud)

文件: cookies/src/main.py

from a import aa

def main():
    print aa.get_aa()
Run Code Online (Sandbox Code Playgroud)

文件 cookies/src/a/aa.py

from b import bb

def get_aa():
    return bb.get_bb()
Run Code Online (Sandbox Code Playgroud)

文件: cookies/src/b/bb.py

def get_bb():
    return 'bb'
Run Code Online (Sandbox Code Playgroud)

文件: cookies/setup.py …

python pip easy-install python-import

5
推荐指数
0
解决办法
1582
查看次数

递归导入:'import'与'from ... import ...'

我有两个文件需要使用彼此不同的功能.

file1.py:

import file2   # from file2 import y2

def x1():
    print "x1"

def x2():
    print "x2"
    file2.y2()
Run Code Online (Sandbox Code Playgroud)

file2.py:

import file1   # from file1 import x1

def y1():
    file1.x1()
    print "y"

def y2():
    print "y2"

if __name__ == "__main__":
    y1()
Run Code Online (Sandbox Code Playgroud)

我想知道为什么使用import file1工作,但从file1(from file1 import x1)导入只是特定的功能不是?

Traceback (most recent call last):
  File "file2.py", line 1, in <module>
    from file1 import x1
  File "file1.py", line 1, in <module>
    import file2
  File "file2.py", line 1, in <module> …
Run Code Online (Sandbox Code Playgroud)

python python-import

5
推荐指数
1
解决办法
2466
查看次数

Python ImportError:无法导入名称工具

我在运行脚本时遇到了这个问题,它似乎错过了一些依赖关系,但是如下所示。安装缺少的库后,这没有任何意义。

[ericfoss@maverick-fossum-ddns-net packages]$ python -c "import utils"
[ericfoss@maverick-fossum-ddns-net packages]$ python -c "import requests"
Traceback (most recent call last):
  File "<string>", line 1, in <module>
  File "/usr/lib/python2.7/site-packages/requests/__init__.py", line 64, in <module>
    from . import utils
ImportError: cannot import name utils
[ericfoss@maverick-fossum-ddns-net packages]$ 
Run Code Online (Sandbox Code Playgroud)

知道为什么utils可以导入,但requests不能导入吗?

python python-import python-2.7

5
推荐指数
2
解决办法
3万
查看次数

PEP302需要实施细节

我试图使用基于PEP302的导入钩子来捕获模块的导入,所以我可以有一些加密的.py文件,这些文件将在运行时加载.我在https://github.com/citrusbyte/python-obfuscation上关注python模糊处理的模板.

基本思路很简单:使用插入到sys.meta_path中的Finder()函数拦截import命令,该函数捕获一个import指令.Finder检查模块是否是我们想要自己处理的模块,如果是,则返回自定义Loader对象.否则它会忽略导入.自定义加载程序在sys.modules中创建一个条目,并读入python模块源并使用PEP302文档中定义的exec将其添加到新创建的模块中.

这很好用,但我有一个我无法弄清楚的具体情况.假设3个文件,main,foo和bar.main设置导入钩然后导入foo和bar.foo本身进口吧.所以情况是:

main:
  set_import_hook
  import foo
  import bar
foo:
  import bar
bar:
  <irrelevant>
Run Code Online (Sandbox Code Playgroud)

我在Finder函数中将调试语句设置为钩子,以查看它的传递内容.

当我有未加密的代码(即我不处理的代码并自己添加到sys.modules时,打印输出显示以下行为:

Finder (foo)
Finder (bar) called from inside foo when foo itself is loaded
Finder (bar) called from main after returning from the import foo
Run Code Online (Sandbox Code Playgroud)

当我自己处理和加载foo和bar文件时,这是行为:

Finder (foo)
Finder (foo.bar) tries to load bar in the context of foo
Finder (bar) called from main after returning from import foo
Run Code Online (Sandbox Code Playgroud)

这会导致sys.modules中存在两个bar版本.如果你在两种情况下查看sys.modules.keys(),在第一种情况下它只显示foo和bar.在第二种情况下,它显示foo,foo.bar和bar.

我不明白这种行为.创建模块的过程如PEP 302文档中所述.这是我使用的:

    module = sys.modules.setdefault(name, imp.new_module(name))
    module.__file__ = filename
    module.__path__ = [os.path.dirname(os.path.abspath(file.name))]
    module.__loader__ …
Run Code Online (Sandbox Code Playgroud)

python python-import

5
推荐指数
1
解决办法
73
查看次数

如何从包中的同级模块导入?

我的软件包具有以下结构:

myPackage
 -- __init__.py <-- empty
 -- signal.py
 -- plot.py
Run Code Online (Sandbox Code Playgroud)

signal.py包含:

from plot import plot_signal

def build_filter():
   ...

def other_function():
   plot_signal()
Run Code Online (Sandbox Code Playgroud)

plot.py包含:

from signal import build_filter

def plot_signal():
   ...

def other_function():
   build_filter()
Run Code Online (Sandbox Code Playgroud)

然后,我就有了使用此程序包的脚本,该程序包包含以下内容:

import myPackage as mp

mp.plot.plot_signal()
Run Code Online (Sandbox Code Playgroud)

运行此命令时,出现属性错误: module 'myPackage' has no attribute 'plot'

我不确定为什么将其plot作为包中的模块时将其称为属性,还是将其myPackage称为模块。

然后,我尝试导入我的包并以其他方式调用该函数:

from myPackage import plot, signal

plot.plot_signal()
Run Code Online (Sandbox Code Playgroud)

但是,现在我收到一个导入错误:cannot import name 'build_filter'追溯是指plot.py它试图build_filter()从同级模块导入函数的位置。

我认为这与以下事实有关:两个模块彼此使用函数,并递归地导入另一个模块。

组织此程序包以使同级模块可以相互导入功能的正确方法是什么?

python module python-module python-import python-packaging

5
推荐指数
1
解决办法
1174
查看次数

sklearn无法导入名称_ellipsoid

sklearn在我的计算机上已经工作半年了,我已经停止使用它了,现在却没有。我在program.py中的import语句遇到问题:

from sklearn import tree
Run Code Online (Sandbox Code Playgroud)

看起来真的很乱:

Traceback (most recent call last):   File "E:/DecisionModel.py", line 1, in <module>
    from sklearn import tree   File "C:\Users\AppData\Local\Programs\Python\Python35\lib\site-packages\sklearn\__init__.py", line 57, in <module>
    from .base import clone   File "C:\Users\AppData\Local\Programs\Python\Python35\lib\site-packages\sklearn\base.py", line 12, in <module>
    from .utils.fixes import signature   File "C:\Users\AppData\Local\Programs\Python\Python35\lib\site-packages\sklearn\utils\__init__.py", line 11, in <module>
    from .validation import (as_float_array,   File "C:\Users\AppData\Local\Programs\Python\Python35\lib\site-packages\sklearn\utils\validation.py", line 18, in <module>
    from ..utils.fixes import signature   File "C:\Users\AppData\Local\Programs\Python\Python35\lib\site-packages\sklearn\utils\fixes.py", line 403, in <module>
    from scipy.stats import rankdata   File "C:\Users\AppData\Local\Programs\Python\Python35\lib\site-packages\scipy\stats\__init__.py", line 344, in <module>
    from .stats import …
Run Code Online (Sandbox Code Playgroud)

python numpy python-import scikit-learn

5
推荐指数
1
解决办法
7169
查看次数

在python3中使用importlib进行动态导入时出错

我一直在尝试importlib与python3(3.6)一起使用。

目录结构

main.py

#Note: I will only modify line 4 that uses importlib
import importlib
if __name__ == '__main__':
    print("In main.py")
    hello = importlib.import_module('hello', package='./')
    print("Loaded hello.py")
    hello.hello()
Run Code Online (Sandbox Code Playgroud)

你好

def hello():
    print('Hello world')
Run Code Online (Sandbox Code Playgroud)

文件夹/hello.py

def hello():
    print('Hello world in folder')
Run Code Online (Sandbox Code Playgroud)

观察结果

如果我做

hello = importlib.import_module('hello', package='./') 要么

hello = importlib.import_module('hello')

它从根文件夹导入hello.py并进行打印hello world。

如果我做

hello = importlib.import_module('folder.hello')

它从根文件夹导入folder / hello.py并打印hello world in folder。

但是如果我这样做

hello = importlib.import_module('hello', package='folder') 要么

hello = …

import python-import dynamic-import python-3.x python-importlib

5
推荐指数
1
解决办法
3511
查看次数

在创建从中继承的对象时在Python中进行条件导入

我创建了一个连接到其他库(livelossplot)的包.它有很多可选的依赖项(深度学习框架),我不想强​​迫人们安装它们.

现在我使用条件导入,本着以下精神:

try:
    from .keras_plot import PlotLossesKeras
except ImportError:
    # import keras plot only if there is keras
    pass
Run Code Online (Sandbox Code Playgroud)

但是,这意味着它会导入大型库,即使不打算使用它们也是如此.问题是:只有在创建特定对象时才能导入库?

对于Python函数,它很简单:

def function_using_keras():
   import keras
   ...
Run Code Online (Sandbox Code Playgroud)

从其他类继承的类有什么好的做法?

在定义对象之前,似乎需要导入父类:

from keras.callbacks import Callback
class PlotLossesKeras(Callback):
    ...
Run Code Online (Sandbox Code Playgroud)

python inheritance class python-import

5
推荐指数
1
解决办法
246
查看次数