如何衡量Python导入延迟

Question

我的django应用程序需要永远加载,所以我想找到一种方法来测量导入延迟,这样我就可以找到有问题的模块并让它懒得加载.

有明显的方法吗？我正在考虑调整import语句本身以产生延迟,但我不确定如何做到这一点.我想将导入树(或DAG？)与延迟一起使用是理想的,但只是一系列延迟和导入语句就足够了.

Answer 1

你可以重新定义的__import__内置功能来记录开始和结束时间(委托一切原来的内置__import__).这正是在 Python中的"调整进口声明"的方式:重新定义__import__!

编辑:这是一个简单的例子......:

import sys

import __builtin__
_orgimp = __builtin__.__import__

import logging
FORMAT = "%(asctime)-15s %(message)s"
logging.basicConfig(format=FORMAT, level=logging.INFO)

def __import__(name, *a):
  r = sys.modules.get(name)
  if r is not None: return r
  logging.info('import bgn %s', name)
  r = _orgimp(name, *a)
  logging.info('import end %s', name)
  return r
__builtin__.__import__ = __import__

import pyparsing

这显示在我的系统上:

2010-08-24 08:36:39,649 import bgn pyparsing
2010-08-24 08:36:39,652 import bgn weakref
2010-08-24 08:36:39,652 import bgn _weakref
2010-08-24 08:36:39,653 import end _weakref
2010-08-24 08:36:39,653 import end weakref
2010-08-24 08:36:39,654 import bgn copy
2010-08-24 08:36:39,655 import bgn org.python.core
2010-08-24 08:36:39,656 import end copy
2010-08-24 08:36:39,675 import end pyparsing

当然,您可以解析此日志以显示嵌套(哪个模块首先导入了其他模块)和 "尝试导入"失败(此处,org.python.core来自copy,无疑在try/ except语句中)以及每个模块的时间导入开始和结束(后者只有当它确实结束时,当然,如果它失败了 - 很容易用try/ finally或任何其他方式进行调整以获得你喜欢的确切行为! - ).