前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >python包package和模块module导入深入详解

python包package和模块module导入深入详解

作者头像
小草AI
发布于 2019-06-18 07:52:16
发布于 2019-06-18 07:52:16
2.9K00
代码可运行
举报
运行总次数:0
代码可运行

源 / 恋习Python 文 / EarlGrey

作为一名新手Python程序员,你首先需要学习的内容之一就是如何导入模块或包。但是我注意到,那些许多年来不时使用Python的人并不是都知道Python的导入机制其实非常灵活。在本文中,我们将探讨以下话题:

  • 常规导入(regular imports)
  • 使用from语句导入
  • 相对导入(relative imports)
  • 可选导入(optional imports)
  • 本地导入(local imports)
  • 导入注意事项

常规导入

常规导入应该是最常使用的导入方式,大概是这样的:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
import sys

你只需要使用 import一词,然后指定你希望导入的模块或包即可。通过这种方式导入的好处是可以一次性导入多个包或模块:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
import os, sys, time

虽然这节省了空间,但是却违背了Python风格指南。Python风格指南建议将每个导入语句单独成行

有时在导入模块时,你想要重命名这个模块。这个功能很容易实现:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
import sys as system
print(system.platform)

上面的代码将我们导入的 sys模块重命名为 system。我们可以按照和以前一样的方式调用模块的方法,但是可以用一个新的模块名。也有某些子模块必须要使用点标记法才能导入。

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
import urllib.error

这个情况不常见,但是对此有所了解总是没有坏处的。

使用from语句导入

很多时候你只想要导入一个模块或库中的某个部分。我们来看看在Python中如何实现这点:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
from functools import lru_cache

上面这行代码可以让你直接调用 lru_cache。如果你按常规方式导入 functools,那么你就必须像这样调用 lru_cache

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
functools.lru_cache(*args)

根据你实际的使用场景,上面的做法可能是更好的。在复杂的代码库中,能够看出某个函数是从哪里导入的这点很有用的。不过,如果你的代码维护的很好,模块化程度高,那么只从某个模块中导入一部分内容也是非常方便和简洁的。

当然,你还可以使用from方法导入模块的全部内容,就像这样:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
from os import *

这种做法在少数情况下是挺方便的,但是这样也会打乱你的命名空间。问题在于,你可能定义了一个与导入模块中名称相同的变量或函数,这时如果你试图使用 os模块中的同名变量或函数,实际使用的将是你自己定义的内容。因此,你最后可能会碰到一个相当让人困惑的逻辑错误。标准库中我唯一推荐全盘导入的模块只有Tkinter

如果你正好要写自己的模块或包,有人会建议你在 __init__.py文件中导入所有内容,让模块或者包使用起来更方便。我个人更喜欢显示地导入,而非隐式地导入。

你也可以采取折中方案,从一个包中导入多个项:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
from os import path, walk, unlinkfrom os import uname, remove

在上述代码中,我们从 os模块中导入了5个函数。你可能注意到了,我们是通过多次从同一个模块中导入实现的。当然,如果你愿意的话,你也可以使用圆括号一次性导入多个项:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
from os import (path, walk, unlink, uname,                 remove, rename)

这是一个有用的技巧,不过你也可以换一种方式:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
from os import path, walk, unlink, uname,                 remove, rename

上面的反斜杠是Python中的续行符,告诉解释器这行代码延续至下一行。

相对导入

PEP 328介绍了引入相对导入的原因,以及选择了哪种语法。具体来说,是使用句点来决定如何相对导入其他包或模块。这么做的原因是为了避免偶然情况下导入标准库中的模块产生冲突。这里我们以PEP 328中给出的文件夹结构为例,看看相对导入是如何工作的:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
my_package/    __init__.py    subpackage1/        __init__.py        module_x.py        module_y.py    subpackage2/        __init__.py        module_z.py    module_a.py

在本地磁盘上找个地方创建上述文件和文件夹。在顶层的 __init__.py文件中,输入以下代码:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
from . import subpackage1from . import subpackage2

接下来进入 subpackage1文件夹,编辑其中的 __init__.py文件,输入以下代码:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
from . import module_xfrom . import module_y

现在编辑 module_x.py文件,输入以下代码:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
from .module_y import spam as ham
def main():    ham()

最后编辑 module_y.py文件,输入以下代码:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
def spam():    print( spam   * 3)

打开终端, cdmy_package包所在的文件夹,但不要进入 my_package。在这个文件夹下运行Python解释器。我使用的是IPython,因为它的自动补全功能非常方便:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
In [1]: import my_package
In [2]: my_package.subpackage1.module_xOut[2]: <module  my_package.subpackage1.module_x  from  my_package/subpackage1/module_x.py >
In [3]: my_package.subpackage1.module_x.main()spam spam spam

相对导入适用于你最终要放入包中的代码。如果你编写了很多相关性强的代码,那么应该采用这种导入方式。你会发现PyPI上有很多流行的包也是采用了相对导入。还要注意一点,如果你想要跨越多个文件层级进行导入,只需要使用多个句点即可。不过,PEP 328建议相对导入的层级不要超过两层

还要注意一点,如果你往 module_x.py文件中添加了 if__name__==‘__main__’,然后试图运行这个文件,你会碰到一个很难理解的错误。编辑一下文件,试试看吧!

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
from . module_y import spam as ham
def main():    ham()
if __name__ ==  __main__ :    # This won t work!    main()

现在从终端进入 subpackage1文件夹,执行以下命令:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
python module_x.py

如果你使用的是Python 2,你应该会看到下面的错误信息:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
Traceback (most recent call last):  File "module_x.py", line 1, in <module>    from . module_y import spam as hamValueError: Attempted relative import in non-package

如果你使用的是Python 3,错误信息大概是这样的:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
Traceback (most recent call last):  File "module_x.py", line 1, in <module>    from . module_y import spam as hamSystemError: Parent module    not loaded, cannot perform relative import

这指的是, module_x.py是某个包中的一个模块,而你试图以脚本模式执行,但是这种模式不支持相对导入

如果你想在自己的代码中使用这个模块,那么你必须将其添加至Python的导入检索路径(import search path)。最简单的做法如下:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
import syssys.path.append( /path/to/folder/containing/my_package )import my_package

注意,你需要添加的是 my_package的上一层文件夹路径,而不是 my_package本身。原因是 my_package就是我们想要使用的包,所以如果你添加它的路径,那么将无法使用这个包。

我们接下来谈谈可选导入。

可选导入(Optional imports)

如果你希望优先使用某个模块或包,但是同时也想在没有这个模块或包的情况下有备选,你就可以使用可选导入这种方式。这样做可以导入支持某个软件的多种版本或者实现性能提升。以github2包中的代码为例:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
try:    # For Python 3    from http.client import responsesexcept ImportError:  # For Python 2.5-2.7    try:        from httplib import responses  # NOQA    except ImportError:  # For Python 2.4        from BaseHTTPServer import BaseHTTPRequestHandler as _BHRH        responses = dict([(k, v[0]) for k, v in _BHRH.responses.items()])

lxml包也有使用可选导入方式:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
try:    from urlparse import urljoin    from urllib2 import urlopenexcept ImportError:    # Python 3    from urllib.parse import urljoin    from urllib.request import urlopen

正如以上示例所示,可选导入的使用很常见,是一个值得掌握的技巧

局部导入

当你在局部作用域中导入模块时,你执行的就是局部导入。如果你在Python脚本文件的顶部导入一个模块,那么你就是在将该模块导入至全局作用域,这意味着之后的任何函数或方法都可能访问该模块。例如:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
import sys  # global scope
def square_root(a):    # This import is into the square_root functions local scope    import math    return math.sqrt(a)
def my_pow(base_num, power):    return math.pow(base_num, power)
if __name__ ==  __main__ :    print(square_root(49))    print(my_pow(2, 3))

这里,我们将 sys模块导入至全局作用域,但我们并没有使用这个模块。然后,在 square_root函数中,我们将 math模块导入至该函数的局部作用域,这意味着 math模块只能在 square_root函数内部使用。如果我们试图在 my_pow函数中使用 math,会引发 NameError。试着执行这个脚本,看看会发生什么。

使用局部作用域的好处之一,是你使用的模块可能需要很长时间才能导入,如果是这样的话,将其放在某个不经常调用的函数中或许更加合理,而不是直接在全局作用域中导入。老实说,我几乎从没有使用过局部导入,主要是因为如果模块内部到处都有导入语句,会很难分辨出这样做的原因和用途。根据约定,所有的导入语句都应该位于模块的顶部

导入注意事项

在导入模块方面,有几个程序员常犯的错误。这里我们介绍两个。

  • 循环导入(circular imports)
  • 覆盖导入(Shadowed imports,暂时翻译为覆盖导入)

先来看看循环导入。

循环导入

如果你创建两个模块,二者相互导入对方,那么就会出现循环导入。例如:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
# a.pyimport b
def a_test():    print("in a_test")    b.b_test()
a_test()

然后在同个文件夹中创建另一个模块,将其命名为 b.py

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
import a
def b_test():    print( In test_b" )    a.a_test()
b_test()

如果你运行任意一个模块,都会引发 AttributeError。这是因为这两个模块都在试图导入对方。简单来说,模块 a想要导入模块 b,但是因为模块 b也在试图导入模块 a(这时正在执行),模块 a将无法完成模块 b的导入。我看过一些解决这个问题的破解方法(hack),但是一般来说,你应该做的是重构代码,避免发生这种情况

覆盖导入

当你创建的模块与标准库中的模块同名时,如果你导入这个模块,就会出现覆盖导入。举个例子,创建一个名叫 math.py的文件,在其中写入如下代码:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
import math
def square_root(number):    return math.sqrt(number)
square_root(72)

现在打开终端,试着运行这个文件,你会得到以下回溯信息(traceback):

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
Traceback (most recent call last):  File "math.py", line 1, in <module>    import math  File "/Users/michael/Desktop/math.py", line 6, in <module>    square_root(72)  File "/Users/michael/Desktop/math.py", line 4, in square_root    return math.sqrt(number)AttributeError: module  math  has no attribute  sqrt 

这到底是怎么回事?其实,你运行这个文件的时候,Python解释器首先在当前运行脚本所处的的文件夹中查找名叫 math的模块。在这个例子中,解释器找到了我们正在执行的模块,试图导入它。但是我们的模块中并没有叫 sqrt的函数或属性,所以就抛出了 AttributeError

总结

在本文中,我们讲了很多有关导入的内容,但是还有部分内容没有涉及。PEP 302中介绍了导入钩子(import hooks),支持实现一些非常酷的功能,比如说直接从github导入。Python标准库中还有一个importlib模块,值得查看学习。当然,你还可以多看看别人写的代码,不断挖掘更多好用的妙招。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2019-06-11,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 机器学习与python集中营 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
用了几年 Python,但你可能连这个都没学透
在 Python 中用的最多的可能就是 import 了,几乎我们写的每个 Python 脚本都是需要的,但这个 import 其实也有些讲究的,比如用不好很可能导致运行效率急剧下降,这里推荐一篇文章,对 import 的用法梳理得非常全面,希望对大家有帮助。
崔庆才
2019/07/04
7760
Python中常见的__init__.py是什么意思?详解Python import的方式和原理
工程模块化是指将具有一定共性的功能封装成一个模块,并对外暴露应用接口,方便其他工程直接调用而无需关注底层实现的思想,工程模块化可以避免工程中各种功能函数相互交杂、定义混乱不堪的情形,有助于提高系统可维护性。
润森
2022/09/22
1.3K0
Python模块化编程:面试题深度解析
模块化编程是构建大型、复杂Python项目的关键原则,它关乎代码组织、复用与维护的效率。在技术面试中,对模块化编程的理解与实践能力往往是考察候选者专业素养的重要维度。本篇博客将深入浅出地剖析Python模块化编程的核心概念、面试中常见的问题、易错点以及应对策略,结合代码示例,帮助您在面试中自信应对关于模块化编程的各类挑战。
Jimaks
2024/04/17
1180
Python 中的魔法文件:__init__.py
在 Python 中,__init__.py 文件是一个特殊的存在。它用于将一个目录标记为 Python 的包,允许进行模块导入和组织代码分层结构。
井九
2024/10/12
1780
python import 原理剖析
当你的 python 代码需要获取外部的一些功能(一些已经造好的轮子),你就需要使用到 import 这个声明关键字。import可以协助导入其他 module 。(类似 C 预约的 include)
zero000
2021/07/14
3.1K0
python import 原理剖析
python包相对导入
注意此时mobike成为一个python包。 在loc.py中导入utils.py该怎么办?
py3study
2020/01/02
2.1K0
Python创建包,导入包
《Python包》一节中已经提到,包其实就是文件夹,更确切的说,是一个包含“__init__.py”文件的文件夹。因此,如果我们想手动创建一个包,只需进行以下 2 步操作:
风之随想
2020/07/25
3.7K0
Python中的模块和包
模块可以包含可执行的语句和函数的定义,这些语句的目的是初始化模块,它们只在模块名第一次遇到 导入import语句时才执行(import语句是可以在程序中的任意位置使用的,且针对同一个模块很import 多次,为了防止你重复导入)
星陨1357
2023/03/14
8340
【Python】Python 包 ① ( Python 包引入 | Python 包概念 | Python 包结构 | 创建 Python 包 | 导入 Python 包 )
之前 介绍了 Python 模块 , 每个 Python 源码文件 , 都可以定义为一个 Python 模块 ;
韩曙亮
2023/10/11
8600
【Python】Python 包 ① ( Python 包引入 | Python 包概念 | Python 包结构 | 创建 Python 包 | 导入 Python 包 )
【Python3】Python模块与包
Python 模块(Module),是一个 Python 文件,以 .py 结尾,包含了 Python 对象定义和Python语句。
py3study
2020/01/02
8140
Python __init__.py 文
3. 编写Python代码(不建议在__init__中写python模块,可以在包中在创建另外的模块来写,尽量保证__init__.py简单)
py3study
2020/01/15
1.4K0
怎样合理利用 Python 的 Package
package 的定义很简单,在当面目录下有 __init__.py 文件的目录即为一个 package 。
杨丝儿
2022/03/01
3530
python模块和包
一个模块就是一个包含了python定义和声明的文件,文件名就是模块名字加上.py 的后缀。
超蛋lhy
2018/08/31
1.4K0
4.模块与包
下面我会以tbjx.py 为例来介绍模块的使用:文件名tbjx.py 模块名tbjx
changxin7
2019/09/10
8070
Python项目结构和组织
在Python中,如何将项目中的代码逻辑地组织到不同的文件/类中?这种情况在C#/Java等语言中很常见,想要了解Python项目中如何实现类似的结构。另外,在Python中是否存在“命名空间”,“项目”和“面向对象原则”,例如从其他类继承?
用户11021319
2024/07/09
2920
Python项目结构和组织
Python 的 import 是怎么工作的?
Python 的 import 是非常直观的,但即使这样,有时候你会发现,明明包就在那里,我们仍会遇到 ModuleNotFoundError,明明相对路径非常正确,就是报错
somenzz
2022/04/07
8030
Python 的 import 是怎么工作的?
Python模块与包:扩展功能、提高效率的利器
https://cloud.tencent.com/developer/article/2465647?shareByChannel=link
忆愿
2024/11/29
1320
Python模块与包:扩展功能、提高效率的利器
一文搞懂Python中的核心概念:导入,模块,包
Python作为一个解释器,一个程序,如果不导入任何外部模块或包,就做不了什么。理解Python如何导入模块和包将在几乎所有的场景中都很有帮助。
HuangWeiAI
2021/08/24
1.2K0
深入Python(2): __init__.py 用法
原文:http://www.2cto.com/kf/201204/129388.html python的每个模块的包中,都有一个__init__.py文件,有了这个文件,我们才能导入这个目录下的module。 那么,__init__.py还有什么别的功能呢? 其实,__init__.py里面还是可以有内容的,我们在导入一个包时,实际上导入了它的__init__.py文件。 我们可以再__init__.py文件中再导入其他的包,或者模块。 [python] import readers  import writers  import commands  import users  import meta  import auth  import admin  这样,当我们导入这个包的时候,__init__.py文件自动运行。帮我们导入了这么多个模块,我们就不需要将所有的import语句写在一个文件里了,也可以减少代码量。 不需要一个个去导入module了。 __init__.py 中还有一个重要的变量,叫做 __all__。我们有时会使出一招“全部导入”,也就是这样: from PackageName import * 这时 import 就会把注册在包 __init__.py 文件中 __all__ 列表中的子模块和子包导入到当前作用域中来。比如: #文件 __init__.py __all__ = ["Module1", "Module2", "subPackage1", "subPackage2"]
bear_fish
2018/09/20
8490
【Python】从基础到进阶(五):探究Python中的函数与模块
在前几篇文章中,我们已经学习了Python的基本语法、控制流以及数据操作等核心概念。这些知识使我们能够编写出简单但功能完备的程序。
空白诗
2024/08/29
1450
【Python】从基础到进阶(五):探究Python中的函数与模块
相关推荐
用了几年 Python,但你可能连这个都没学透
更多 >
领券
💥开发者 MCP广场重磅上线!
精选全网热门MCP server,让你的AI更好用 🚀
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档