# 异常处理
- 首先我们要理解什么叫做 **" 异常”**?
- 在程序运行过程中,总会遇到各种各样的问题和错误。
- 有些错误是我们编写代码时自己造成的:
- 还有一些错误,则是不可预料的错误,但是完全有可能发生的:
- 比如文件不存在、磁盘空间不足、网络堵塞、系统错误等等。
- 这些导致程序在运行过程中出现异常中断和退出的错误,我们统称为异常。大多数的异常都不会被程序处理,而是以错误信息的形式展现出来。
1 2 3
| 1/0 异常信息为:ZeroDivisionError: division by zero
|
- 异常的分类:
- 异常有很多种类型,Python 内置了几十种常见的异常,无需特别导入,直接就可使用。
- 需要注意的是,所有的异常都是异常类,首字母是大写的!
- 异常的危害:
- 如果程序中一旦出现了异常的语句代码,则该异常就会立即中断程序的运行!
- 因此:
- 为了保证程序的正常运行,提高程序健壮性和可用性。我们应当尽量考虑全面,将可能出现的异常进行处理,而不是留在那里,任由其发生。
- python 处理异常的机制:
- Python 内置了一套 try…except…finally(else)… 的异常处理机制,来帮助我们进行异常处理。其基本语法是:
1 2 3 4
| try: pass except Exception as ex: pass
|
- 机制说明:
- 首先,执行 try 子句(在关键字 try 和关键字 except 之间的语句)
- 如果没有异常发生,忽略 except 子句,try 子句执行后结束。
- 如果在执行 try 子句的过程中发生了异常,那么 try 子句余下的部分将被忽略。如果异常的类型和 except 之后的名称相符,那么对应的 except 子句将被执行。
1 2 3 4 5 6
| try: print("发生异常之前的语句正常执行") print(1/0) print("发生异常之后的语句不会被执行") except ZeroDivisionError as e: print(e)
|
- 如果程序发生的异常不在你的捕获列表中,那么依然会抛出别的异常:
1 2 3 4 5 6
| s1 = 'hello' try: int(s1) except IndexError as ex: print(ex)
|
- Exception 是什么?
- 在 Python 的异常中,有一个通用异常:
Exception
,它可以捕获任意异常。
- 思考:那么既然有这个什么都能管的异常,其他诸如 OSError、ZeroDivisionError 的异常是不是就可以不需要了?
- 当然不是!很多时候程序只会弹出那么几个异常,没有必要针对所有的异常进行捕获,那样的效率会很低。另外,根据不同的异常种类,制定不同的处理措施,用于准确判断错误类型,存储错误日志,都是非常有必要甚至强制的。
- 常见的异常类型:
异常名 |
解释 |
AttributeError |
试图访问一个对象没有的属性 |
IOError |
输入 / 输出异常 |
ImportError |
无法引入模块或包;多是路径问题或名称错误 |
IndentationError |
缩进错误 |
IndexError |
下标索引错误 |
KeyError |
试图访问不存在的键 |
KeyboardInterrupt |
Ctrl+C 被按下,键盘终止输入 |
NameError |
使用未定义的变量 |
SyntaxError |
语法错误 |
TypeError |
传入对象的类型与要求的不符合 |
UnboundLocalError |
试图访问一个还未被设置的局部变量 |
ValueError |
传入一个调用者不期望的值,即使值的类型是正确的 |
OSError |
操作系统执行错误 |
- Python 的异常机制具有嵌套处理的能力:
- 比如在函数 f3 () 调用 f2 (),f2 () 调用 f1 (),虽然是在 f1 () 出错了,但只需要在 f3 () 进行异常捕获,不需要每一层都捕获异常
1 2 3 4 5 6 7 8 9 10 11
| def f1(): return 10/0
def f2(): f1()
def f3(): f2()
f3()
|
1 2 3 4 5 6 7 8 9 10 11 12 13
| def f1(): return 10/0
def f2(): f1()
def f3(): f2()
try: f3() except Exception as e: print(e)
|
- try…excetion 的嵌套
- 之前我们说过,不是只使用通用的异常类 Exception 就万事大吉了,为了效率问题,我们需要对常见的异常信息进行精准的捕获,那么如果异常出现在用户层的话,则就需要对用户操作可能会出现的异常进行判断然后精准捕获了,如何操作呢?
- 如果一个异常没有与任何的 except 匹配,那么这个异常将会传递给上层的 try 中。也就是前面说的嵌套处理能力。直到程序最顶端如果还没有被捕获,那么将弹出异常。
1 2 3 4 5 6 7 8 9 10
| try: try: print("发生异常之前的语句正常执行") print(1/0) print("发生异常之后的语句不会被执行") except ValueError as e: print(e)
except ZeroDivisionError as e: print("里层没有抓好,只能辛苦我外层了")
|
- 或者使用一个try和多个except的形式:
-
1 2 3 4 5 6 7 8 9 10
| try: print("发生异常之前的语句正常执行") print(1/0) print("发生异常之后的语句不会被执行") except NameError as e: print(e) except ZeroDivisionError as e: print("我是第一个抓取到除零异常的") except (ValueError,ZeroDivisionError) as e: print("我是备胎")
|
- 或者在except后面跟一个元组,元组中包含多个异常类
1 2
| except (RuntimeError, TypeError, NameError): pass
|
- finally 和 else 子句
try except
语法还有一个可选的 else 子句,如果使用这个子句,那么必须放在所有的 except 子句之后。这个子句将在 try 子句没有发生任何异常的时候执行:
- 同样的,还有一个可选的 finally 子句。无论 try 执行情况和 except 异常触发情况如何,finally 子句都会被执行!
- 当然,else 和 finally 同时存在时:
1 2 3 4 5 6 7 8
| try: pass except: pass else: print("else") finally: print("finally")
|
- 主动抛出异常:raise
- 很多时候,我们需要主动抛出一个异常。Python 内置了一个关键字
raise
,可以主动触发异常。
- 疑问:
- 为什么要自己主动抛出异常?不嫌多事么?因为有的时候,你需要记录错误信息,然后将异常继续往上层传递,让上层去处理异常,如下:
1 2 3 4 5 6 7 8 9 10 11 12 13
| try: divNum = input('enter a divNum:') divNum = int(divNum)
try: 1/divNum except ZeroDivisionError as ex: print("记录异常日志: ", ex) print("但是我自己无法处理,只能继续抛出,看看上层能否处理(甩锅)") raise ValueError('非法录入') except Exception as e: print(e) print('用户录入非法数据,请重新输入!')
|
- 有时候,你需要主动弹出异常,作为警告或特殊处理:
-
1 2 3 4 5 6 7 8 9 10 11 12 13
| sex = int(input("Please input a number: "))
try: if sex == 1: print("这是个男人!") elif sex == 0: print("这是个女人!") else: print("好像有什么不符合常理的事情发生了!!") raise ValueError("非法的输入") except ValueError: print("这是个人妖!")
|
# 迭代器
在介绍迭代器之前,先说明下迭代的概念:
- 迭代:
- 通过 for 循环遍历 " 对象” 的每一个元素的过程。
- 这里的对象指的就是可迭代对象。因此记住:for 循环遍历的只能是可迭代的对象。
- 可迭代类型的对象:
- 在 Python 中,list/tuple/string/dict/set/bytes 都是可以迭代的数据类型 / 可迭代对象!
- 如何判定一个对象是否为可迭代对象呢?(了解)
- 可以通过 collections 模块的 Iterable 类型作用在 isinstance 中来判断一个对象是否可迭代
1 2
| from collections import Iterable print(isinstance('abc',Iterable))
|
-
迭代器
- 迭代器是一种可以被遍历的对象,并且能作用于 next () 函数。
- 性质:
- 迭代器对象从集合的第一个元素开始访问,直到所有的元素被访问完结束。迭代器只能往后遍历不能回溯,不像列表,你随时可以取后面的数据,也可以返回头取前面的数据。
- 迭代器通常要实现两个基本的方法:
iter()
和 next()
。
- 注意:
- 可迭代对象并不一定是迭代器!
- 常见的数据结构,字符串、列表、元组都属于可迭代对象,并不是迭代器!
- 如何创建一个迭代器呢?
- 字符串,列表或元组对象,甚至自定义对象都可用于创建迭代器:
-
思考:迭代器的作用是什么?
- 可迭代对象的优缺点:
- 可迭代对象的优点:可以直观查看里面的对象,如直接查看列表的内容
- 可迭代对象缺点:全部内容要加载至内存中,故占用内存
- 迭代器的优缺点:
- 优点:
- 提供了一种通用不依赖索引的迭代取值方式;
- 节省内存,迭代器在内存中相当于只占一个数据的空间:因为每次取值都上一条数据会在内存释放,加载当前的此条数据。
- 缺点:
- 因为有 next 方法,即只能往后取值,不能往前,取值不如按照索引的方式灵活,不能取指定的某一个值
- 无法预测迭代器的长度
-
总结:迭代器和可迭代的区别?
1 2 3 4 5
| 1.凡是可作用于for循环的对象都是可迭代类型;
2.凡是可作用于next()函数的对象都是迭代器类型;
3.list、dict、str等是可迭代的但不是迭代器,因为next()函数无法调用它们。可以通过iter()函数将它们转换成迭代器。
|
- 自定义迭代器
- 很多时候,为了让我们自己写的类成为一个迭代器,需要在类里实现
__iter__()
和 __next__()
方法
- 实际上,在使用 next () 函数的时候,调用的就是迭代器对象的
__next__
方法
- python 要求迭代器本身也是可迭代的,所以我们还要为迭代器实现
__iter__
方法,而 __iter__
方法要返回一个迭代器。
- 迭代器自身正是一个迭代器,所以迭代器的
__iter__
方法返回自身即可
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19
| class Squares: def __init__(self, start, stop): self.start = start self.stop = stop
def __iter__(self): return self
def __next__(self): if self.start > self.stop: raise (StopIteration) item = self.start**2 self.start += 1 return item
if __name__ == "__main__": for i in Squares(1, 5): print(i, end=" ")
|
# 推导式
- Python 语言有一种独特的语法,相当于语法糖的存在,可以帮你在某些场合写出比较精简酷炫的代码。但没有它,也不会有太多的影响。Python 语言有几种不同类型的推导式
- 列表推导式
- 列表推导式是一种快速生成列表的方式。其形式是用方括号括起来的一段语句,如下例子所示:
1 2 3 4 5 6 7
| alist = [x*2 for x in range(1,10)] print(alist)
alist = [] for x in range(1,10): alist.append(x*2) print(alist)
|
- 列表推导式要这么理解,首先执行 for 循环,对于遍历的每一个 x,代入 x*x 表达式中进行运算,将运算结果逐一添加到一个新列表内,循环结束,得到最终列表。它相当于下面的代码:
1 2 3 4
| alist = [] for x in range(1,10): alist.append(x*2) print(alist)
|
- 作用:
- 列表推导式为我们提供了一种在一行内实现较为复杂逻辑的生成列表的方法。其核心语法是用中括号 [] 将生成逻辑封装起来。当然列表推导式也有多样用法
- 增加条件语句
1 2 3 4 5 6 7 8 9
| alist = [x * x for x in range(1,11) if x % 2 == 0] print(alist)
alist_1 = [] for x in range(1,11): if x % 2 == 0: alist_1.append(x*x) print(alist_1)
|
1 2 3 4 5 6 7 8 9
| re = [a+b for a in '123' for b in 'abc'] print(re)
alist = [] for a in '123': for b in 'abc': alist.append(a+b) print(alist)
|
- 字典推导式
- 既然使用中括号 [] 可以编写列表推导式,那么使用大括号呢?你猜对了!使用大括号 {} 可以制造字典推导式!
1 2 3 4 5 6 7 8
| dic = {x:x**2 for x in [2,4,6]} print(dic)
''' dic = {} for x in [2,4,6]: dic[x] = x**2 '''
|
- 注意 x: x**2 的写法,中间的冒号,表示左边的是 key 右边的是 value。
- 集合推导式
- 大括号除了能用作字典推导式,还可以用作集合推导式,两者仅仅在细微处有差别。
1 2
| a = {x for x in 'aabbccddeeff'} print(a)
|
- 元组推导式
- 使用了中括号和大括号,那么使用圆括号,是不是元组推导式?想法不错,但事实却没有。圆括号在 Python 中被用作生成器的语法了,很快我们就会讲到,没有元组推导式。
1 2 3 4
| a = (x for x in 'aabbccddeeff') print(a)
|
# 生成器
- 在 Python 这门语言中,生成器毫无疑问是最有用的特性之一。
- 与此同时,也是使用的最不广泛的 Python 特性之一
- 究其原因,主要是因为,在其他主流语言里面没有生成器的概念。正是由于生成器是一个 “新” 的东西,所以,它一方面没有引起广大工程师的重视,另一方面,也增加了工程师的学习成本,最终导致大家错过了 Python 中如此有用的一个特性。那到底什么是生成器呢?
- 有时候,序列或集合内的元素的个数非常巨大,如果全制造出来并放入内存,对计算机的压力是非常大的。
- 比如,假设需要获取一个 10**20 次方如此巨大的数据序列,把每一个数都生成出来,并放在一个内存的列表内,如果使用这种粗暴的方式,你能确保你的计算机会有如此大的内存么?
- 那么如果元素可以按照某种算法推算出来,需要该元素的话那就计算到哪个元素,那么就可以在循环的过程中不断推算出后续的元素,而不必创建完整的元素集合,从而节省大量的空间。在 Python 中,这种一边循环一边计算出元素的机制,称为生成器:generator。
- 因此:生成器是一种特殊的迭代器,生成器自动实现了 “迭代器协议”(即__iter__和 next 方法),不需要再手动实现两方法。
- 下面,我们一起来看看如何创建一个生成器!2 种方式
- 生成器推导式 (忽略)
- for 循环,yield 关键字
- 生成器推导式:
1 2
| a = (x for x in 'aabbccddeeff') print(a)
|
- 可以通过 next () 函数获得 generator 的下一个返回值:
1 2 3 4
| a = (x for x in 'aabbccddeeff') print(next(a)) print(next(a)) print(next(a))
|
1 2 3
| g = (x for x in range(5)) for i in g: print(i)
|
- yield 关键字创建生成器 (重点)
- 在 Python 中,使用 yield 返回的函数会变成一个生成器(generator)。 在调用生成器的过程中,每次遇到 yield 时函数会暂停并保存当前所有的运行信息,返回 yield 的值。并在下一次执行 next () 方法时从当前位置继续运行。下面重点理解 yield 关键字的使用:
- yield 是一个类似 return 的关键字,只是这个函数返回的是个生成器
- 当你调用这个函数的时候,函数内部的代码并不立马执行 ,这个函数只是返回一个生成器对象
- 当你使用 for 进行遍历的时候或者调用 next 函数后,函数中的代码才会执行
- 简单示例代码:函数体通过 for 循环结合 yield 返回一个生成器
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15
| def createGenerator(): for i in range(5): print('我是循环体!') yield i*i g = createGenerator() print(g)
v1 = next(g) print(v1)
v2 = next(g) print(v2)
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14
| def yieldTest(): i = 0 while i < 3: temp = yield i print(temp) i += 1 obj = yieldTest() v1 = next(obj) print(v1)
v2 = next(obj) print(v2)
|
# 装饰器 (了解)
- 装饰器(Decorator):
- 从字面上理解,就是装饰对象的器件。
- 就是可以在不修改原有代码的情况下,为被装饰的对象增加新的功能或者附加限制条件。
- 装饰器有很多种,有函数的装饰器,也有类的装饰器。装饰器在很多语言中的名字也不尽相同,它体现的是设计模式中的装饰模式。
- 装饰器的语法是将 @装饰器名,放在被装饰对象上面。
1 2 3 4 5 6 7 8 9 10 11 12 13
| def outer(f): def inner(): f() print('注册功能') return inner
@outer def func(): print('登录功能')
func()
|
- 在进行装饰器的介绍之前,我们必须先明确几个概念和原则:
- 首先,Python 程序是从上往下顺序执行的,而且碰到函数的定义代码块是不会立即执行的,只有等到该函数被调用时,才会执行其内部的代码块
- 其次,由于顺序执行的原因,如果你真的对同一个函数定义了两次,那么,后面的定义会覆盖前面的定义。因此,在 Python 中代码的放置位置是有区别的,不能随意摆放,通常函数体要放在调用的语句之前。
- 虚拟场景
- 有一个大公司,下属的基础平台部负责内部应用程序及 API 的开发。另外还有上百个业务部门负责不同的业务,这些业务部门各自调用基础平台部提供的不同函数,也就是 API 处理自己的业务,情况如下:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15
| def f1(): print('业务部门1的数据接口......') def f2(): print('业务部门2的数据接口......') def f3(): print('业务部门3的数据接口......') def f100(): print('业务部门100的数据接口......')
f1() f2() f3() f100()
|
- 公司还在创业初期时,基础平台部就开发了这些函数。由于各种原因,比如时间紧,比如人手不足,比如架构缺陷,比如考虑不周等等,没有为函数的调用进行安全认证。现在,公司发展壮大了,不能再像初创时期的 “草台班子” 一样将就下去了,基础平台部主管决定弥补这个缺陷,于是:
- 第一天:主管叫来了一个运维工程师,工程师跑上跑下逐个部门进行通知,让他们在代码里加上认证功能,然后,当天他被开除了。
- 第二天:主管叫来了一个 python 自动化开发工程师。哥们是这么干的,只对基础平台的代码进行重构,让 N 个业务部门无需做任何修改。这哥们很快也被开了,连运维也没得做。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23
| def f1(): xxx print('业务部门1的数据接口......') def f2(): xxx print('业务部门2的数据接口......') def f3(): xxx print('业务部门3的数据接口......') def f100(): xxx print('业务部门100的数据接口......')
f1() f2() f3() f100()
|
- 第三天:主管又换了个开发工程师。他是这么干的:定义个认证函数,在原来其他的函数中调用它,代码如下:
-
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21
| def cheak(): pass def f1(): cheak() print('业务部门1的数据接口......') def f2(): cheak() print('业务部门2的数据接口......') def f3(): cheak() print('业务部门3的数据接口......') def f100(): cheak() print('业务部门100的数据接口......')
f1() f2() f3() f100()
|
- 但是主管依然不满意,不过这一次他解释了为什么。
- 主管说:写代码要遵循开放封闭原则,简单来说,已经实现的功能代码内部不允许被修改,但外部可以被扩展。如果将开放封闭原则应用在上面的需求中,那么就是不允许在函数f1 、f2、f3......f100的内部进行代码修改,但是可以在外部对它们进行扩展。
- 第四天:已经没有时间让主管找别人来干这活了,他决定亲自上阵,使用装饰器完成这一任务,并且打算在函数执行后再增加个日志功能。主管的代码如下:
-
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26
| def outer(func): def inner(): print('认证功能操作') result = func() return result return inner
@outer def f1(): print('业务部门1的数据接口......') @outer def f2(): print('业务部门2的数据接口......') @outer def f3(): print('业务部门3的数据接口......') @outer def f100(): print('业务部门100的数据接口......')
f1() f2() f3() f100()
|
- 使用装饰器@outer,也是仅需对基础平台的代码进行拓展,就可以实现在其他部门调用函数API之前都进行认证操作,并且其他业务部门无需对他们自己的代码做任何修改,调用方式也不用变。
- 装饰器机制分析
- 下面以 f1 函数为例,对装饰器的运行机制进行分析:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19
|
def outer(func): def inner(): print('给f1函数增添的安全认证功能') func() print('给f1函数增加了数据检测的功能') return inner @outer
def f1(): print('业务部门1的数据接口......') def f2(): print('f2函数的原有实现')
f1()
|
- 思考:为什么我们要搞一个 outer 函数一个 inner 函数这么复杂呢?一层函数不行吗?
- 请注意,@outer 这句代码在程序执行到这里的时候就会自动执行 outer 函数内部的代码,如果不封装一下,在业务部门还未进行调用的时候,就执行了,这和初衷不符。当然,如果你对这个有需求也不是不行。
- 带参装饰器
- 上面的例子中,f1 函数没有参数,在实际情况中肯定会需要参数的,函数的参数怎么传递的呢?
- 在 inner 函数的定义部分也加上一个参数,调用 func 函数的时候传递这个参数:
1 2 3 4 5 6 7 8 9 10 11
| def outer(func): def inner(n): print('新功能!') func(n) return inner
@outer def f1(name): print('f1的原有功能,f1的参数值为:',name)
f1('bobo')
|