python进阶七 Python其他高级语法

一 With语句和上下文管理器1.1 with语句文件操作回顾# 1、以写的方式打开文件fopen(1.txt,w)# 2、写入文件内容f.write(hello world)# 3、关闭文件f.close()代码说明: 文件使用完后必须关闭因文件对象会占用操作系统的资源并且操作系统同一时间能打开的文件数量也是有限的这种写法可能出现一定的安全隐患错误代码如下:# 1、以读的方式打开文件fopen(1.txt,r)# 2、写入文件内容f.write(hello world)# 3、关闭文件f.close()运行结果① 由于文件读写时都有可能产生IOError一旦出错后面的f.close()就不会调用。② 为了保证无论是否出错都能正确地关闭文件我们可以使用try … finally来解决try…except…finally解决文件操作异常安全写法, 代码如下:try:# 1、以读的方式打开文件fopen(1.txt,r)# 2、读取文件内容f.write(xxxxx)exceptIOErrorase:print(文件操作出错,e)finally:# 3、关闭文件f.close()结果with语句try-except-finally语句缺点代码过于冗长, 不易用易忘上下文管理器with语句该机制简单、更安全的处理资源和异常特点with 语句执行完成后自动调用关闭文件操作即使出现异常也会自动调用关闭文件操作实例代码# 1、以写的方式打开文件withopen(1.txt,w)asf:# 2、读取文件内容f.write(hello world)1.2 上下文管理器一个类只要实现了__enter__()和__exit__()这个两个方法通过该类创建的对象我们就称之为上下文管理器上下文管理器可以使用 with 语句with语句之所以这么强大背后是由上下文管理器做支撑的刚才使用 open 函数创建的文件对象就是就是一个上下文管理器对象大白话with 管理的对象就是上下文管理器 with xxx as 后面的操作的对象就是被管理的对象定义上下文管理器类,模拟文件操作定义一个File类实现enter() 和exit()方法然后使用 with 语句来完成操作文件classMyFile(object):def__init__(self,file_name,file_model):self.file_namefile_name self.file_modelfile_model self.fpNone# 文件句柄def__enter__(self):print(这是上文)self.fpopen(self.file_name,self.file_model)returnself.fpdef__exit__(self,exc_type,exc_val,exc_tb):print(这是下文)self.fp.close()# 0 什么是上下文管理器 with 管理的对象就是上下文管理器# 1 定义一个File类# 2 重写魔法方法 __enter__() 和 __exit__()方法# 3 然后使用 with 语句来完成操作文件if__name____main__:# myobj MyFile(./1.txt, r)withMyFile(./1.txt,r)asf:filedataf.read()print(filedata--,filedata)一个类只要实现了__enter__()和__exit__()这个两个方法通过该类创建的对象我们就称之为上下文管理器__enter__表示上文方法需要返回一个操作文件对象__exit__表示下文方法with语句执行完成会自动执行即使出现异常也会执行该方法二 Python生成器2.1 什么是生成器根据程序员制定的规则循环生成数据当条件不成立时则生成数据结束。数据不是一次性全部生成出来而是使用一个再生成一个可以节约大量的内存。创建生成器的方式① 生成器推导式 ② yield 关键字2.2 生成器推导式创建生成器# 注意1括号代表 这是一个生成器不是元组# 注意2括号里面写的是数据的生成规则返回一个对象# 对象内不是存的数据而是产生数据的规则my_generator(i*2foriinrange(5))# 根据注意2print(my_generator)# next获取生成器下一个值# value next(my_generator)# print(value)# 遍历生成器forvalueinmy_generator:print(value)生成器相关函数next 函数获取生成器中的下一个值for 循环遍历生成器中的每一个值2.3 yield生成器只要在def函数里面看到有 yield 关键字那么就是生成器defmygenerater(n):foriinrange(n):print(开始生成...)yieldiprint(完成一次...)if__name____main__:gmygenerater(2)# 获取生成器中下一个值# result next(g)# print(result)# while True:# try:# result next(g)# print(result)# except StopIteration as e:# break# # for遍历生成器, for 循环内部自动处理了停止迭代异常使用起来更加方便foriing:print(i)2.4 生成器的应用场景 – 数据迭代器dataloader的封装importmathdefdataset_loader(bath_size):# 1 读歌词withopen(./jaychou_lyrics.txt,r)asfile:linesfile.readlines()# 2 统计共有多少条歌词lyrics_numberlen(lines)# 3 计算共有多少个批次 math.ceil向上取整 math.floor向下取整batch_numbermath.ceil(lyrics_number/bath_size)# 4 遍历每一个 batchforidxinrange(batch_number):yieldlines[idx*bath_size:idx*bath_sizebath_size]if__name____main__:dataloaderdataset_loader(8)fordataindataloader:print(data)print(创建生成器(数据加载器) 为AI专业课做准备 End)很多模型都是一个批次一个批次的给模型喂数据来训练模型的。构建数据迭代器每8个条数据8个样本8个数据的给模型喂数据