您现在的位置是：首页 > Python

当前栏目

Python基础11-迭代器,生成器

Python,基础,11,迭代,生成器

2025-03-13 21:27:18 时间

-曾老湿, 江湖人称曾老大。

-多年互联网运维工作经验，曾负责过大规模集群架构自动化运维管理工作。 -擅长Web集群架构与自动化运维，曾负责国内某大型金融公司运维工作。 -devops项目经理兼DBA。 -开发过一套自动化运维平台（功能如下）： 1)整合了各个公有云API，自主创建云主机。 2)ELK自动化收集日志功能。 3)Saltstack自动化运维统一配置管理工具。 4)Git、Jenkins自动化代码上线及自动化测试平台。 5)堡垒机，连接Linux、Windows平台及日志审计。 6)SQL执行及审批流程。 7)慢查询日志分析web界面。

迭代器介绍

什么是迭代器？

迭代器：指的是迭代取值的工具迭代：迭代是一个重复过程，每一次重复都是基于上一次的结果而来

# 错误例子，单纯的重复不是迭代
i=0
while True:
    print(i)

# 迭代：重复+每次重复都是基于上一次的结果而进行
l=['a','b','c']
i=0
while i < len(l):
    print(l[i])
    i+=1

为何要使用迭代器？

刚才我们实现的迭代器，只能适用于，字符串，列表，元组等数据类型，但是字典，就不合适了

迭代器提供了一种通用的且不依赖于索引的迭代取值方式

如何使用迭代器？

首先了解一个概念，并不是所有数据都阔以使用迭代器，只有可迭代对象才可以使用迭代器。

那么什么是可迭代对象呢？

可迭代的对象iterable：但凡内置有__iter__方法的对象都称之为可迭代的对象。

# 以下数据类型包括文件，我们挨个测试一番
a=1
b=1.1
c='hello'
d=['a','b']
e=('a','b')
j={'x':1}
g={1,2,3}
f=open('a.txt','w')

## 结论：可迭代的对象：str，list，tuple，dict，set,文件对象

# 执行可迭代对象下的__iter__方法，返回的值就是一个迭代器对象iterator
dic={'x':1,'y':2,'z':3}
iter_dic=dic.__iter__()
print(iter_dic)


# 迭代取值
dic={'x':1,'y':2,'z':3}
iter_dic=dic.__iter__()

print(iter_dic.__next__())
print(iter_dic.__next__())
print(iter_dic.__next__())
// 我们只有三个key，如果取第四次，就会报错，但是这是好事，我们可以把它当成是一个结束信号
print(iter_dic.__next__())

# 文件同样可以迭代
f=open('a.txt','rt',encoding='utf-8')
iter_f=f.__iter__()
print(iter_f.__next__())
print(iter_f.__next__())
print(iter_f.__next__())
print(iter_f.__next__())

迭代器使用

迭代器对象

既内置有__next__方法的对象，执行迭代器__next__方法可以不依赖索引取值
又内置有__iter__方法的对象，执行迭代器__iter__方法得到的仍然是迭代器本身

注意： 1.迭代器对象一定是可迭代的对象，而可迭代的对象却不一定是迭代器对象 2.文件对象本身就是一个迭代器对象

l=['a','b','c']
iter_l=l.__iter__() # 调用可迭代的对象__iter__得到的是迭代对象，
print(iter_l is iter_l.__iter__().__iter__().__iter__().__iter__().__iter__().__iter__())


# 迭代器取值
dic={'x':1,'y':2,'z':3}
iter_dic=iter(dic) # dic.__iter__()
print(next(iter_dic)) # iter_dic.__next__()
print(next(iter_dic))
print(next(iter_dic))
print(next(iter_dic))
print(next(iter_dic))

## 这么取会发现，全都是重复代码

# 使用循环取值
dic={'x':1,'y':2,'z':3}
iter_dic=iter(dic) # dic.__iter__()
while True:
    print(next(iter_dic)) # iter_dic.__next__()
    
# 如果一直取就会报错异常

# 捕捉异常方案
dic={'x':1,'y':2,'z':3}
iter_dic=iter(dic) # dic.__iter__()
while True:
    try:
        print(next(iter_dic)) #iter_dic.__next__()
    except StopIteration:
        break

注意：同一个迭代器只能完整地取完一次值

dic={'x':1,'y':2,'z':3}
iter_dic=iter(dic) # dic.__iter__()
while True:
    try:
        print(next(iter_dic)) #iter_dic.__next__()
    except StopIteration:
        break

print('==='*100)

while True:
    try:
        print(next(iter_dic)) #iter_dic.__next__()
    except StopIteration:
        break

如果想再次取值，那就重新赋值

dic={'x':1,'y':2,'z':3}
iter_dic=iter(dic) # dic.__iter__()
while True:
    try:
        print(next(iter_dic)) #iter_dic.__next__()
    except StopIteration:
        break

print('==='*100)

iter_dic=iter(dic) #dic.__iter__()
while True:
    try:
        print(next(iter_dic)) #iter_dic.__next__()
    except StopIteration:
        break

for循环底层原理分析

for本质应该称之为迭代器循环

工作原理： 1. 先调用in后面那个对象的__iter__方法，将其变成一个迭代器对象 2. 调用next(迭代器)，将得到的返回值赋值给变量名k 3. 循环往复直到next(迭代器)抛出异常，for会自动捕捉异常然后结束循环

注意： 从for角度，可以分辨出但凡可以被for循，环循环取值的对象都是可迭代的对象

dic={'x':1,'y':2,'z':3}

for k in dic:
    print(k)

for k in dic:
    print(k)

迭代器总结

优点： 1.提供一种通用的且不依赖于索引的迭代取值方式 2.同一时刻在内存中只存在一个值，更节省内存

## 在python3中，直接做成迭代器对象，返回的是内存地址
l=[1,2,2,3,3,3,3,3,3,3,3,3,3,3]
iter_l=iter(l)
print(iter_l)

names = ['qls', 'lls', 'cls']
res=map(lambda x:x+"_SB",names)
print(res)

## 对于内存保护
obj=range(1,1000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000)
print(obj)

缺点： 1.取值不如按照索引的方式灵活，（不能取指定的某一个值，而且只能往后取） 2.无法预测迭代器的长度

自定义迭代器

生成器介绍

emm...看到标题，我们要讲一个自定义的迭代器，结果mmp，为啥就变成了生成器的介绍呢？

Because，生成器就是一种自定义的迭代器，本质就是迭代器

新概念：yield

def func():
    print('first')
    yield 
    
func()

但凡函数内包含yield关键字，调用函数不会执行函数体代码

def func():
    print('first')
    # yield


func()

但是，它会得到一个返回值，该返回值就是生成器对象

def func():
    print('first')
    yield

g=func()
print(g)

所以，现在我们就会自己自定义迭代器了，只要在函数里面来一个yield，然后调用该函数得到这个函数的返回值即可。

yield后面可以跟返回值，类似于return

区别： 如果用return返回，一个函数只能返回一次，但是如果要用yield，只要next一次就能返回一个值

def func():
    print('first')
    yield 1
    print('second')
    yield 2
    print('third')
    yield 3
    print('fourth')

g=func()
print(g)
print(g.__iter__().__iter__() is g)

调用迭代器

def func():
    print('first')
    yield 1
    print('second')
    yield 2
    print('third')
    yield 3
    print('fourth')

g=func()
# print(g)
# print(g.__iter__().__iter__() is g)

res1=next(g) #会触发函数的执行，直到碰到一个yield停下来，并且将yield后的值当作本次next的结果返回
print(res1)

一直调用，一直爽

def func():
    print('first')
    yield 1
    print('second')
    yield 2
    print('third')
    yield 3
    print('fourth')

g=func()
# print(g)
# print(g.__iter__().__iter__() is g)

res1=next(g) #会触发函数的执行，直到碰到一个yield停下来，并且将yield后的值当作本次next的结果返回
print(res1)
res2=next(g)
# print(res2)
res3=next(g)
# print(res3)
res4=next(g)

练习：实现range功能

def my_range(start,stop,step=1):
    while start < stop: # 3 < 3
        yield start
        start+=step #start=3

obj=my_range(1,5,2) # 1 3

print(next(obj))
print(next(obj))
# 取干净了就报错
print(next(obj))

表达式yield应用（了解）

yield的表达式形式的应用: x=yield

喂狗：

def dog(name):
    print('狗哥 %s 准备开吃' %name)
    food_list=[]
    while True:
        food=yield food_list #  food=yield='肉包子'
        print('%s 吃了 %s' %(name,food))
        food_list.append(food)

g=dog('qls')

# 强调：针对表达式形式的yield的使用，第一步必须让函数先暂停到一个yield的位置，才能进行传值操作
next(g) # 张开狗嘴，让生成器先暂停到yield的位置，准备接收外部传进来的值
res1=next(g) #g.send(None)
print(res1)

res2=g.send('屎包子') # 1. 先为当前暂停位置的yield赋值 2. next(生成器)直到再次碰到一个yield停下来，然后其的值当做本次next的结果
# print(res2)

res3=g.send('肉包子')
# print(res3)

res4=g.send('泔水')
print(res4)

yield关键字总结

总结yield:

0.只能在函数中使用。
1.yield提供了一种自定义迭代器的解决方案。
2.yield可以保存函数的暂停的状态。
3.yield对比return。
- 3.1相同点：都可以返回值，值的类型与个数都没有限制。
- 3.2不同点：yield可以返回多次值，而return只能返回一次值函数就结束了。

生成器表达式

回顾列表表达式

l=[i**2 for i in range(1,6) if i > 3]
print(l)

生成器表达式

# 生成器表达式
g=(i**2 for i in range(1,6) if i > 3)
# print(g)
print(next(g))
print(next(g))
print(next(g))

# 统计文件中的字符数量
with open(r'/Users/driverzeng/Desktop/PYTHON/01 装饰器.py','rt',encoding='utf-8') as f:
    data=f.read()
    print(len(data))

## 但是这样会出问题，如果文件过大，可能会导致内存溢出

# 使用for循环一行一行的读
with open(r'/Users/driverzeng/Desktop/PYTHON/01 装饰器.py','rt',encoding='utf-8') as f:
    res=0
    for line in f:
        res+=len(line)
    print(res)

## 但是麻烦

# 使用生成器表达式
with open(r'/Users/driverzeng/Desktop/PYTHON/01 装饰器.py','rt',encoding='utf-8') as f:
    g=(len(line) for line in f)
    print(sum(g))

猜你喜欢

pycharm配置tensorflow环境_python3.6对应的tensorflow版本
常用Python库_编程代码大全
python 快速读取压缩包内文件
Python 编程 | 连载 12 - Python 数据类型转换
Python 编程 | 连载 06 - 格式化与转义字符
Python入门：Anaconda和Pycharm的安装和配置
pycharm选中一行代码快捷键_python代码自动对齐
Python 编程 | 连载 09 - 列表、元组和字符串切片
python虚拟环境virtualenv_怎样用pycharm写代码
python re.compile() 详解——Python正则表达式「建议收藏」
Python基础18-异常处理
Python升级之路( Lv14 ) 并发编程初识
使用Python验证并利用Redis未授权漏洞
pycharm怎么看函数源代码_python查看第三方库的源码
Python 学生信息管理系统——文章中源码100%真实有效—–如何将类、初始化属性、模块、循环判断、静态方法等一系列知识点结合起来做一个项目「建议收藏」
地球科学领域Python工具合集
Python 链接/操作 MongoDB 数据库
python线程间通信的方式_android 线程间通信
pycharm配置Python环境_用虚拟机在D盘创建一个虚拟环境
一对兔子从出生后第三个月起每个月_兔子繁衍问题python

Python程序教程