同步有序,异步无序
技巧:
几乎所有的异步框架都将异步编程模型简化:一次只允许处理一个事件。故而有关异步的讨论几乎都集中在了单线程内。
- 如果某事件处理程序需要长时间执行,所有其他部分都会被阻塞。
所以,一旦采取异步编程,每个异步调用必须“足够小”,不能耗时太久。如何拆分异步任务成了难题。
0.协程理解:
一份详细的asyncio入门教程
[进阶]-Python3 异步编程详解(史上最全篇)
Future
future是一个数据结构,表示还未完成的工作结果。事件循环可以监视Future对象是否完成。从而允许应用的一部分等待另一部分完成一些工作。Future
获取Futrue里的结果
future表示还没有完成的工作结果。事件循环可以通过监视一个future对象的状态来指示它已经完成。future对象有几个状态:
- Pending
- Running
- Done
- Cancelled
创建future的时候,task为pending,事件循环调用执行的时候当然就是running,调用完毕自然就是done,如果需要停止事件循环,就需要先把task取消,状态为cancel。
Task
task是Future的一个子类,它知道如何包装和管理一个协程的执行。任务所需的资源
可用时,事件循环会调度任务允许,并生成一个结果,从而可以由其他协程消费。
event_loop 事件循环:程序开启一个无限的循环,程序员会把一些函数注册到事件循环上。当满足事件发生的时候,调用相应的协程函数。
coroutine 协程:协程对象,指一个使用async关键字定义的函数,它的调用不会立即执行函数,而是会返回一个协程对象。协程对象需要注册到事件循环,由事件循环调用。
task 任务:一个协程对象就是一个原生可以挂起的函数,任务则是对协程进一步封装,其中包含任务的各种状态。
async/await 关键字:python3.5 用于定义协程的关键字,async定义一个协程,await用于挂起阻塞的异步调用接口。
启动一个协程:
- import asyncio
- async def foo():
- print("这是一个协程")
- if __name__ == '__main__':
- loop = asyncio.get_event_loop()
- try:
- print("开始运行协程")
- coro = foo()
- print("进入事件循环")
- loop.run_until_complete(coro)
- finally:
- print("关闭事件循环")
- loop.close()
原文链接:https://blog.csdn.net/ronon77/article/details/84854402
————————————————
- 在内部wait()使用一个set保存它创建的Task实例。因为set是无序的所以这也就是我们的任务不是顺序执行的原因。wait的返回值是一个元组,包括两个集合,分别表示已完成和未完成的任务。wait第二个参数为一个超时值
达到这个超时时间后,未完成的任务状态变为pending,当程序退出时还有任务没有完成此时就会看到如下的错误提示。
gather的使用
- gather的作用和wait类似不同的是。
1.gather任务无法取消。
2.返回值是一个结果列表
3.可以按照传入参数的 顺序,顺序输出。
———————————————
1.Aiohttp的ClientSession理解:
你使用async
以及await关键字将函数异步化。在hello()中实际上有两个异步操作:
首先异步获取相应,然后异步读取响应的内容。Aiohttp推荐使用ClientSession作为主要的接口发起请求。
ClientSession允许在多个请求之间保存cookie以及相关对象信息。
Session(会话)在使用完毕之后需要关闭,关闭Session是另一个异步操作,所以每次你都需要使用[async with]关键字。一旦你建立了客户端session,你可以用它发起请求。这里是又一个异步操作的开始。
上下文管理器的with语句可以保证在处理session的时候,总是能正确的关闭它。
要让你的程序正常的跑起来,你需要将他们加入事件循环中。
所以你需要创建一个asyncio loop的实例, 然后将任务加入其中
- 例子:
- import asyncio
- from asyncio import sleep
-
- import aiohttp
-
- async def get_page():
- async with aiohttp.ClientSession() as session:
- # async with session.get('https://www.baidu.com') as resp:
- async with session.get('https://blog.csdn.net/u014595019/article/details/52295642') as resp:
- print(resp.status)
- print(await resp.text())
- await session.close()
-
- loop = asyncio.get_event_loop()
- # 执行多个函数任务队列
- tasks = [get_page(),sleep(5), get_page()]
-
- # asyncio.wait 并发协程
- loop.run_until_complete(asyncio.wait(tasks))
-
- # asyncio.gather 并发协程
- # loop.run_until_complete(asyncio.gather(tasks))
-
-
- # 执行单个函数
- # loop.run_until_complete(get_page())
- loop.close()
在用asyncio.wait 执行时, tasks任务队列里的sleep(5),不会报错,会异步执行等待5秒,程序就自然结束运行,
在asyncio.gather 执行sleep(5),报错: