Python异步编程深度解析(python generator异步编程)

liftword5个月前 (01-24)技术文章48
#小伙伴们,大家好!今天猿梦家要带大家探索一个Python中的高级话题——异步编程。
异步编程是处理并发任务的一种高效方式,特别适合I/O密集型任务,比如网络请求、文件读写等。
通过异步编程,我们可以让程序在等待I/O操作的同时,继续执行其他任务,从而提高程序的整体性能。
接下来,我们就一起揭开异步编程的神秘面纱吧!

## 一、异步编程初探

**异步编程**,简单来说,就是一种非阻塞的编程模式。
在同步编程中,任务是一个接一个地顺序执行,如果某个任务耗时较长,就会阻塞后面的任务。
而在异步编程中,当一个任务开始执行后,如果它需要等待(比如等待网络响应),
程序不会停下来等它,而是会继续执行其他任务。当等待的任务完成后,程序再回来处理它的结果。

### 代码示例:同步与异步对比

```python
# 同步方式
import time

def fetch_data_sync():
    print("开始请求数据...")
    time.sleep(3)  # 模拟网络请求耗时
    print("数据请求完成!")

fetch_data_sync()
fetch_data_sync()

上面的代码会按顺序执行两次fetch_data_sync函数,总共耗时约6秒。

# 异步方式(使用asyncio库)
import asyncio

async def fetch_data_async():
    print("开始请求数据...")
    await asyncio.sleep(3)  # 模拟异步网络请求耗时
    print("数据请求完成!")

asyncio.run(fetch_data_async())
asyncio.run(fetch_data_async())

注意,上面的异步代码不能直接这样运行,我们会稍后讲解正确的异步调用方式。但通过这个例子,大家可以感受到异步编程的“并行”效果,即两个任务几乎同时开始,而不是一个接一个。

小贴士asyncio是Python标准库中的异步I/O框架,它提供了编写异步代码的基础设施。

二、asyncio基础

1. 异步函数与await

异步函数使用async def关键字定义,而不是普通的def。在异步函数内部,我们可以使用await关键字来等待一个异步操作的结果。

async def my_async_function():
    print("开始异步操作...")
    await asyncio.sleep(1)  # 异步等待1秒
    print("异步操作完成!")

2. 事件循环

事件循环是异步编程的核心机制,它负责调度和执行异步任务。在Python中,我们可以使用asyncio.get_event_loop()来获取当前事件循环,或者使用asyncio.run()来自动管理事件循环的运行和关闭。

async def main():
    await my_async_function()

# 使用asyncio.run()自动管理事件循环
asyncio.run(main())

小贴士:在Python 3.7及以上版本中,推荐使用asyncio.run()来简化事件循环的管理。

3. 异步任务的并发执行

要并发执行多个异步任务,我们可以使用asyncio.create_task()函数来创建任务,并将它们添加到事件循环中。

async def task1():
    await asyncio.sleep(2)
    print("Task 1 completed!")

async def task2():
    await asyncio.sleep(1)
    print("Task 2 completed!")

async def main():
    task1_obj = asyncio.create_task(task1())
    task2_obj = asyncio.create_task(task2())
    
    # 等待所有任务完成
    await task1_obj
    await task2_obj

asyncio.run(main())

上面的代码会并发执行task1task2,总耗时约2秒,而不是3秒。

三、异步编程实战

实战1:异步网络请求

异步编程在网络请求中非常有用,因为它可以让我们在等待网络响应的同时,继续处理其他任务。下面是一个使用aiohttp库进行异步网络请求的示例。

import aiohttp
import asyncio

async def fetch(session, url):
    async with session.get(url) as response:
        return await response.text()

async def main():
    url = "http://example.com"
    async with aiohttp.ClientSession() as session:
        html = await fetch(session, url)
        print(html)

asyncio.run(main())

小贴士aiohttp是一个强大的异步HTTP客户端库,它比内置的requests库更适合异步编程。

实战2:异步文件读写

异步文件读写也是异步编程的一个常见应用场景。Python的aiofiles库提供了异步文件操作的接口。

import aiofiles
import asyncio

async def read_file(path):
    async with aiofiles.open(path, mode='r') as f:
        content = await f.read()
        return content

async def write_file(path, content):
    async with aiofiles.open(path, mode='w') as f:
        await f.write(content)

async def main():
    path = "example.txt"
    content = "Hello, async world!"
    
    # 异步写入文件
    await write_file(path, content)
    
    # 异步读取文件
    result = await read_file(path)
    print(result)

asyncio.run(main())

小贴士:在进行异步文件操作时,确保使用的是aiofiles库提供的异步接口,而不是标准的文件操作接口。

四、异步编程中的异常处理

在异步编程中,异常处理同样重要。我们可以使用try...except块来捕获异步函数中的异常,并且可以使用asyncio.Taskcancel()方法来取消任务。

async def faulty_function():
    await asyncio.sleep(1)
    raise ValueError("Something went wrong!")

async def main():
    try:
        await faulty_function()
    except ValueError as e:
        print(f"Caught an exception: {e}")

asyncio.run(main())

小贴士:当异步任务抛出异常时,事件循环会停止该任务的执行,并传播异常。因此,在编写异步代码时,务必做好异常处理。

五、总结与展望

小伙伴们,今天我们一起探索了Python异步编程的奥秘。通过异步编程,我们可以更高效地处理并发任务,提高程序的整体性能。在实际应用中,异步编程广泛应用于网络请求、文件读写、数据库操作等场景。希望大家能够掌握异步编程的基本概念和方法,并在实践中不断运用和巩固。

接下来,大家可以尝试自己编写一些异步代码,比如实现一个异步的HTTP服务器、异步处理多个文件等。记得动手敲代码哦!有问题随时在评论区问猿小哥哦。祝大家学习愉快,Python学习节节高!

相关文章

Python并发编程:三个核心概念及Python并发编程模型

前言在正式进入Python并发编程的相关类库、语法的介绍之前,还是继续来对并发编程中的几个核心概念做进一步的阐述说明,从而在理念上对后续的学习有一个全局性的指导。同时,简单介绍一下Python中的并发...

await 协议,一个能实现高效异步编程的世界最牛的Python知识点

点击蓝字 关注我们《await 协议,一个能实现高效异步编程的世界最牛的Python知识点》1.引言你是否曾为 Python 异步编程的复杂性而苦恼?回调地狱、繁琐的语法……是不是让你望而却步?今天,...

Python 30 天突破:函数基础深度剖析

在前四天的学习中,我们逐步构建起了 Python 编程的基础框架,掌握了多种数据结构与基本语法元素。今天,我们将踏入函数的世界,函数是 Python 编程中极为关键的组成部分,它能够让我们将代码模块化...

Python学习路线图:新手如何从基础到高级实践

Hi~今天小狮妹想跟大家分享的是:Python的学习路径。如果按时间线来划分,学习Python的过程可以大致地分为五个阶段,对于Python初学者来说,可以跟着以下五个阶段来制定学习计划,循序渐进,相...

36个经典Python案例!掌握编程精髓

Python,作为一种高效、灵活的编程语言,广泛应用于数据科学、Web开发、自动化运维以及人工智能等多个领域。它简洁的语法和强大的功能使其成为初学者和专业开发者的首选工具。本文将介绍36个常用的Pyt...

深入剖析 Python 中的 if __name__ == "__main__": 语句

在 Python 编程世界中,if __name__ == "__main__": 语句扮演着至关重要的角色,用于控制代码块的执行。它如同智慧的门卫,仅允许代码块在脚本直接运行时执行,而当脚本作为模块...