0

0

asyncio 如何在 gather 中只取消超时任务但保留其他结果

冷漠man

冷漠man

发布时间:2026-01-25 10:36:10

|

849人浏览过

|

来源于php中文网

原创

应使用 asyncio.wait + done/pending 分离处理:启动 task 后调用 asyncio.wait(tasks, timeout=5.0),从 done 提取结果,对 pending 显式 cancel;封装为 timeout_gather 函数可复用,注意协程内捕获 CancelledError 做清理。

asyncio 如何在 gather 中只取消超时任务但保留其他结果

asyncio.gather 超时后如何避免取消全部任务

直接用 asyncio.wait_for 包裹整个 asyncio.gather,会导致超时后所有子任务一并被 cancel——这通常不是你想要的。真正需要的是:只中断超时的那几个,其余已完成或正在运行的任务结果照常返回。

用 asyncio.wait + done/pending 分离处理

asyncio.wait 不会主动 cancel 未完成任务,它只帮你区分哪些已结束、哪些还在跑。结合 return_when=asyncio.FIRST_COMPLETED 或手动控制超时,就能实现“只放弃超时项,保留已有结果”。

  • 启动所有协程为 task:tasks = [asyncio.create_task(coro) for coro in coros]
  • asyncio.wait(tasks, timeout=5.0) 等待指定时间
  • done 集合中用 task.result() 提取成功结果;对 pending 中的 task 显式调用 task.cancel()(仅清理,不影响已 done 的)
  • 注意:pending 里的 task 若后续自行完成,其结果不会自动加入返回值——你得决定是否 await 它们(通常不等,否则就失去超时意义)

封装成可复用的 timeout_gather 函数

下面这个轻量封装能替代原生 gather,行为更可控:

async def timeout_gather(*coros, timeout=None):
    if timeout is None:
        return await asyncio.gather(*coros)
    tasks = [asyncio.create_task(c) for c in coros]
    done, pending = await asyncio.wait(tasks, timeout=timeout)
    results = []
    for t in done:
        try:
            results.append(t.result())
        except Exception as e:
            results.append(e)  # 保留异常,而非抛出
    for t in pending:
        t.cancel()
    return results

调用方式和 gather 一致:results = await timeout_gather(coro_a(), coro_b(), timeout=3.0)。每个位置的结果对应原始顺序,失败/超时项以异常对象或 None 占位(可根据需要调整)。

刺鸟创客
刺鸟创客

一款专业高效稳定的AI内容创作平台

下载

容易忽略的细节:task.cancel() 后的异常捕获与资源清理

被 cancel 的 task 如果在 await 某个 IO 操作(如 asyncio.sleep、HTTP 请求),会抛出 CancelledError。若没在协程内捕获,可能污染日志或导致未关闭连接。

  • 推荐在每个被 gather 的协程里加 try/except CancelledError 块,做必要清理(如关闭 client session
  • asyncio.shield() 不能用于防 cancel——它只防外层取消,对 wait 中的 pending 无作用
  • 如果某个协程本身含长时间 CPU 密集操作,asyncio 无法中断它,timeout 只能作用于 await 点,这点和线程不同

超时逻辑本质是“放弃等待”,不是“强制终止执行”。真要中止不可中断的计算,得靠协程自己轮询 asyncio.current_task().cancelled() 并主动退出。

相关专题

更多
session失效的原因
session失效的原因

session失效的原因有会话超时、会话数量限制、会话完整性检查、服务器重启、浏览器或设备问题等等。详细介绍:1、会话超时:服务器为Session设置了一个默认的超时时间,当用户在一段时间内没有与服务器交互时,Session将自动失效;2、会话数量限制:服务器为每个用户的Session数量设置了一个限制,当用户创建的Session数量超过这个限制时,最新的会覆盖最早的等等。

315

2023.10.17

session失效解决方法
session失效解决方法

session失效通常是由于 session 的生存时间过期或者服务器关闭导致的。其解决办法:1、延长session的生存时间;2、使用持久化存储;3、使用cookie;4、异步更新session;5、使用会话管理中间件。

747

2023.10.18

cookie与session的区别
cookie与session的区别

本专题整合了cookie与session的区别和使用方法等相关内容,阅读专题下面的文章了解更详细的内容。

88

2025.08.19

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

482

2023.08.10

http500解决方法
http500解决方法

http500解决方法有检查服务器日志、检查代码错误、检查服务器配置、检查文件和目录权限、检查资源不足、更新软件版本、重启服务器或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

395

2023.11.09

http请求415错误怎么解决
http请求415错误怎么解决

解决方法:1、检查请求头中的Content-Type;2、检查请求体中的数据格式;3、使用适当的编码格式;4、使用适当的请求方法;5、检查服务器端的支持情况。更多http请求415错误怎么解决的相关内容,可以阅读下面的文章。

416

2023.11.14

HTTP 503错误解决方法
HTTP 503错误解决方法

HTTP 503错误表示服务器暂时无法处理请求。想了解更多http错误代码的相关内容,可以阅读本专题下面的文章。

2095

2024.03.12

http与https有哪些区别
http与https有哪些区别

http与https的区别:1、协议安全性;2、连接方式;3、证书管理;4、连接状态;5、端口号;6、资源消耗;7、兼容性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2058

2024.08.16

c++ 根号
c++ 根号

本专题整合了c++根号相关教程,阅读专题下面的文章了解更多详细内容。

25

2026.01.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Java 教程
Java 教程

共578课时 | 50.7万人学习

国外Web开发全栈课程全集
国外Web开发全栈课程全集

共12课时 | 1.0万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号