0

0

SQLAlchemy异步会话管理:优化PostgreSQL连接池与会话关闭

DDD

DDD

发布时间:2025-10-07 11:58:12

|

875人浏览过

|

来源于php中文网

原创

sqlalchemy异步会话管理:优化postgresql连接池与会话关闭

本文深入探讨了SQLAlchemy异步会话在PostgreSQL中连接持久性的问题。我们将解析SQLAlchemy连接池的工作机制,解释为何数据库连接在会话关闭后仍可能保持开放,并指导如何通过配置pool_size参数来管理连接池大小。同时,文章强调了使用上下文管理器进行异步会话管理的最佳实践,避免冗余的session.close()调用,确保高效且正确的资源释放。

1. 理解数据库连接持久性:为何连接不立即关闭?

在使用SQLAlchemy与PostgreSQL进行异步交互时,开发者可能会观察到一个现象:即使代码逻辑上已经“关闭”了数据库会话,但通过数据库工具查看,仍有多个连接保持开放状态。这并非异常,而是SQLAlchemy连接池(Connection Pooling)机制的正常行为,旨在优化性能和资源利用。

数据库连接的建立和关闭是相对耗时的操作。为了避免每次请求都重新建立连接的开销,SQLAlchemy默认会启用连接池。连接池会在后台维护一定数量的数据库连接,当应用程序需要连接时,它会从池中获取一个可用的连接;当会话结束时,该连接并不会真正关闭,而是被归还到连接池中,供后续请求复用。这种机制显著提高了应用程序的响应速度和效率。

2. SQLAlchemy连接池机制详解

SQLAlchemy的连接池是其核心组件之一,尤其在异步环境中,通过create_async_engine创建的引擎默认就集成了连接池功能。

  • 连接池的作用

    • 性能提升:减少了连接建立和断开的开销。
    • 资源管理:限制了同时打开的数据库连接数量,防止资源耗尽。
    • 连接复用:已建立的连接可以被多个会话复用。
  • pool_size 参数: 连接池会维护一个最小数量的空闲连接,这个数量可以通过 pool_size 参数进行配置。默认情况下,SQLAlchemy的连接池大小通常为5。这意味着即使没有活跃的会话在使用连接,连接池也会尝试保持5个连接处于开放状态,以备不时之需。

    要调整连接池的大小,应在创建异步引擎时通过 create_async_engine 函数设置 pool_size 参数。

    示例代码:配置连接池大小

    from sqlalchemy.ext.asyncio import create_async_engine
    
    # 配置一个连接池,最大保持10个空闲连接
    db_engine = create_async_engine(
        '',
        echo=False,
        future=True,
        pool_size=10,  # 设置连接池大小为10
        max_overflow=5 # 允许连接池在高峰期临时超出pool_size的连接数
    )
    • pool_size: 连接池中保持的固定连接数。当所有连接都被占用时,如果未达到 pool_size + max_overflow,将创建新连接。
    • max_overflow: 允许连接池在 pool_size 基础上额外创建的最大连接数。例如,pool_size=10, max_overflow=5 意味着连接池最多可以有15个活跃连接。

3. 异步会话的正确管理与关闭

在SQLAlchemy的异步编程中,使用上下文管理器(async with 语句)是管理会话和连接的推荐方式。它确保了资源的正确获取和释放。

Quinvio AI
Quinvio AI

AI辅助下快速创建视频,虚拟代言人

下载

考虑以下原始代码片段:

from sqlalchemy.ext.asyncio import AsyncSession, create_async_engine, async_sessionmaker

db_engine = create_async_engine('', echo=False, future=True)
async_session = async_sessionmaker(db_engine, class_=AsyncSession, expire_on_commit=False)


async def get_session() -> AsyncSession:
    async with async_session() as session:
        yield session
        await session.close() # 这一行是冗余的!

上述代码中,await session.close() 这一行是多余的,并且可能导致误解。

  • 上下文管理器的作用:当使用 async with async_session() as session: 语句时,SQLAlchemy的上下文管理器会自动处理会话的生命周期。这意味着当代码块执行完毕或发生异常退出时,上下文管理器会自动调用会话的 close() 方法。对于从连接池获取的会话,close() 操作实际上是将连接归还到连接池中,而不是真正关闭底层的数据库连接。

  • 优化后的代码示例: 因此,正确的做法是完全依赖上下文管理器,移除显式的 session.close() 调用。

    from sqlalchemy.ext.asyncio import AsyncSession, create_async_engine, async_sessionmaker
    
    # 配置连接池大小(示例,可根据实际需求调整)
    db_engine = create_async_engine(
        '',
        echo=False,
        future=True,
        pool_size=10,  # 连接池中保持的连接数
        max_overflow=5 # 允许的额外连接数
    )
    # 创建异步会话工厂
    async_session = async_sessionmaker(db_engine, class_=AsyncSession, expire_on_commit=False)
    
    async def get_session() -> AsyncSession:
        """
        获取一个异步数据库会话。
        使用yield作为依赖注入,确保会话在请求结束后被正确关闭(归还到连接池)。
        """
        async with async_session() as session:
            yield session
            # 无需手动调用 session.close(),上下文管理器会自动处理

    在这个优化后的 get_session 函数中,yield session 将会话传递给调用者。当调用者完成操作后,控制权返回到 async with 块,此时上下文管理器会自动执行清理工作,将会话关联的连接归还到 db_engine 管理的连接池中。

4. 注意事项与最佳实践

  • 合理设置 pool_size:pool_size 的值应根据应用程序的并发需求和数据库服务器的承载能力来决定。过小可能导致连接等待,过大则可能浪费数据库资源或超出数据库最大连接限制。
  • 理解 max_overflow:max_overflow 允许连接池在短时间内创建超出 pool_size 的额外连接,以应对突发的连接高峰。但这些溢出连接在空闲一段时间后会被关闭。
  • 不要混淆会话关闭与连接关闭:session.close() 将会话标记为关闭,并将其底层连接归还到连接池。它不意味着底层的TCP/IP连接被物理断开。
  • 连接池的生命周期:db_engine(及其内部的连接池)通常应在应用程序的整个生命周期中保持单例。频繁地创建和销毁引擎会失去连接池的优势。
  • 官方文档是最佳资源:对于更深入的连接池配置和高级用法,请务必查阅SQLAlchemy的官方文档:https://www.php.cn/link/aa16b1e36967dda0f92705a0a1beb710

5. 总结

SQLAlchemy的连接池机制是其高性能的关键之一,它通过复用数据库连接来减少开销。因此,观察到数据库连接在会话结束后仍然开放是正常且期望的行为。正确的会话管理应依赖 async with 上下文管理器,它会自动处理会话的关闭(即归还连接到连接池),开发者无需手动调用 session.close()。通过合理配置 create_async_engine 中的 pool_size 和 max_overflow 参数,可以有效地管理应用程序的数据库连接资源,确保系统在高并发下的稳定性和效率。

相关专题

更多
html版权符号
html版权符号

html版权符号是“©”,可以在html源文件中直接输入或者从word中复制粘贴过来,php中文网还为大家带来html的相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

616

2023.06.14

html在线编辑器
html在线编辑器

html在线编辑器是用于在线编辑的工具,编辑的内容是基于HTML的文档。它经常被应用于留言板留言、论坛发贴、Blog编写日志或等需要用户输入普通HTML的地方,是Web应用的常用模块之一。php中文网为大家带来了html在线编辑器的相关教程、以及相关文章等内容,供大家免费下载使用。

657

2023.06.21

html网页制作
html网页制作

html网页制作是指使用超文本标记语言来设计和创建网页的过程,html是一种标记语言,它使用标记来描述文档结构和语义,并定义了网页中的各种元素和内容的呈现方式。本专题为大家提供html网页制作的相关的文章、下载、课程内容,供大家免费下载体验。

471

2023.07.31

html空格
html空格

html空格是一种用于在网页中添加间隔和对齐文本的特殊字符,被用于在网页中插入额外的空间,以改变元素之间的排列和对齐方式。本专题为大家提供html空格的相关的文章、下载、课程内容,供大家免费下载体验。

245

2023.08.01

html是什么
html是什么

HTML是一种标准标记语言,用于创建和呈现网页的结构和内容,是互联网发展的基石,为网页开发提供了丰富的功能和灵活性。本专题为大家提供html相关的各种文章、以及下载和课程。

2898

2023.08.11

html字体大小怎么设置
html字体大小怎么设置

在网页设计中,字体大小的选择是至关重要的。合理的字体大小不仅可以提升网页的可读性,还能够影响用户对网页整体布局的感知。php中文网将介绍一些常用的方法和技巧,帮助您在HTML中设置合适的字体大小。

507

2023.08.11

html转txt
html转txt

html转txt的方法有使用文本编辑器、使用在线转换工具和使用Python编程。本专题为大家提供html转txt相关的文章、下载、课程内容,供大家免费下载体验。

312

2023.08.31

html文本框代码怎么写
html文本框代码怎么写

html文本框代码:1、单行文本框【<input type="text" style="height:..;width:..;" />】;2、多行文本框【textarea style=";height:;"></textare】。

426

2023.09.01

菜鸟裹裹入口以及教程汇总
菜鸟裹裹入口以及教程汇总

本专题整合了菜鸟裹裹入口地址及教程分享,阅读专题下面的文章了解更多详细内容。

0

2026.01.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Bootstrap 5教程
Bootstrap 5教程

共46课时 | 3万人学习

AngularJS教程
AngularJS教程

共24课时 | 2.9万人学习

CSS教程
CSS教程

共754课时 | 22.4万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号