如何禁用 SQLAlchemy 缓存?

2025-03-25 08:46:00
admin
原创
23
摘要:问题描述:我在使用时遇到缓存问题sqlalchemy。我使用sqlalchemy将数据插入MySQL数据库。然后,我让另一个应用程序处理该数据并直接更新它。但sqlalchemy总是返回旧数据而不是更新的数据。我认为sqlalchemy缓存了我的请求...那么...我应该如何禁用它?解决方案 1:除了通常的 ...

问题描述:

我在使用时遇到缓存问题sqlalchemy

我使用sqlalchemy将数据插入MySQL数据库。然后,我让另一个应用程序处理该数据并直接更新它。

sqlalchemy总是返回旧数据而不是更新的数据。我认为sqlalchemy缓存了我的请求...那么...我应该如何禁用它?


解决方案 1:

除了通常的 SQLAlchemy 身份映射(它位于事务本地)之外,人们认为其中存在“缓存”的常见原因是他们正在观察事务隔离的影响。SQLAlchemy 的会话默认以事务模式工作,这意味着它会等待直到session.commit()被调用,以便将数据持久保存到数据库。在此期间,其他地方正在进行的其他事务将看不到此数据。

但是,由于事务的隔离性质,还有一个额外的问题。正在进行的其他事务不仅在提交之前看不到您的事务数据,而且在某些情况下,它们在提交或回滚之前也看不到它(这与您的 close() 在此处产生的效果相同)。具有平均隔离度的事务将保留迄今为止已加载的状态,并继续为您提供与事务本地相同的状态,即使实际数据已更改 - 这在事务隔离术语中称为可重复读取。

http://en.wikipedia.org/wiki/Isolation_%28database_systems%29

解决方案 2:

这个问题确实让我很沮丧,但我终于弄明白了。

我有一个 Flask/SQLAlchemy 应用程序与一个较旧的 PHP 网站一起运行。PHP 网站会写入数据库,而 SQLAlchemy 不会察觉任何更改。

我尝试过 sessionmaker 设置 autoflush=True,但没有成功。在查询之前,我尝试过 db_session.flush()、db_session.expire_all() 和 db_session.commit(),但都不起作用。仍然显示过时的数据。

最后,我偶然发现了 SQLAlchemy 文档的这一部分:http://docs.sqlalchemy.org/en/latest/dialects/postgresql.html#transaction-isolation-level

设置isolation_level效果很好。现在我的Flask应用程序正在与PHP应用程序“对话”。以下是代码:

engine = create_engine(
    "postgresql+pg8000://scott:tiger@localhost/test",
    isolation_level="READ UNCOMMITTED"
)

当 SQLAlchemy 引擎以“READ UNCOMMITED”isolation_level 启动时,它将执行“脏读”,这意味着它将直接从数据库读取未提交的更改。

希望这有帮助


以下是 AaronD 在评论中提出的可能的解决方案

from flask.ext.sqlalchemy import SQLAlchemy

class UnlockedAlchemy(SQLAlchemy):
    def apply_driver_hacks(self, app, info, options):
        if "isolation_level" not in options:
            options["isolation_level"] = "READ COMMITTED"
    return super(UnlockedAlchemy, self).apply_driver_hacks(app, info, options)

解决方案 3:

除了zzzeek出色的答案之外,

我遇到了类似的问题。我通过使用简短的生活会话解决了该问题。

with closing(new_session()) as sess:
    # do your stuff

我为每个任务、任务组或请求(在 Web 应用程序的情况下)使用了一个新的会话。这为我解决了“缓存”问题。

这些材料对我非常有用:

何时构造会话、何时提交会话、何时关闭会话

解决方案 4:

我已尝试过,session.commit(), session.flush()但都不起作用。

在查看了 sqlalchemy 源代码后,我找到了禁用缓存的解决方案。

设置query_cache_size=0有效create_engine

create_engine(connection_string, convert_unicode=True, echo=True, query_cache_size=0)

解决方案 5:

这发生在我的 Flask 应用程序中,我的解决方案是在每次请求之后使会话中的所有对象过期。

from flask.signals import request_finished
def expire_session(sender, response, **extra):
    app.db.session.expire_all()
request_finished.connect(expire_session, flask_app)

非常有效。

解决方案 6:

与其他人可能相关的一件事是,当您创建会话并且引擎时,要传递expire_on_commit=True到 sessionmaker 调用中。

sessionmaker(bind=engine, expire_on_commit=True)

我遇到了一些问题,其中 sqlalchemy 关系在创建和提交后没有开始刷新(因为在我的关系中我定义了一个order_by函数,但我的次要对象没有按照预期的顺序排列,这解决了这个问题。

解决方案 7:

首先,SQLAlchemy 没有缓存。根据你从数据库获取数据的方法,你应该在其他人更新数据库后进行一些测试,看看是否可以获取新数据。

(1) use connection:
connection = engine.connect()
result = connection.execute("select username from users")
for row in result:
    print "username:", row['username']
connection.close()
(2) use Engine ...
(3) use MegaData...

请按照以下步骤操作:http://docs.sqlalchemy.org/en/latest/core/connections.html

另一个可能的原因是您的 MySQL DB 未永久更新。重新启动 MySQL 服务并进行检查。

解决方案 8:

import sqlalchemy as db
db.create_engine(db_string, query_cache_size=0, pool_size=30, max_overflow=0, pool_pre_ping=True, echo=True, echo_pool=True)

运行代码片段Hide results展开片段

我们可以在 sqlalchemy 1.3.13 以上的版本中解决这个问题,低于这个版本不支持禁用语句缓存。

解决方案 9:

据我所知,SQLAlchemy不存储缓存,因此您需要查看日志输出。

相关推荐
  政府信创国产化的10大政策解读一、信创国产化的背景与意义信创国产化,即信息技术应用创新国产化,是当前中国信息技术领域的一个重要发展方向。其核心在于通过自主研发和创新,实现信息技术应用的自主可控,减少对外部技术的依赖,并规避潜在的技术制裁和风险。随着全球信息技术竞争的加剧,以及某些国家对中国在科技领域的打压,信创国产化显...
工程项目管理   2079  
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1459  
  建筑行业正处于数字化转型的关键时期,建筑产品生命周期管理(PLM)系统的实施对于提升项目效率、质量和协同性至关重要。特别是在 2025 年,基于建筑信息模型(BIM)的项目进度优化工具成为众多建筑企业关注的焦点。这些工具不仅能够整合项目全生命周期的数据,还能通过精准的分析和模拟,为项目进度管理提供强大支持。BIM 与建...
plm是什么软件   0  
  PLM系统开发的重要性与现状PLM(产品生命周期管理)系统在现代企业的产品研发、生产与管理过程中扮演着至关重要的角色。它贯穿产品从概念设计到退役的整个生命周期,整合了产品数据、流程以及人员等多方面的资源,极大地提高了企业的协同效率和创新能力。通过PLM系统,企业能够实现产品信息的集中管理与共享,不同部门之间可以实时获取...
国产plm软件   0  
  PLM(产品生命周期管理)系统在企业产品研发与管理过程中扮演着至关重要的角色。随着市场竞争的加剧和技术的飞速发展,企业对PLM系统的迭代周期优化需求日益迫切。2025年敏捷认证对项目管理提出了新的要求,其中燃尽图作为一种强大的可视化工具,在PLM系统迭代周期优化中有着广泛且重要的应用。深入探讨这些应用,对于提升企业的项...
plm系统主要干什么的   0  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用