Python - SQLAlchemy - MySQL - 多个实例处理相同的数据

Question

我在数据库中有一个表，用SQLAlchemy ORM模块映射（我有一个“scoped_session”变量）我想要我的程序的多个实例（不仅仅是线程，也来自几个服务器）才能在同一个表上工作而不是处理相同的数据。所以我编写了一个手动“行锁”机制，以确保在这个方法中处理每一行我在表上使用“完全锁定”，而我“行锁定”它：

def instance:
        s = scoped_session(sessionmaker(bind=engine)
        engine.execute("LOCK TABLES my_data WRITE")
        rows = s.query(Row_model).filter(Row_model.condition == 1).filter(Row_model.is_locked == 0).limit(10)
        for row in rows:
            row.is_locked = 1
            row.lock_time = datetime.now()
        s.commit()
        engine.execute("UNLOCK TABLES")
        for row in row:
            manipulate_data(row)
            row.is_locked = 0
        s.commit()

for i in range(10):
    t = threading.Thread(target=instance)
    t.start()

问题是，在运行某些实例时，多个线程正在崩溃并产生此错误（每个）：

sqlalchemy.exc.DatabaseError :(由于Query-invoked autoflush引发;如果此刷新过早发生，请考虑使用session.no_autoflush块）（DatabaseError）1205（HY000）：超出锁定等待超时;尝试重新启动事务'UPDATE my_daya SET row_var = 1}

捕获量在哪里？是什么让我的数据库表没有成功解锁？

谢谢。

Answer 1

锁是邪恶的。避免他们。发生错误时情况会非常糟糕。特别是当您将会话与原始SQL语句混合时，就像您一样。

范围会话的优点在于它包装数据库事务。此事务使对数据库的修改成为原子，并在出现问题时进行清理。

使用范围会话如下：

with scoped_session(sessionmaker(bind=engine) as s:
    <ORM actions using s>

重写代码以使其成为正确的事务可能是一些工作，但它是值得的！ Sqlalchemy有技巧来帮助你。