title: 异步编程与Tortoise-ORM框架

date: 2025/04/19 00:13:05

updated: 2025/04/19 00:13:05

author: cmdragon

excerpt:

异步编程通过async/await语法实现协程,单线程可处理多个并发请求,适合IO密集型场景。Tortoise-ORM专为异步设计,支持完整ORM功能和多种数据库,与Pydantic深度集成。整合FastAPI时,通过register_tortoise初始化ORM,使用in_transaction管理事务,确保操作原子性。常见问题包括未使用await返回协程对象和事件循环关闭错误,需通过正确的事件循环启动和事务管理解决。

categories:

  • 后端开发
  • FastAPI

tags:

  • 异步编程
  • Tortoise-ORM
  • FastAPI
  • 协程机制
  • 数据库事务
  • Pydantic集成
  • 异步IO


扫描二维码关注或者微信搜一搜:编程智域 前端至全栈交流与成长

探索数千个预构建的 AI 应用,开启你的下一个伟大创意

第一章:异步编程基础与Tortoise-ORM框架定位

1.1 异步IO原理与协程机制

当你在快餐店排队时,同步IO就像站在队列中干等取餐,而异步IO则是先下单后去玩手机,听到叫号再取餐。现代Web应用需要同时服务成千上万个这样的"

顾客",这正是异步编程的价值所在。

Python通过async/await语法实现协程:

async def fetch_data():
# 模拟IO操作
await asyncio.sleep(1)
return {"data": "result"} # 事件循环驱动执行
async def main():
task1 = fetch_data()
task2 = fetch_data()
await asyncio.gather(task1, task2) # 并发执行 asyncio.run(main())

关键点解析:

  • async def 声明异步函数(协程)
  • await 将控制权交还事件循环
  • 单个线程可处理多个并发请求

与传统同步模型对比:

指标 同步模式 异步模式
线程使用 1请求1线程 单线程处理多请求
IO等待处理 阻塞 非阻塞
适合场景 CPU密集型 IO密集型

1.2 Tortoise-ORM的异步设计哲学

传统ORM(如Django ORM)在异步环境中会形成性能瓶颈。Tortoise-ORM专为异步而生,其架构设计呈现以下特点:

from tortoise.models import Model
from tortoise import fields class User(Model):
id = fields.IntField(pk=True)
name = fields.CharField(max_length=50)
created_at = fields.DatetimeField(auto_now_add=True) class Meta:
table = "auth_user"

框架核心优势:

  1. 完整的ORM功能支持(关系、事务、聚合)
  2. 原生异步查询接口设计
  3. 支持PostgreSQL/MySQL/SQLite
  4. 与Pydantic深度集成

1.3 整合FastAPI的完整示例

创建具备完整功能的API端点:

from fastapi import FastAPI, Depends
from tortoise.contrib.fastapi import register_tortoise
from pydantic import BaseModel app = FastAPI() # 请求体模型
class UserCreate(BaseModel):
name: str # 响应模型
class UserOut(UserCreate):
id: int
created_at: datetime # 数据库配置
DB_CONFIG = {
"connections": {"default": "sqlite://db.sqlite3"},
"apps": {
"models": {
"models": ["__main__"], # 自动发现当前模块的模型
"default_connection": "default",
}
},
} # 注册Tortoise-ORM
register_tortoise(
app,
config=DB_CONFIG,
generate_schemas=True, # 自动建表
add_exception_handlers=True,
) # 依赖注入数据库连接
async def get_db():
async with in_transaction() as conn:
yield conn @app.post("/users", response_model=UserOut)
async def create_user(user: UserCreate, conn=Depends(get_db)):
"""
创建用户并返回完整数据
使用事务保证原子性操作
"""
db_user = await User.create(**user.dict(), using_db=conn)
return UserOut.from_orm(db_user)

代码要点解析:

  • register_tortoise 实现ORM初始化
  • in_transaction 管理事务作用域
  • using_db 参数确保使用同一连接
  • from_orm 自动转换模型为Pydantic对象

课后Quiz

Q1:当数据库查询未使用await时会导致什么现象?

A. 立即返回查询结果

B. 抛出RuntimeWarning

C. 返回coroutine对象

D. 程序崩溃

正确答案:C

解析:异步函数必须使用await执行,否则将返回未被执行的协程对象,这是常见的初学者错误。

Q2:如何确保多个更新操作在同一个事务中?

A. 使用@transaction装饰器

B. 手动begin/commit

C. 通过in_transaction上下文管理器

D. 所有操作自动在事务中

正确答案:C

解析:async with in_transaction() as conn会创建事务作用域,所有在该上下文中的操作使用同一个连接。

常见报错解决方案

问题1:422 Unprocessable Entity

{
"detail": [
{
"loc": [
"body",
"name"
],
"msg": "field required",
"type": "value_error.missing"
}
]
}

原因分析:

  • 请求体缺少name字段
  • 字段类型不匹配(如数字传字符串)
  • Pydantic模型校验失败

解决方案:

  1. 检查请求体是否符合API文档
  2. 使用Swagger UI进行测试
  3. 查看模型字段定义是否包含required=True

问题2:RuntimeError: Event loop is closed

产生场景:

# 错误写法
async def get_data():
await User.all() # 同步上下文中直接调用
get_data()

正确处理:

async def main():
await get_data() if __name__ == "__main__":
import asyncio asyncio.run(main())

预防建议:

  • 始终通过事件循环启动异步程序
  • 在FastAPI路由中自动管理事件循环
  • 避免在同步代码中直接调用协程

余下文章内容请点击跳转至 个人博客页面 或者 扫码关注或者微信搜一搜:编程智域 前端至全栈交流与成长,阅读完整的文章:异步编程与Tortoise-ORM框架 | cmdragon's Blog

往期文章归档:

异步编程与Tortoise-ORM框架的更多相关文章

  1. Paip.Php Java 异步编程。推模型与拉模型。响应式(Reactive)”编程FutureData总结... 1

    Paip.Php  Java 异步编程.推模型与拉模型.响应式(Reactive)"编程FutureData总结... 1.1.1       异步调用的实现以及角色(:调用者 提货单) F ...

  2. ZeroC ICE的远程调用框架 Slice如何帮助我们进行Ice异步编程(AMI,AMD)

    Slice最大的用处就是为我们使用Ice进行编程,代劳绝大部分的重复性代码,并提供一些帮助性的框架代码,如用于AMI和AMD方式进行异步编程的回调框架. 当Slice不为我们生成代码时,我们仍然可以按 ...

  3. ORM框架 和 面向对象编程

    ORM框架: 1.SQLAlchemy:  - 作用   1.提供简单的规则   2.自动转换成SQL语句  - DB first/code first   DB first: 手动创建数据库以及表  ...

  4. Python Twisted网络编程框架与异步编程入门教程

    原作出处:twisted-intro-cn 作者:Dave 译者:杨晓伟 luocheng likebeta 转载声明:版权归原作出处所有,转载只为让更多人看到这部优秀作品合集,如果侵权,请留言告知 ...

  5. 轻量级ORM框架——第一篇:Dapper快速学习

    我们都知道ORM全称叫做Object Relationship Mapper,也就是可以用object来map我们的db,而且市面上的orm框架有很多,其中有一个框架 叫做dapper,而且被称为th ...

  6. ORM框架-VB/C#.Net实体代码生成工具(EntitysCodeGenerate)【ECG】4.5

    摘要:VB/C#.Net实体代码生成工具(EntitysCodeGenerate)[ECG]是一款专门为.Net数据库程序开发量身定做的(ORM框架)代码生成工具,所生成的程序代码基于OO.ADO.N ...

  7. Dapper一个和petapoco差不多的轻量级ORM框架

    我们都知道ORM全称叫做Object Relationship Mapper,也就是可以用object来map我们的db,而且市面上的orm框架有很多,其中有一个框架 叫做dapper,而且被称为th ...

  8. .NET轻量级ORM框架Dapper入门精通

    一.课程介绍 本次分享课程包含两个部分<.NET轻量级ORM框架Dapper修炼手册>和<.NET轻量级ORM框架Dapper葵花宝典>,阿笨将带领大家一起领略轻量级ORM框架 ...

  9. C# 性能优化 之 秒表 Stopwatch。 Dapper一个和petapoco差不多的轻量级ORM框架

    Sweet小马 小马同学的编程日记. C# 性能优化 之 秒表 Stopwatch. 生词解释:Diagnostics[,daɪəg'nɑstɪks] n.诊断学 using System.Diagn ...

  10. C#与C++的发展历程第三 - C#5.0异步编程巅峰

    系列文章目录 1. C#与C++的发展历程第一 - 由C#3.0起 2. C#与C++的发展历程第二 - C#4.0再接再厉 3. C#与C++的发展历程第三 - C#5.0异步编程的巅峰 C#5.0 ...

随机推荐

  1. 盘点!HelloGitHub 年度热门开源项目

    春节将至,HelloGitHub 也迎来了年终盘点时刻.这是一份送给开源爱好者的"年终盛宴",期待你在这里发现更多值得关注的开源佳作. 为了满足不同读者的需求,我精心准备了这期超长 ...

  2. “天翼云息壤杯”高校AI大赛云南赛区启动!

    11月19日,首届全国"天翼云息壤杯"高校AI大赛云南赛区启动仪式在昆明理工大学举行.本次赛事由中国电信云南公司(以下简称"云南电信")和云南省计算机学会智能计 ...

  3. initDB.sh初始化磁盘脚本centos7

    新加磁盘初始化脚本 跳转:优化(2022-4-14) vim initDB.sh #!/bin/bash # auther by wangxp EXCLUDE_LIST='2,11' EXCLUDE_ ...

  4. shell 数组函数进阶练习

    一维数组的定义.统计.引用和删除等操作. A=( test1 test2 test3 ) ,定义数组一般以括号的方式来定义, 数组的值可以随机定义. echo ${A[0]} ,代表引用第一个数组变量 ...

  5. 并发编程 - 线程同步(九)之信号量Semaphore

    前面对自旋锁SpinLock进行了详细学习,今天我们将学习另一个种同步机制--信号量Semaphore. 01.信号量是什么? 在 C# 中,信号量(Semaphore)是一种用于线程同步的机制,能够 ...

  6. 使用 kubeadm 创建高可用 Kubernetes 及外部 etcd 集群

    博客链接:使用 kubeadm 创建高可用 Kubernetes 及外部 etcd 集群 前言 Kubernetes 的官方中文文档内容全面,表达清晰,有大量示例和解析 无论任何情况下都推荐先花几个小 ...

  7. PDManer 入门教程:超强代码生成工具!

    PDManer 入门教程:超强代码生成工具!https://www.51cto.com/article/753161.html

  8. 【P0】Logisim部件级实验/有限状态机

    课上 过得十分狼狈.经鉴定孩子可能脑子拗 T1 投票决议 组内投票,赞成>反对,则通过:组长拥有一票否决权. 信号名 方向 描述 [1:0] s Input 2'b00 赞成2'b01 反对2' ...

  9. 下载文件,后端返回的是文件流,我们需要请求并下载到本地,发现下载后打开只有个undefined

    在项目里做完上传,做下载的时候,把下载的文件打开,内容却时undefined,而且接口调用成功,但是postman校验接口时下载的文件正常的,那问题又出现在前端了. 我的前端代码如下图 前端代码的话我 ...

  10. mac输入法 cpu占用,解决mac使用输入法出现卡顿延迟

    1.介绍 网上有各种方法,例如有touchbar的macbook关闭输入建议:定时重启"简体中文输入法"进程:关闭"显示器具有单独的空间" 这些方法网上都能看到 ...