title: Alembic迁移脚本:让数据库变身时间旅行者

date: 2025/05/09 13:08:18

updated: 2025/05/09 13:08:18

author: cmdragon

excerpt:

Alembic 是一个用于数据库迁移的工具,通过迁移脚本记录数据库结构的变化,确保不同环境的数据库保持同步。其核心工作原理包括模型扫描、数据库快照和差异分析三个阶段。通过 alembic revision --autogenerate 命令,可以自动生成迁移脚本,对比模型定义与数据库实际结构的差异。高级配置技巧包括自定义上下文配置和处理复杂字段变更。常见错误如数据库版本不一致或字段类型不识别,可通过升级、回滚或添加类型映射解决。最佳实践建议包括及时生成迁移脚本、测试环境保持最新、生产环境变更前备份等。

categories:

  • 后端开发
  • FastAPI

tags:

  • Alembic
  • 数据库迁移
  • SQLAlchemy
  • 自动生成脚本
  • 数据库版本管理
  • FastAPI
  • 数据库模式变更


扫描二维码

关注或者微信搜一搜:编程智域 前端至全栈交流与成长

探索数千个预构建的 AI 应用,开启你的下一个伟大创意https://tools.cmdragon.cn/

1. Alembic 迁移脚本自动生成原理与实践

1.1 什么是数据库迁移?

数据库迁移(Database Migration)是跟踪数据库模式变化的系统化方法。就像我们使用Git管理代码版本一样,Alembic

通过迁移脚本记录数据库结构的变更历史。当我们在开发过程中修改数据表结构时,通过迁移可以确保不同环境(开发、测试、生产)的数据库保持同步。

1.2 Alembic 核心工作原理

Alembic 的自动生成功能基于模型对比实现,其工作流程分为三个阶段:

  1. 模型扫描:读取SQLAlchemy的Base类元数据
  2. 数据库快照:连接目标数据库获取当前结构
  3. 差异分析:对比模型定义与数据库实际结构的差异
# 示例:典型模型定义(models.py)
from sqlalchemy import Column, Integer, String
from sqlalchemy.ext.declarative import declarative_base Base = declarative_base() class User(Base):
__tablename__ = 'users' id = Column(Integer, primary_key=True)
name = Column(String(50))
email = Column(String(100)) # 新增字段示例

1.3 自动生成迁移脚本实战

1.3.1 环境配置

安装必要依赖:

pip install alembic sqlalchemy fastapi

项目目录结构:

/project
/alembic
/versions
env.py
alembic.ini
main.py
models.py

1.3.2 初始化Alembic

alembic init alembic

修改alembic.ini配置:

[alembic]
script_location = alembic
sqlalchemy.url = postgresql://user:pass@localhost/dbname

1.3.3 生成迁移脚本

alembic revision --autogenerate -m "add email column"

生成的迁移文件示例(alembic/versions/xxxx_add_email_column.py):

def upgrade():
op.add_column('users', Column('email', String(100))) def downgrade():
op.drop_column('users', 'email')

1.4 高级配置技巧

1.4.1 自定义上下文配置

在env.py中添加模型导入:

# 修改后的env.py核心部分
from models import Base # 导入模型基类 target_metadata = Base.metadata def run_migrations_online():
connectable = engine_from_config(
config.get_section(config.config_ini_section),
prefix="sqlalchemy.",
poolclass=pool.NullPool,
) with connectable.connect() as connection:
context.configure(
connection=connection,
target_metadata=target_metadata,
compare_type=True, # 启用字段类型比对
compare_server_default=True # 比对默认值
)

1.4.2 处理复杂字段变更

当修改字段类型时,建议分步骤操作:

# 迁移脚本示例:安全修改字段类型
def upgrade():
with op.batch_alter_table('users') as batch_op:
batch_op.alter_column('phone',
existing_type=String(20),
type_=Integer(),
existing_nullable=True)

1.5 课后Quiz

问题1:当新增模型类后执行alembic revision --autogenerate没有生成迁移脚本,最可能的原因是?

A. 忘记保存模型文件

B. 模型未正确导入到env.py

C. 数据库连接失败

D. 未安装sqlalchemy

答案:B。Alembic需要正确导入包含Base类的模型定义才能进行元数据比对,如果未在env.py中正确设置target_metadata,会导致无法检测模型变化。

问题2:哪个命令可以查看当前数据库版本?

A. alembic current

B. alembic show

C. alembic history

D. alembic heads

答案:A。alembic current命令显示当前数据库所处的迁移版本。

1.6 常见报错解决方案

错误1FAILED: Target database is not up to date

alembic upgrade head

原因:存在未应用的迁移版本

解决:执行升级命令更新数据库

错误2SAWarning: Did not recognize type 'geometry'...

# 在env.py中添加自定义类型映射
from sqlalchemy.dialects.postgresql import JSONB def include_name(name, type_, parent_names):
if type_ == "geometry":
return False
return True context.configure(
...
include_name = include_name,
user_module_prefix = 'sa.'
)

原因:使用了数据库特定的字段类型

解决:在env.py中添加类型过滤逻辑

错误3Can't locate revision identified by 'xxxxx'

alembic history --verbose
alembic downgrade -1

原因:版本链断裂或历史记录不完整

解决:检查迁移历史记录,必要时回滚到有效版本

1.7 最佳实践建议

  1. 每次修改模型后立即生成迁移脚本
  2. 测试环境始终执行alembic upgrade head保证最新
  3. 生产环境变更前必须备份数据库
  4. 复杂变更建议分多个迁移步骤完成
  5. 保持开发、测试、生产环境的数据库版本一致

通过掌握这些核心原理和实践技巧,您可以在FastAPI项目中实现安全可靠的数据库版本管理。下次当您修改模型时,记得用--autogenerate

参数让Alembic自动生成迁移脚本,这将极大提升开发效率并减少人为错误。

余下文章内容请点击跳转至 个人博客页面 或者 扫码关注或者微信搜一搜:编程智域 前端至全栈交流与成长,阅读完整的文章:Alembic迁移脚本:让数据库变身时间旅行者 | cmdragon's Blog

往期文章归档:

Alembic迁移脚本:让数据库变身时间旅行者的更多相关文章

  1. django迁移脚本

    执行migrate报错的解决办法: 想知道migrate为什么报错,需要先了解migrate到底做了什么事情 migrate做了什么事情? 1.将相关的迁移脚本翻译成sql语句,然后在数据库中执行 2 ...

  2. flask 使用Flask-Migrate迁移数据库(创建迁移环境、生成迁移脚本、更新数据库)

    使用Flask-Migrate迁移数据库 在开发时,以删除表再重建的方式更新数据库简单直接,但明显的缺陷是会丢掉数据库中的所有数据.在生产环境下,没有人想把数据都删除掉,这时需要使用数据库迁移工具来完 ...

  3. Saiku数据库迁移后的刷新脚本-Shell脚本读取数据库中的数据(二十三)

    Saiku数据库迁移后的刷新脚本 之前有谈过对saiku中的数据进行刷新,因为saiku默认会从缓存中查询数据,但是配置不使用缓存又会效率低下... 所以这里就需要做一个数据刷新,每次ETL之后都需要 ...

  4. 迁移 SQL Server 数据库到 Azure SQL 实战

    最近有个维护的项目需要把 SQL Server 2012 的数据库迁移到 Azure SQL 上去,迁移过程可谓一波三折,故在此分享这次迁移中碰到的点点滴滴,希望对朋友们有所帮助. 文章来源:葡萄城产 ...

  5. 如何将MongoDB数据库的数据迁移到MySQL数据库中

    FAQ v2.0终于上线了,断断续续忙了有2个多月.这个项目是我实践的第一个全栈的项目,从需求(后期有产品经理介入)到架构,再到设计(有征询设计师的意见).构建(前端.后台.数据库.服务器部署),也是 ...

  6. django使用migrations迁移版本和数据库中报错解决方案

    1.到数据库表django_migrations中查看app中看看app列 2.到项目对应的app模块中打开migrations文件查看生成的文件与数据库app列中的是不是一样 3.找到哪里不一致的文 ...

  7. Oracle数据库迁移至PostgreSQL数据库问题及解决

    Oracle数据库迁移PostgreSQL数据库问题及解决 目录 如何计划迁移数据库(现状及问题分析) 统计系统表及表功能 解耦公共表 建立数据库 迁移表结构 导入表数据 改SQL语法 保证数据时效性 ...

  8. SQL Server2019数据库备份与还原脚本,数据库可批量备份

    前言 最近公司服务器到期,需要进行数据迁移,而数据库属于多而繁琐,通过图形化界面一个一个备份所需时间成本很大,所以想着写一个sql脚本来执行. 开始 数据库单个备份 数据库批量备份 数据库还原 数据库 ...

  9. 将Oracle数据库迁移到达梦数据库

    公司某产品在项目现场上常用到的数据库有Oracle和达梦. 做性能测试需要根据项目现场预埋大量的基础数据和业务数据,耗费时间.精力.故完成Oracle数据库的性能测试之后,采用直接将Oracle数据库 ...

  10. Oracle冷备迁移脚本(文件系统)

    Oracle冷备迁移脚本(文件系统) 两个脚本: 配置文件生成脚本dbinfo.sh 网络拷贝到目标服务器的脚本cpdb16.sh 1. 配置文件生成脚本 #!/bin/bash #Usage: cr ...

随机推荐

  1. flutter-构造方法给数组list默认空值

    1 class NewstStyle extends StatelessWidget { 2 final List<DkCenterUpload> upload; 3 const News ...

  2. 网口CE超标了~

    前不久遇到一个网口传导测试超标的问题,今天在此分享下,希望各位能有所收获~ 背景 在对量产产品EMC抽检时,发现网口CE测试在537KHz处超标2.84dB 因为是网口传导测试,所以首先检查与网口相关 ...

  3. 天线增益是什么意思?DBI越大越好吗?

    作者: 技象物联网/ 行业百科 / 无线通信, 通信系统 / 2023年6月23日 11:58:21 天线增益是指天线在某个方向上相对于一个理想点源天线所辐射的功率密度的增益.换句话说,天线增益是天线 ...

  4. 在php类中使用函数

    好久没更新了,今天复习歪麦编写php框架的文章,看到几个函数,在类中使用时,当参数需要调用类的方法时,都用数组的方式传参. 1.  spl_autoload_register(array($this, ...

  5. 针对N=p^rq分解之初探

    针对N=p^r*q分解之初探 论文地址:https://eprint.iacr.org/2015/399.pdf 题目:https://www.nssctf.cn/problem/2016 from ...

  6. 【ABAQUS 二次开发笔记】使用keyword 、python和matlab一起处理Odb数据

    用conversion shell element (S4R单元)建模层合板,有6层ply,每个lamina(ply)有3个 integration point,共计18个integration po ...

  7. go minio 设置访问权限

    bucket 权限 桶默认可以有三种 Access Policy 策略:public.custom.private. public:不经过任何认证可以直接访问资源 custom:自定义策略 Acces ...

  8. linux clickhouse 密码设置

    默认密码 clickhouse 安装好之后,系统默认的登录账号密码是 /etc/clickhouse-server/users.d/default-password.xml 文件中配置的,默认密码是 ...

  9. go declared and not used

    Go语言在代码规范中定义未使用的变量会报"declared and not used"错误 package main import "fmt" func mai ...

  10. 【Java】字符串常用操作

    字符的常用技巧 char c; 字母的顺序:c - 'A'.c - 'a' 字母大小写转换:c - 'a' + 'A'.c - 'A' + 'a' 数字字符转换为数字:c - '0' String.S ...