title: Alembic迁移脚本:让数据库变身时间旅行者

date: 2025/05/09 13:08:18

updated: 2025/05/09 13:08:18

author: cmdragon

excerpt:

Alembic 是一个用于数据库迁移的工具,通过迁移脚本记录数据库结构的变化,确保不同环境的数据库保持同步。其核心工作原理包括模型扫描、数据库快照和差异分析三个阶段。通过 alembic revision --autogenerate 命令,可以自动生成迁移脚本,对比模型定义与数据库实际结构的差异。高级配置技巧包括自定义上下文配置和处理复杂字段变更。常见错误如数据库版本不一致或字段类型不识别,可通过升级、回滚或添加类型映射解决。最佳实践建议包括及时生成迁移脚本、测试环境保持最新、生产环境变更前备份等。

categories:

  • 后端开发
  • FastAPI

tags:

  • Alembic
  • 数据库迁移
  • SQLAlchemy
  • 自动生成脚本
  • 数据库版本管理
  • FastAPI
  • 数据库模式变更


扫描二维码

关注或者微信搜一搜:编程智域 前端至全栈交流与成长

探索数千个预构建的 AI 应用,开启你的下一个伟大创意https://tools.cmdragon.cn/

1. Alembic 迁移脚本自动生成原理与实践

1.1 什么是数据库迁移?

数据库迁移(Database Migration)是跟踪数据库模式变化的系统化方法。就像我们使用Git管理代码版本一样,Alembic

通过迁移脚本记录数据库结构的变更历史。当我们在开发过程中修改数据表结构时,通过迁移可以确保不同环境(开发、测试、生产)的数据库保持同步。

1.2 Alembic 核心工作原理

Alembic 的自动生成功能基于模型对比实现,其工作流程分为三个阶段:

  1. 模型扫描:读取SQLAlchemy的Base类元数据
  2. 数据库快照:连接目标数据库获取当前结构
  3. 差异分析:对比模型定义与数据库实际结构的差异
# 示例:典型模型定义(models.py)
from sqlalchemy import Column, Integer, String
from sqlalchemy.ext.declarative import declarative_base Base = declarative_base() class User(Base):
__tablename__ = 'users' id = Column(Integer, primary_key=True)
name = Column(String(50))
email = Column(String(100)) # 新增字段示例

1.3 自动生成迁移脚本实战

1.3.1 环境配置

安装必要依赖:

pip install alembic sqlalchemy fastapi

项目目录结构:

/project
/alembic
/versions
env.py
alembic.ini
main.py
models.py

1.3.2 初始化Alembic

alembic init alembic

修改alembic.ini配置:

[alembic]
script_location = alembic
sqlalchemy.url = postgresql://user:pass@localhost/dbname

1.3.3 生成迁移脚本

alembic revision --autogenerate -m "add email column"

生成的迁移文件示例(alembic/versions/xxxx_add_email_column.py):

def upgrade():
op.add_column('users', Column('email', String(100))) def downgrade():
op.drop_column('users', 'email')

1.4 高级配置技巧

1.4.1 自定义上下文配置

在env.py中添加模型导入:

# 修改后的env.py核心部分
from models import Base # 导入模型基类 target_metadata = Base.metadata def run_migrations_online():
connectable = engine_from_config(
config.get_section(config.config_ini_section),
prefix="sqlalchemy.",
poolclass=pool.NullPool,
) with connectable.connect() as connection:
context.configure(
connection=connection,
target_metadata=target_metadata,
compare_type=True, # 启用字段类型比对
compare_server_default=True # 比对默认值
)

1.4.2 处理复杂字段变更

当修改字段类型时,建议分步骤操作:

# 迁移脚本示例:安全修改字段类型
def upgrade():
with op.batch_alter_table('users') as batch_op:
batch_op.alter_column('phone',
existing_type=String(20),
type_=Integer(),
existing_nullable=True)

1.5 课后Quiz

问题1:当新增模型类后执行alembic revision --autogenerate没有生成迁移脚本,最可能的原因是?

A. 忘记保存模型文件

B. 模型未正确导入到env.py

C. 数据库连接失败

D. 未安装sqlalchemy

答案:B。Alembic需要正确导入包含Base类的模型定义才能进行元数据比对,如果未在env.py中正确设置target_metadata,会导致无法检测模型变化。

问题2:哪个命令可以查看当前数据库版本?

A. alembic current

B. alembic show

C. alembic history

D. alembic heads

答案:A。alembic current命令显示当前数据库所处的迁移版本。

1.6 常见报错解决方案

错误1FAILED: Target database is not up to date

alembic upgrade head

原因:存在未应用的迁移版本

解决:执行升级命令更新数据库

错误2SAWarning: Did not recognize type 'geometry'...

# 在env.py中添加自定义类型映射
from sqlalchemy.dialects.postgresql import JSONB def include_name(name, type_, parent_names):
if type_ == "geometry":
return False
return True context.configure(
...
include_name = include_name,
user_module_prefix = 'sa.'
)

原因:使用了数据库特定的字段类型

解决:在env.py中添加类型过滤逻辑

错误3Can't locate revision identified by 'xxxxx'

alembic history --verbose
alembic downgrade -1

原因:版本链断裂或历史记录不完整

解决:检查迁移历史记录,必要时回滚到有效版本

1.7 最佳实践建议

  1. 每次修改模型后立即生成迁移脚本
  2. 测试环境始终执行alembic upgrade head保证最新
  3. 生产环境变更前必须备份数据库
  4. 复杂变更建议分多个迁移步骤完成
  5. 保持开发、测试、生产环境的数据库版本一致

通过掌握这些核心原理和实践技巧,您可以在FastAPI项目中实现安全可靠的数据库版本管理。下次当您修改模型时,记得用--autogenerate

参数让Alembic自动生成迁移脚本,这将极大提升开发效率并减少人为错误。

余下文章内容请点击跳转至 个人博客页面 或者 扫码关注或者微信搜一搜:编程智域 前端至全栈交流与成长,阅读完整的文章:Alembic迁移脚本:让数据库变身时间旅行者 | cmdragon's Blog

往期文章归档:

Alembic迁移脚本:让数据库变身时间旅行者的更多相关文章

  1. django迁移脚本

    执行migrate报错的解决办法: 想知道migrate为什么报错,需要先了解migrate到底做了什么事情 migrate做了什么事情? 1.将相关的迁移脚本翻译成sql语句,然后在数据库中执行 2 ...

  2. flask 使用Flask-Migrate迁移数据库(创建迁移环境、生成迁移脚本、更新数据库)

    使用Flask-Migrate迁移数据库 在开发时,以删除表再重建的方式更新数据库简单直接,但明显的缺陷是会丢掉数据库中的所有数据.在生产环境下,没有人想把数据都删除掉,这时需要使用数据库迁移工具来完 ...

  3. Saiku数据库迁移后的刷新脚本-Shell脚本读取数据库中的数据(二十三)

    Saiku数据库迁移后的刷新脚本 之前有谈过对saiku中的数据进行刷新,因为saiku默认会从缓存中查询数据,但是配置不使用缓存又会效率低下... 所以这里就需要做一个数据刷新,每次ETL之后都需要 ...

  4. 迁移 SQL Server 数据库到 Azure SQL 实战

    最近有个维护的项目需要把 SQL Server 2012 的数据库迁移到 Azure SQL 上去,迁移过程可谓一波三折,故在此分享这次迁移中碰到的点点滴滴,希望对朋友们有所帮助. 文章来源:葡萄城产 ...

  5. 如何将MongoDB数据库的数据迁移到MySQL数据库中

    FAQ v2.0终于上线了,断断续续忙了有2个多月.这个项目是我实践的第一个全栈的项目,从需求(后期有产品经理介入)到架构,再到设计(有征询设计师的意见).构建(前端.后台.数据库.服务器部署),也是 ...

  6. django使用migrations迁移版本和数据库中报错解决方案

    1.到数据库表django_migrations中查看app中看看app列 2.到项目对应的app模块中打开migrations文件查看生成的文件与数据库app列中的是不是一样 3.找到哪里不一致的文 ...

  7. Oracle数据库迁移至PostgreSQL数据库问题及解决

    Oracle数据库迁移PostgreSQL数据库问题及解决 目录 如何计划迁移数据库(现状及问题分析) 统计系统表及表功能 解耦公共表 建立数据库 迁移表结构 导入表数据 改SQL语法 保证数据时效性 ...

  8. SQL Server2019数据库备份与还原脚本,数据库可批量备份

    前言 最近公司服务器到期,需要进行数据迁移,而数据库属于多而繁琐,通过图形化界面一个一个备份所需时间成本很大,所以想着写一个sql脚本来执行. 开始 数据库单个备份 数据库批量备份 数据库还原 数据库 ...

  9. 将Oracle数据库迁移到达梦数据库

    公司某产品在项目现场上常用到的数据库有Oracle和达梦. 做性能测试需要根据项目现场预埋大量的基础数据和业务数据,耗费时间.精力.故完成Oracle数据库的性能测试之后,采用直接将Oracle数据库 ...

  10. Oracle冷备迁移脚本(文件系统)

    Oracle冷备迁移脚本(文件系统) 两个脚本: 配置文件生成脚本dbinfo.sh 网络拷贝到目标服务器的脚本cpdb16.sh 1. 配置文件生成脚本 #!/bin/bash #Usage: cr ...

随机推荐

  1. DeepSeek企业级部署实战指南:从服务器选型到Dify私有化落地

    对于个人开发者或尝鲜者而言,本地想要部署 DeepSeek 有很多种方案,但是一旦涉及到企业级部署,则步骤将会繁琐很多. 比如我们的第一步就需要先根据实际业务场景评估出我们到底需要部署什么规格的模型, ...

  2. babel-loader 如何工作? 什么是babel-loader插件? babel-loader插件可以干什么? 如何制作一个babel-loader插件?

    本文会介绍比较基本的编译知识和babel-loader运作原理 babel-loader 是什么? 作为老一派的打包工具, babel-loader 想必大家已经非常熟悉了.它长这样子 // webp ...

  3. Flink学习(七) 多流转换算子 拆分合并流

    一.Split 和 Select (使用split切分过的流是不能被二次切分的) DataStream --> SplitStream : 根据特征把一个DataSteam 拆分成两个或者多个D ...

  4. Spark 广播变量(broadcast)更新方法

    Spark 广播变量(broadcast)更新方法更新方法spark 广播变量可以通过unpersist方法删除,然后重新广播 val map = sc.textFile("/test.tx ...

  5. NCS开发学习笔记-基础篇-第 1 课 – nRF Connect SDK 简介

    第 1 课 – nRF Connect SDK 简介 目标 了解 nRF Connect SDK 的结构和内容 在内部,nRF Connect SDK 代码分为四个主要存储库: nrf – 应用程序. ...

  6. C++17 Filesystem 实用教程

    点击查看代码 C++17 标准带来了 std::filesystem库, 提供了强大的工具来处理文件路径, 目录以及其他与文件系统相关的操作. 这篇文章适合 C++ 初学者以及希望掌握 C++17 新 ...

  7. IOS 内付 asp.net mvc 服务器端验证

    上代码: public class AppStorePayApp { public int VerifyReceipt(string receipt, out string product_id, o ...

  8. mysql的自增id

    为图方便,建表直接用了mysql的自增id 开发时进行插入操作时,发现插入失败id也自增了,导致id不连续 并且无论是删除还是插入,id是一直在增加 查询结果 MySQL自增ID机制: InnoDB存 ...

  9. tsconfig.json 报错问题解决

    tsconfig.json 报错问题解决 报错如图所示: 创建tsconfig.json配置文件时,VSCode会自动检测当前项目当中是否有ts文件,若没有则报错,提示用户需要创建一个ts文件后,再去 ...

  10. go 简单封装数学运算包

    前言 我们在编写程序时,经常会遇到一些高精度的数学运算,这时候使用简单的运算符会造成精度的缺失. 这里引用了这个第三方包 https://github.com/shopspring/decimal 做 ...