当我们在不同数据库迁移、同步数据时，首先要做的就是把库和表的结构在目标端创建出来。

当我们把数据库的结构 dump 出来之后，这个 DDL 在目标端大概率是无法直接运行的，至少数据类型在不同数据库之间就不相同，有的数据类型在目标端根本不存在，有的数据类型即使存在但存储精度、存储空间完全不一样，这给数据同步工作带来了很多困难。

这是一个很常见的需求，navicat 的 data transfer 功能就可以做到这一点。但如果想把这个功能集成在自研的产品中，很遗憾 navicat 并不开源。

这件事应该并不难，在异构数据源之间迁移数据，数据类型的映射是必不可少的，只要数据类型映射准确，DDL 转换应该就是正确的。说干就干，我决定自己实现一个 DDL 转换工具。

功能特性

  • 目前支持 MySQL、Oracle、PostgreSQL 和 达梦 数据库之间的转换，当然同种类型数据库的转换也支持;

  • 支持 98% 以上的数据类型映射（余下的 2% 是各数据库的特有类型，例如 MySQL 的 point/polygon/geo，在目标端找不到支持的类型）;

  • 支持 column comment, default value 等 DDL 特性；

  • 支持整库同步;

  • 提供了一个灵活的架构，使得未来添加对新数据库的支持变得轻而易举;

转换效果

MySQL 到 Oracle 的转换效果：

MySQL 到 PostgreSQL 的转换效果：

PostgreSQL 到 MySQL 的转换效果：

使用方式

MySQL 到 Oracle 的转换例子：

DataBaseConnection mysqlConn = DataBaseConnection.builder()

        .jdbcUrl("jdbc:mysql://127.0.0.1:3306")

        .user("username")

        .password("password")

        .build();

DataBaseConnection oracleConn = DataBaseConnection.builder()

        .jdbcUrl("jdbc:oracle:thin:@127.0.0.1:1521/orcl")

        .user("username")

        .password("password")

        .build();

String createTableDDL = new Transformer(mysqlConn, oracleConn)

		.transformCreateTableDDL("cdc_test_source", ".*")    // .* 表示整库同步, 或配置具体表名

		.getTransformedCreateTableDDL();

System.out.println(createTableDDL);

MySQL 到 达梦 的转换例子：

DataBaseConnection mysqlConn = DataBaseConnection.builder()

        .jdbcUrl("jdbc:mysql://127.0.0.1:3306")

        .user("username")

        .password("password")

        .build();

DataBaseConnection damengConn = DataBaseConnection.builder()

        .jdbcUrl("jdbc:dm://127.0.0.1:5236")

        .user("username")

        .password("password")

        .build();

boolean result = new Transformer(mysqlConn, postgresqlConn)

        .transformCreateTableDDL("cdc_test_source", "test_table_1")

        .executeCreateTable();  // execute ddl

最关键的是数据类型映射，这里整理了每种数据库的关键数据类型的对应关系，数据类型较多，查阅资料并非都来自官网，难免有纰漏，欢迎留言指正。

MySQL

MySQL 和 Oracle、PostgreSQL、DM的数据类型映射关系：
Data Type Mapping
MySQL Oracle Note
char CHAR 无论字符串的实际长度是多少，char 类型始终填充空格以达到指定长度。
MySQL 的 char 类型最大长度为 255，
Oracle 的 CHAR 类型最大长度为 2000。
varchar
tinytext
enum
set		 VARCHAR2 MySQL 不限制 varchar 类型的最大长度，
但是限制了单条记录的最大长度为 65535 字节。

Oracle 12c 及以前的版本中，VARCHAR2 的最大长度为 4000，
在Oracle 12c 及更新的版本中，VARCHAR2 的最大长度为 32767，
但需要在创建表时显式指定使用 MAX 选项。
tinyint
smallint		 SMALLINT
mediumint
int
bigint		 INT
float
double		 FLOAT
decimal
numeric		 NUMBER MySQL 的 decimal 类型和 numeric 类型是同义词，底层都采用 decimal 类型存储。
使用固定长度存储，用于存储精确的小数值，特别适合金融和货币相关的数据。
语法：decimal(presision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
Oracle 的 NUMBER 类型可以存储整数、小数以及非常大或者非常小的数值，
使用可变长度的存储，根据数值大小动态分配存储空间。
语法 NUMBER(precision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
Oracle 的 NUMBER 类型支持 1-38 位的 precision，scale 可以是 -84 到 127，
当 scale 取负数时会使得数值按指定的位数四舍五入到最近的倍数。
real REAL Oracle 的 REAL 类型用于存储浮点数，适合存储不需要高精度的小数数据，
如果对精度要求较高，建议使用 BINARY_FLOAT 或者 BINARY_DOUBLE 类型。
year NUMBER(4)
date
time		 DATE
datetime
timestamp		 TIMESTAMP
tinyblob
blob
mediumblob
longblob		 BLOB MySQL 的 longblob 是一种用于存储较大二进制数据的数据类型。
它主要用于存储大文件，如图像、音频、视频、以及其他类型的二进制文件。
最大存储长度为 4GB。

Oracle 的 BLOB (Binary Large Object) 类型，
适合存储二进制数据，如图像、音频、视频等非文本数据。
BLOB 采用变长存储方式，存储空间依据实际数据长度动态调整，最大长度为 4GB。
text
mediumtext
longtext
json
linestring
multilinestring
CLOB MySQL 中的 longtext 适用于存储大量的文本信息，例如日志文件、文章、用户评论等，
最大存储长度为 4GB。

Oracle 的 CLOB (Character Large Object) 类型，
适合存储大文本数据，如长文本、XML 文档或其他字符数据。
CLOB 采用变长存储方式，存储空间依据实际数据长度动态调整，最大长度为 4GB。
bit
binary
varbinary		 RAW Oracle 用 RAW 类型保存位串，声明方式为 RAW(size)，
采用固定长度存储，最大 size 为 2000。
geometry
geometrycollection
point
multipoint
polygon
multipolygon		 暂不支持
Data Type Mapping
MySQL PostgreSQL Note
char char MySQL 的 char 类型最大长度为 255；
PostgreSQL 的 char 类型最大长度为 10,485,760。
varcahr
enum
set		 varchar MySQL 不限制 varchar 类型的最大长度，
但是限制了单条记录的最大长度为 65535 字节。

PostgreSQL 的 varchar 类型最大长度为 1GB。
tinytext
text
mediumtext
longtext		 text
tinyint
smallint
year		 int2
mediumint
int		 int4
bigint int8
float float4
double float8
numeric
decimal		 numeric
boolean bool
date date
time time
datetime
timestamp		 timestamp
tinyblob
blob
mediumblob
longblob
geometry
geometrycollection
linestring
multilinestring
binary
varbinary		 bytea
json json
bit bit
point point
polygon polygon
Data Type Mapping
MySQL DM Note
char CHAR 无论字符串的实际长度是多少，char 类型始终填充空格以达到指定长度。
MySQL 的 char 类型最大长度为 255，
DM 的 CHAR 类型最大长度为 32767。
varchar
tinytext
enum
set		 VARCHAR MySQL 不限制 varchar 类型的最大长度，
但是限制了单条记录的最大长度为 65535 字节。

DM 的 VARCHAR 类型最大长度为 32767。
tinyint TINYINT
smallint SMALLINT
mediumint
int		 INT
bigint BIGINT
float FLOAT
double DOUBLE
decimal DECIMAL MySQL 的 decimal 类型和 numeric 类型是同义词，底层都采用 decimal 类型存储。
使用固定长度存储，用于存储精确的小数值，特别适合金融和货币相关的数据。
语法：decimal(presision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
numeric NUMERIC
date DATE
time
datetime
timestamp		 TIMESTAMP
tinyblob
blob
mediumblob
longblob		 BLOB MySQL 的 longblob 是一种用于存储较大二进制数据的数据类型。
它主要用于存储大文件，如图像、音频、视频、以及其他类型的二进制文件。
最大存储长度为 4GB。

DM 的 BLOB 类型最大存储长度为 2GB。
text
mediumtext
longtext
json
linestring
multilinestring		 CLOB MySQL 中的 longtext 适用于存储大量的文本信息，例如日志文件、文章、用户评论等，
最大存储长度为 4GB。

DM 的 CLOB (Character Large Object) 类型，
最大存储长度为 2GB。
bit
binary		 BINARY MySQL 的 bit 类型最大存储长度位 64，
MySQL 的 binary 类型最大存储长度为 255。

DM 的 BINARY 类型最大存储长度为 3847。
varbinary VARBINARY MySQL 的 vrbinary 类型最大存储长度为 65535。

DM 的 VARBINARY 类型最大存储长度为 32767。
geometry
geometrycollection
point
multipoint
polygon
multipolygon		 暂不支持

Oracle

Oracle 和 MySQL、PostgreSQL、DM的数据类型映射关系：
Data Type Mapping
Oracle MySQL Note
CHAR
NCHAR		 char 无论字符串的实际长度是多少，char 类型始终填充空格以达到指定长度。

Oracle 的 char 类型最大长度为 2000;
Oracle 的 nchar 类型最大长度为 1000，适用于需要存储多语言国际化字符；

MySQL 的 char 类型最大长度为 255。
VARCHAR
VARCHAR2
NVARCHAR2		 varchar Oracle 12c 及以前的版本中，varchar2 的最大长度为 4000，
在Oracle 12c 及更新的版本中，varchar2 的最大长度为 32767。

MySQL 不限制 varchar 类型的最大长度，
但是限制了单条记录的最大长度为 65535 字节。
NUMBER
NUMERIC
DECIMAL		 decimal Oracle 中，numeric，decimal，number 为同义词，底层存储的都是 number 类型。
Oracle 的 NUMBER 类型可以存储整数、小数以及非常大或者非常小的数值，
使用可变长度的存储，根据数值大小动态分配存储空间。
语法 NUMBER(precision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
Oracle 的 NUMBER 类型支持 1-38 位的 precision，scale 可以是 -84 到 127，
当scale取负数时会使得数值按指定的位数四舍五入到最近的倍数。

MySQL 中 decimal 用于存储精确的小数值，特别适合金融和货币相关的数据。
语法：decimal(presision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
MySQL 的 decimal 类型 precision 最大取值是 65，scale 的最大取值是 30。
INT
INTEGER		 int
SMALLINT smallint
FLOAT
BINARY_FLOAT		 float Oracle 的 BINARY_FLOAT 专门用于存储单精度浮点数，采用固定 32 位长度存储。
适用于需要高性能和较低存储开销的浮点数运算场景。
FLOAT 类型实际上是 NUMBER 类型的变种，采用变长存储，
精度高于 BINARY_FLOAT，性能低于 BINARY_FLOAT。
REAL real Oracle 的 REAL 类型用于存储浮点数，适合存储不需要高精度的小数数据，
如果对精度要求较高，建议使用 BINARY_FLOAT 或者 BINARY_DOUBLE 类型。
BINARY_DOUBLE
DOUBLE PRECISION		 double
DATE date
TIMESTAMP
TIMESTAMP WITH TIME ZONE		 datetime
CLOB
NCLOB
LONG		 longtext Oracle 的 LONG 类型在早期版本非常常用，
但由于一些不便之处，在 9i 版本开始引入了 CLOB 来替代 LONG。
LONG 的最大存储长度为 2GB，CLOB 的最大存储长度为 4GB。
NCLOB 适合存储需要支持多种语言和特殊字符集的文本数据，最大存储长度为 4GB。

MySQL 中的 longtext 适用于存储大量的文本信息，例如日志文件、文章、用户评论等，
最大存储长度为 4GB。
BLOB longblob Oracle 的 BLOB (Binary Large Object) 类型，
适合存储二进制数据，如图像、音频、视频等非文本数据。
BLOB 采用变长存储方式，存储空间依据实际数据长度动态调整，最大长度为 4GB。

MySQL 的 longblob 是一种用于存储较大二进制数据的数据类型。
它主要用于存储大文件，如图像、音频、视频、以及其他类型的二进制文件。
最大存储长度为 4GB。
RAW varbinary Oracle 用 RAW 类型保存位串，声明方式为 RAW(size)，
采用固定长度存储，最大 size 为 2000。

MySQL 的 varbinary 最大长度受限于单条记录的大小 (65535字节)
Data Type Mapping
Oracle PostgreSQL Note
CHAR
NCHAR		 char 无论字符串的实际长度是多少，char 类型始终填充空格以达到指定长度。

Oracle 的 char 类型最大长度为 2000;
Oracle 的 nchar 类型最大长度为 1000，适用于需要存储多语言国际化字符；

PostgreSQL 的 char 类型最大长度为 10,485,760。
VARCHAR
VARCHAR2
NVARCHAR2		 varchar Oracle 12c 及以前的版本中，varchar2 的最大长度为 4000，
在Oracle 12c 及更新的版本中，varchar2 的最大长度为 32767。

PostgreSQL 的 varchar 类型最大长度为 1GB。
NUMBER
NUMERIC
DECIMAL		 decimal Oracle 中，numeric，decimal，number 为同义词，底层存储的都是 number 类型。
Oracle 的 NUMBER 类型可以存储整数、小数以及非常大或者非常小的数值，
使用可变长度的存储，根据数值大小动态分配存储空间。
语法 NUMBER(precision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
Oracle 的 NUMBER 类型支持 1-38 位的 precision，scale 可以是 -84 到 127，
当scale取负数时会使得数值按指定的位数四舍五入到最近的倍数。

PostgreSQL 中 decimal 用于存储精确的小数值，特别适合金融和货币相关的数据。
语法：decimal(presision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
SMALLINT
INT
INTEGER		 int8
FLOAT
BINARY_FLOAT		 float4 Oracle 的 BINARY_FLOAT 专门用于存储单精度浮点数，采用固定 32 位长度存储。
适用于需要高性能和较低存储开销的浮点数运算场景。
FLOAT 类型实际上是 NUMBER 类型的变种，采用变长存储，
精度高于 BINARY_FLOAT，性能低于 BINARY_FLOAT。
BINARY_DOUBLE
DOUBLE PRECISION		 float8
DATE date
TIMESTAMP timestamp
TIMESTAMP WITH TIME ZONE timestampz
CLOB
NCLOB
LONG		 text Oracle 的 LONG 类型在早期版本非常常用，
但由于一些不便之处，在 9i 版本开始引入了 CLOB 来替代 LONG。
LONG 的最大存储长度为 2GB，CLOB 的最大存储长度为 4GB。
NCLOB 适合存储需要支持多种语言和特殊字符集的文本数据，最大存储长度为 4GB。

PostgreSQL 中的 text 适用于存储大量的文本信息，
例如日志文件、文章、用户评论等，最大存储长度为 1GB。
BLOB bytea Oracle 的 BLOB (Binary Large Object) 类型，
适合存储二进制数据，如图像、音频、视频等非文本数据。
BLOB 采用变长存储方式，存储空间依据实际数据长度动态调整，最大长度为 4GB。
PostgreSQL 中，bytea 是一种用于存储二进制数据的特殊数据类型。
可以用来存储任意二进制内容，
最大存储 1GB。
RAW varbit Oracle 用 RAW 类型保存位串，声明方式为 RAW(size)，
采用固定长度存储，最大 size 为 2000。

PostgreSQL 的 varbit 最大存储长度为 1GB。
Data Type Mapping
Oracle DM Note
CHAR
NCHAR		 CHAR 无论字符串的实际长度是多少，char 类型始终填充空格以达到指定长度。

Oracle 的 char 类型最大长度为 2000;
Oracle 的 nchar 类型最大长度为 1000，适用于需要存储多语言国际化字符；

DM 的 CHAR 类型最大长度为 32767。
VARCHAR
VARCHAR2
NVARCHAR2		 VARCHAR Oracle 12c 及以前的版本中，varchar2 的最大长度为 4000，
在Oracle 12c 及更新的版本中，varchar2 的最大长度为 32767。

DM 的 VARCHAR 类型最大长度为 32767。
LONG VARCHAR LONGVARCHAR Oracle 的 LONG VARCHAR 类型底层采用 LONG 存储，
LONG 类型在 Oracle 9i 版本之后被 CLOB 取代，
LONG 类型的最大存储长度为 2GB。

DM 的 LONGVARCHAR 类型用于存储长的文本串，最大存储长度为 2GB。
SMALLINT SMALLINT
INT
INTEGER		 INT
FLOAT
BINARY_FLOAT		 FLOAT Oracle 的 BINARY_FLOAT 专门用于存储单精度浮点数，采用固定 32 位长度存储。
适用于需要高性能和较低存储开销的浮点数运算场景。
FLOAT 类型实际上是 NUMBER 类型的变种，采用变长存储，
精度高于 BINARY_FLOAT，性能低于 BINARY_FLOAT。
BINARY_DOUBLE
DOUBLE PRECISION		 DOUBLE
NUMBER
DECIMAL		 DECIMAL Oracle 中，numeric，decimal，number 为同义词，底层存储的都是 number 类型。
Oracle 的 NUMBER 类型可以存储整数、小数以及非常大或者非常小的数值，
使用可变长度的存储，根据数值大小动态分配存储空间。
语法 NUMBER(precision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
Oracle 的 NUMBER 类型支持 1-38 位的 precision，scale 可以是 -84 到 127，
当scale取负数时会使得数值按指定的位数四舍五入到最近的倍数。

DM 中 DECIMAL 类型用于存储精确的小数值，特别适合金融和货币相关的数据。
语法：decimal(presision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
NUMERIC NUMERIC
REAL REAL Oracle 的 REAL 类型用于存储浮点数，适合存储不需要高精度的小数数据，
如果对精度要求较高，建议使用 BINARY_FLOAT 或者 BINARY_DOUBLE 类型。
DATE DATE
TIMESTAMP TIMESTAMP
TIMESTAMP WITH TIME ZONE TIMESTAMP WITH TIME ZONE
CLOB
NCLOB
LONG		 CLOB Oracle 的 LONG 类型在早期版本非常常用，
但由于一些不便之处，在 9i 版本开始引入了 CLOB 来替代 LONG。
LONG 的最大存储长度为 2GB，CLOB 的最大存储长度为 4GB。
NCLOB 适合存储需要支持多种语言和特殊字符集的文本数据，最大存储长度为 4GB。

DM 的 CLOB 适用于存储大量的文本信息，例如日志文件、文章、用户评论等，
最大存储长度为 2GB。
BLOB BLOB Oracle 的 BLOB (Binary Large Object) 类型，
适合存储二进制数据，如图像、音频、视频等非文本数据。
BLOB 采用变长存储方式，存储空间依据实际数据长度动态调整，最大长度为 4GB。

DM 的 BLOB 是一种用于存储较大二进制数据的数据类型。
它主要用于存储大文件，如图像、音频、视频、以及其他类型的二进制文件。
最大存储长度为 2GB。
RAW VARBINARY Oracle 用 RAW 类型保存位串，声明方式为 RAW(size)，
采用固定长度存储，最大 size 为 2000。

DM 的 BINARY 类型用于存储固定长度的二进制数据，如校验码、加密密钥等。
BINARY 的最大存储长度为 3847。
DM 的 VARBINARY 用于存储可变长度的二进制数据。
LONG RAW LONGVARBINARY Oracle 的 LONG RAW 类型用于存储可变长度的二进制数据，
最多存储 2GB。适用于存储较大二进制文件的场景，如图像、视频等。

DM 的 LONGVARBINARY 类型也是为存储可变长度的大型二进制数据而设计。

PostgreSQL

PostgreSQL 和 MySQL、Oracle、DM的数据类型映射关系：
Data Type Mapping
PostgreSQL MySQL Note
char char
varchar varchar
inet varchar(45) PostgreSQL 的 inet 类型用于存储 IP 地址
uuid varchar(32)
text
xml		 text
int2 smallint
int4
serial		 int PostgreSQL 的 serial 类型会自动自增，
实际上应该对应 MySQL 的 int AUTO_INCREMENT，
但是 MySQL 的表中只允许一个自增字段，且这个字段必须是主键。
int8
bigserial		 bigint PostgreSQL 的bigserial类型会自动自增，
实际上应该对应 MySQL 的 bigint AUTO_INCREMENT，
但是 MySQL 的表中只允许一个自增字段，且这个字段必须是主键。
float4 float
float8 double
numeric
decimal		 decimal
bool boolean
date date
time time
datetime
timestamp		 timestamp
timestampz datetime
bit bit
json
jsonb		 json
point point
polygon polygon
bytea blob
Data Type Mapping
PostgreSQL Oracle Note
char CHAR PostgreSQL 的char类型最大长度为 10,485,760。
Oracle 的char类型最大存储长度为 2000。
bool CHAR(1) PostgreSQL 的bool类型只能存储 1 位字符：t / f
varchar VARCHAR2 PostgreSQL 的varchar类型最大长度为 1GB。

Oracle 12c 及以前的版本中，VARCHAR2的最大长度为 4000，
在Oracle 12c 及更新的版本中，VARCHAR2的最大长度为 32767。
inet VARCHAR2(45) PostgreSQL 的inet类型用于存储 IP 地址
uuid VARCHAR2(32)
int2 SMALLINT
int4
int8		 INT
float4 BINARY_FLOAT
float8 BINARY_DOUBLE
numeric NUMERIC
decimal DECIMAL
date DATE
time TIME
datetime
timestamp		 TIMESTAMP
timestampz TIMESTAMP WITH TIME ZONE
bit RAW(1) PostgreSQL 的bit类型用于存储 1 位二进制位值，只能存0/1。
Oracle 用 RAW 类型保存位串，声明方式为RAW(size)，
采用固定长度存储，最大 size 为 2000。
json
text
xml		 CLOB PostgreSQL 中，
json用于将 JSON 存储为文本格式，
text的最大存储长度为 1GB。
xml用于存储 XML 文本，最大存储长度 1GB。

Oracle 的CLOB类型最大存储长度为 2GB。
bytea
jsonb		 BLOB PostgreSQL 中，
jsonb用于将 JSON 存储为二进制格式。
bytea是一种用于存储二进制数据的特殊数据类型。
它的全名是 “byte array”，可以用来存储任意二进制内容，
如文件、图像或其他非文本数据，最大存储 1GB。
varbit 类型的最大存储长度为 1GB。

Oracle 的BLOB类型最大存储长度为 2GB。
point
polygon		 不支持
Data Type Mapping
PostgreSQL DM Note
char CHAR PostgreSQL 的char类型最大长度为 10,485,760。
DM 的 CHAR 类型最大长度为 32767。
bool CHAR(1) PostgreSQL 的bool类型存储一位字符：t or f，
在 DM 中用 CHAR(1) 来存储。
varchar VARCHAR PostgreSQL 的varchar类型最大长度为 1GB。
DM 的 VARCHAR 类型最大长度为 32767。
inet VARCHAR(45) PostgreSQL 的 inet 类型用于存储 IP 地址
uuid VARCHAR(32)
int2 SMALLINT
int4
serial		 INT PostgreSQL 的 serial 类型会自动自增，
这个特性在 DM 中不支持。
int8
bigserial		 BIGINT PostgreSQL 的 bigserial 类型会自动自增，
这个特性在 DM 中不支持。
float4 FLOAT
float8 DOUBLE
numeric NUMERIC
decimal DECIMAL
date DATE
time TIME
datetime
timestamp		 TIMESTAMP
timestampz TIMESTAMP WITH TIME ZONE
bit BIT
jsonb
bytea
varbit		 BLOB PostgreSQL 中，
jsonb用于将 JSON 存储为二进制格式。
bytea是一种用于存储二进制数据的特殊数据类型。
它的全名是 “byte array”，可以用来存储任意二进制内容，
如文件、图像或其他非文本数据，最大存储 1GB。
varbit 类型的最大存储长度为 1GB。

DM 的BLOB最多存储 2GB。
json
text
xml		 CLOB PostgreSQL 中，
json用于将 JSON 存储为文本格式，
text的最大存储长度为 1GB。
point
polygon		 不支持 PostgreSQL 的point和polygon类型用于存储几何数据。

DM

DM 和 MySQL、Oracle、PostgreSQL 的数据类型映射关系：
Data Type Mapping
DM MySQL Note
CHAR char 无论字符串的实际长度是多少，CHAR 类型始终填充空格以达到指定长度。

DM 的 CHAR 类型最大长度为 32767。
MySQL 的 char 类型最大长度为 255。
VARCHAR varchar DM 的 VARCHAR 类型最大长度为 32767。

MySQL 的 varchar 类型最大长度为 65535。
TINYINT tinyint
SMALLINT smallint
INT int
BIGINT bigint
FLOAT float
DOUBLE double
DECIMAL decimal DM 中 DECIMAL 类型用于存储精确的小数值，特别适合金融和货币相关的数据。
语法：decimal(presision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
NUMERIC numeric
DATE
DATETIME WITH TIME ZONE		 date
TIMESTAMP
TIMESTAMP WITH TIME ZONE		 timestamp
CLOB
LONGVARCHAR		 longtext DM 的 CLOB 适用于存储大量的文本信息，
例如日志文件、文章、用户评论等，最大存储长度为 2GB。
DM 的 LONGVARCHAR 类型用于存储长的文本串，最大存储长度为 2GB。

MySQL 中的 longtext 适用于存储大量的文本信息，最大存储长度为 4GB
BLOB
LONGVARBINARY		 longblob DM 的 BLOB 是一种用于存储较大二进制数据的数据类型。
它主要用于存储大文件，
如图像、音频、视频、以及其他类型的二进制文件。最大存储长度为 2GB。

MySQL 的 longblob 类型最大存储长度为 4GB。
BIT bit DM 的 BIT 类型用于存储 1 位二进制位值，只能存0/1。
MySQL 的 bit 类型最大存储长度为 64 位。
BINARY
VARBINARY		 varbinary DM 的 BINARY 类型用于存储固定长度的二进制数据，
如校验码、加密密钥等，最大存储长度为 3847。

MySQL 的 varbinary 类型用于存储位序列，最大存储长度为 65535。
Data Type Mapping
DM Oracle Note
CHAR CHAR 无论字符串的实际长度是多少，CHAR 类型始终填充空格以达到指定长度。

Oracle 的 CHAR 类型最大长度为 2000;

DM 的 CHAR 类型最大长度为 32767。
BIT CHAR(1) DM 的 BIT 类型用于存储二进制位值，只能存0/1。
VARCHAR VARCHAR2 Oracle 12c 及以前的版本中，VARCHAR2 的最大长度为 4000，
在Oracle 12c 及更新的版本中，VARCHAR2 的最大长度为 32767。

DM 的 VARCHAR 类型最大长度为 32767。
LONGVARCHAR LONG VARCHAR Oracle 的 LONG VARCHAR 类型底层采用 LONG 存储，
LONG 类型在 Oracle 9i 版本之后被 CLOB 取代，
LONG 类型的最大存储长度为 2GB。
Oracle 的表中只允许存在一个 LONG 类型的 COLUMN，例如 LONG VARCHAR 和 LONG RAW 类型，只允许一个列存在。

DM 的 LONGVARCHAR 类型用于存储长的文本串，最大存储长度为 2GB。
TINYINT
SMALLINT		 SMALLINT
INT
BIGINT		 INT
FLOAT FLOAT
DOUBLE BINARY_DOUBLE
DECIMAL DECIMAL Oracle 中，numeric，decimal，number 为同义词，底层存储的都是 number 类型。
Oracle 的 NUMBER 类型可以存储整数、小数以及非常大或者非常小的数值，
使用可变长度的存储，根据数值大小动态分配存储空间。
语法 NUMBER(precision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
Oracle 的 NUMBER 类型支持 1-38 位的 precision，scale 可以是 -84 到 127，
当scale取负数时会使得数值按指定的位数四舍五入到最近的倍数。

DM 中 DECIMAL 类型用于存储精确的小数值，特别适合金融和货币相关的数据。
语法：decimal(presision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
NUMERIC NUMERIC
REAL REAL Oracle 的 REAL 类型用于存储浮点数，适合存储不需要高精度的小数数据，
如果对精度要求较高，建议使用 BINARY_FLOAT 或者 BINARY_DOUBLE 类型。
DATE DATE
TIMESTAMP TIMESTAMP
TIMESTAMP WITH TIME ZONE
DATETIME WITH TIME ZONE		 TIMESTAMP WITH TIME ZONE
CLOB CLOB Oracle 的 CLOB 类型适合存储大量文本信息，
最大存储长度为 4GB。

DM 的 CLOB 适用于存储大量的文本信息，例如日志文件、文章、用户评论等，
最大存储长度为 2GB。
BLOB BLOB Oracle 的 BLOB (Binary Large Object) 类型，
适合存储二进制数据，如图像、音频、视频等非文本数据。
BLOB 采用变长存储方式，存储空间依据实际数据长度动态调整，最大长度为 4GB。

DM 的 BLOB 是一种用于存储较大二进制数据的数据类型。
它主要用于存储大文件，如图像、音频、视频、以及其他类型的二进制文件。
最大存储长度为 2GB。
BINARY
VARBINARY		 RAW Oracle 用 RAW 类型保存位串，声明方式为 RAW(size)，
采用固定长度存储，最大 size 为 2000。

DM 的 BINARY 类型用于存储固定长度的二进制数据，如校验码、加密密钥等。
BINARY 的最大存储长度为 3847。
DM 的 VARBINARY 用于存储可变长度的二进制数据。
LONGVARBINARY LONG RAW Oracle 的 LONG RAW 类型用于存储可变长度的二进制数据，
最多存储 2GB。适用于存储较大二进制文件的场景，如图像、视频等。

DM 的 LONGVARBINARY 类型也是为存储可变长度的大型二进制数据而设计。
Data Type Mapping
DM PostgreSQL Note
CHAR char 无论字符串的实际长度是多少，CHAR 类型始终填充空格以达到指定长度。
DM 的 CHAR 类型最大长度为 32767。
PostgreSQL 的 char 类型最大长度为 10,485,760。
VARCHAR
LONGVARCHAR		 varchar DM 的 VARCHAR 类型最大长度为 32767。

DM 的 LONGVARCHAR 类型用于存储长的文本串，最大存储长度为 2GB。

PostgreSQL 的 varchar 类型最大长度为 1GB。
TINYINT
SMALLINT		 int2
INT int4
BIGINT int8
FLOAT float4
DOUBLE float8
DECIMAL decimal DM 中 DECIMAL 类型用于存储精确的小数值，特别适合金融和货币相关的数据。
语法：decimal(presision, scale)，其中 precision 是总的有效数字位数，scale 是小数点后的位数。
NUMERIC numeric
DATE date
TIMESTAMP timestamp
TIMESTAMP WITH TIME ZONE
DATETIME WITH TIME ZONE		 timestampz
CLOB text DM 的 CLOB 适用于存储大量的文本信息，
例如日志文件、文章、用户评论等，最大存储长度为 2GB。

PostgreSQL 的 text 类型用于存储大型文本数据，
最大存储长度为 1GB。
BLOB
LONGVARBINARY		 bytea DM 的 BLOB 是一种用于存储较大二进制数据的数据类型。
它主要用于存储大文件，
如图像、音频、视频、以及其他类型的二进制文件。最大存储长度为 2GB。

PostgreSQL 的 bytea 类型最大存储长度为 1GB。
BIT bit DM 的 BIT 类型用于存储 1 位二进制位值，只能存0/1。
PostgreSQL 的 bit 类型用于存储 1 位二进制位值，只能存0/1。
BINARY
VARBINARY		 varbit DM 的 BINARY 类型用于存储固定长度的二进制数据，
如校验码、加密密钥等。
BINARY 的最大存储长度为 3847。
DM 的 VARBINARY 用于存储可变长度的二进制数据。

PostgreSQL 的 varbit 类型用于存储位序列，最大存储长度为 1GB。

扩展方式

扩展方式也很灵活，按照以下步骤：

  1. 先查阅数据库支持哪些数据类型，重点关注数据类型的精度、存储限制，以免在数据同步过程中出现精度损失。准备好数据类型的映射关系，文件命名：xxx2zzz.json，例如 MySQL2Hive.json;

  2. 在 DataBaseType 类中新增支持的数据库类型：

    public enum DataBaseType {
    
    MYSQL("MySQL"), ORACLE("Oracle"), POSTGRESQL("PostgreSQL"), DAMENG("DM");
    
}

  3. 在 DataBaseConnection 类中新增对 jdbcUrl 的识别分类：

    /**
    
 * 从jdbcUrl中解析数据库类型
    
 *
    
 * @param jdbcUrl
    
 * @return
    
 */
    
private DataBaseType parseDataBaseTypeFromJdbcUrl(String jdbcUrl) {
    
    if (jdbcUrl.startsWith("jdbc:mysql")) {
    
        return DataBaseType.MYSQL;
    
    } else if (jdbcUrl.startsWith("jdbc:oracle")) {
    
        return DataBaseType.ORACLE;
    
    } else if (jdbcUrl.startsWith("jdbc:dm")) {
    
        return DataBaseType.DAMENG;
    
    } else if (jdbcUrl.startsWith("jdbc:postgresql")) {
    
        return DataBaseType.POSTGRESQL;
    
    } else {
    
        throw new IllegalArgumentException("Unsupported jdbc type for " + jdbcUrl);
    
    }
    
}

  4. 新增 BaseMetaDataFetcher 的扩展类 XxxMetaDataFetcher，如果新增数据库元数据信息获取方式有所区别，覆盖 BaseMetaDataFetcher 中的实现，参照 OracleMetaDataFetcher 类；

  5. 新增 BaseDdlGenerator 的扩展类 XxxDdlGenerator，如果新增数据库的 DDL 语法有所区别，覆盖 BaseDdlGenerator 中的实现，参照 MySQLDdlGenerator 类；

写在最后

源码地址 https://github.com/redburning/database-ddl-transformer

如果大家使用过程中发现了问题，欢迎在 GitHub 上提 issue，提 issue 比给 star 更让我 appreciated！

大家如果还用过哪些趁手的数据同步工具，欢迎留言、讨论。

异构数据源DDL自动转换的更多相关文章

  1. 异构数据源海量数据交换工具-Taobao DataX 下载和使用

    DataX介绍 DataX是一个在异构的数据库/文件系统之间高速交换数据的工具,实现了在任意的数据处理系统(RDBMS/Hdfs/Local filesystem)之间的数据交换. 目前成熟的数据导入 ...

  2. SpringBoot中mybatis配置自动转换驼峰标识没有生效

    mybatis提供了一个配置: #开启驼峰命名转换 mybatis.configuration.map-underscore-to-camel-case=true 使用该配置可以让mybatis自动将 ...

  3. DataX异构数据源离线同步工具json文件配置说明

    DataX 是阿里开源的一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL.Oracle等).HDFS.Hive.ODPS.HBase.FTP等各种异构数据源之间稳定高效的数据同步功能 ...

  4. （二）JPA 连接工厂、主键生成策略、DDL自动更新

    (一)JPA的快速入门 2.JPA连接工厂 通过之前的 代码 实现已经清楚的发现了整个的JPA实现步骤,但是这个步骤似乎有一些繁琐了,毕竟最终所关心的一定是EntityManager对象实例,而要想获 ...

  5. [占位-未完成]scikit-learn一般实例之十一:异构数据源的特征联合

    [占位-未完成]scikit-learn一般实例之十一:异构数据源的特征联合 Datasets can often contain components of that require differe ...

  6. Struts2 OGNL 自动转换Date类型的一些注意事项

    Strut2 有比较完善的使用OGNL的jsp标签自动转化为对应的后台对象的功能. 这里java.util.Date的自动转化有一些需要注意的地方(局部转换): 1.必须要在struts的xml文件中 ...

  7. PHP是弱类型语言，自动转换，强制转换

    强制转换: (int) - 转换成整型 (bool) - 转换.成布尔型 (float) - 转换成浮点型 (string) - 转换成字符串 (array) - 转换成数组 (object) - 转 ...

  8. long l=88;这个表达式是正确的，因为long比int类型大，会发生自动转换

    long l=88;这个表达式是正确的,因为long比int类型大,会发生自动转换

  9. SpringMVC关于json、xml自动转换的原理研究[附带源码分析]

    目录 前言 现象 源码分析 实例讲解 关于配置 总结 参考资料 前言 SpringMVC是目前主流的Web MVC框架之一. 如果有同学对它不熟悉,那么请参考它的入门blog:http://www.c ...

  10. springMVC注解@initbinder日期类型的属性自动转换

    在实际操作中经常会碰到表单中的日期 字符串和Javabean中的日期类型的属性自动转换, 而springMVC默认不支持这个格式的转换,所以必须要手动配置, 自定义数据类型的绑定才能实现这个功能. 一 ...

随机推荐

  1. API 接口是什么？怎么对接 API？

    API接口是预先定义的函数,允许应用间共享数据和功能.对接API涉及获取接口文档,通过POST请求调用如http://域名地址/queryLoginWx的URL,使用特定Headers.成功返回会包含 ...

  2. 防御DDOS攻击

    如何防御DDOS攻击 1.采用高性能的网络设备 首先要保证网络设备不能成为瓶颈,因此选择路由器.交换机.硬件防火墙等设备的时候要尽量选用知名度高.口碑好的产品.再就是假如和网络提供商有特殊关系或协议的 ...

  3. C++ STL vector 性能之push_back、emplace_back、reserve

    #include <iostream> #include <vector> #include <chrono> using namespace std; const ...

  4. JavaScript习题之填空题

    1. JavaScript有两种引⽤数据类型:__数组___.__对象__.2. Javascript通过__setTimeout___延迟指定时间后,去执⾏某程序.3. Javascript⾥Str ...

  5. v-show、v-if、v-for的使用

    v-if vs v-show v-if 是"真正"的条件渲染,因为它会确保在切换过程中条件块内的事件监听器和子组件适当地被销毁和重建. v-if 也是惰性的:如果在初始渲染时条件为 ...

  6. TS体操类型学习记录

    Easy 1. Easy - 4 - Pick 从类型 T 中选出符合 K 的属性,构造一个新的类型 type MyPick<T, K extends keyof T> = { [key ...

  7. Android 车载应用开发指南 - CAN Bus 协议详解

    ​ 在现代车载应用开发中,CAN(Controller Area Network)总线协议扮演着不可或缺的角色.作为一个汽车内部网络的标准协议,CAN Bus 已经成为了车载系统通信的基础.而在 An ...

  8. Oracle ASM 常用巡检脚本

    1.查看磁盘组 sqlplus "/ as sysasm" set line 200 set pagesize 200 select group_number,name,state ...

  9. HTB打靶记录-Cicada

    Nmap Scan nmap扫描一下ip nmap -sT -sV -O -Pn 10.10.11.35 Nmap scan report for 10.10.11.35 Host is up (0. ...

  10. 大数据技术之Shell

    1. shell概述 示意图: Shell是一个命令行解释器,它为用户提供了一个向Linux内核发送请求以便运行程序的界面系统级程序,用户可以用Shell来启动.挂起.停止甚至是编写一些程序. ● L ...