[转帖]OceanBase实验4：迁移MySQL数据到OceanBase集群

服务器环境

1）12核48G，操作系统为centos 7.9系统，单节点三副本1-1-1集群。

2）源MySQL数据库：与OceanBase同一台服务器，版本为MySQL 5.7。

1、使用 mysqldump 迁移数据

1）mysql源数据库信息

2）导出表结构

mysqldump -h 127.0.0.1 -u root -p -d lianghe_db > lianghe_db.sql（如在/etc/my.conf中已配置mysqldump登录信息则使用mysqldump -d lianghe_db > lianghe_db.sql即可。）

3）导出一张表数据

mysqldump –h 127.0.0.1 –u root –p –t lianghe_db –tables area > area.sql（如在/etc/my.conf中已配置mysqldump登录信息则使用mysqldump -t lianghe_db --tables area > area.sql即可。）

4）使用obclient连接oceanbase数据库

5）导入表结构

6）导入表数据

导入后的表及数据

2、使用 Datax 配置数据迁移

1）迁移前mysql和oceanbase数据

mysql

oceanbase

2）安装datax

下载 DataX 工具

https://github.com/alibaba/DataX

或http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gz

直接解压并删除隐藏文件：

tar -xf datax.tar.gz

find ./datax/plugin -name ".*" | xargs rm -f

3）检查java环境

4）生成配置文件

python ./datax/bin/datax.py -r mysqlreader -w oceanbasev10writer > ./datax/job/MySQL2OeanBase.json

5）修改配置文件

vi ./datax/job/MySQL2OeanBase.json

{

    "job": {

        "content": [

            {

                "reader": {

                    "name": "mysqlreader",

                    "parameter": {

                        "column": ["*"],

                        "connection": [

                            {

                                "jdbcUrl": ["jdbc:mysql://127.0.0.1:3306/lianghe_db?useUnicode=true&characterEncoding=utf8"],

                                "table": ["subjects"]

                            }

                        ],

                        "password": "P@ssw0rd123",

                        "username": "root",

                        "where": ""

                    }

                },

                "writer": {

                    "name": "oceanbasev10writer",

                    "parameter": {

                        "column": ["*"],

                        "connection": [

                            {

                                "jdbcUrl": "||_dsc_ob10_dsc_||obcluster:tenant_henry||_dsc_ob10_dsc_||jdbc:mysql://127.0.0.1:2883/mydb?useUnicode=true&characterEncoding=utf8",

                                "table": ["subjects"]

                            }

                        ],

                        "obWriteMode": "",

                        "password": "mydb",

                        "username": "henry"

                    }

                }

            }

        ],

        "setting": {

            "speed": {

                "channel": "8"

            }

        }

    }

}

在oceanbasewriter的配置里注意jdbcUrl的第二参数“obcluster:tenant_henry”是“集群名:租户名”。另外，各个配置项注意用引号包起来。

6）执行迁移

python bin/datax.py job/MySQL2OeanBase.json

7）查看结果

迁移成功。

3、问题

1）因在/etc/my.conf中已配置有mysqldump登录信息(root和password)，使用mysqldump导出数据时，若有登录参数(如：mysqldump -uroot -p ...)会报错，此时mysqldump命令不用附加登录参数，直接加数据库名作参数即可。

2）第一节执行source xxx.sql时，

You have an error in your SQL syntax; check the manual that corresponds to your OceanBase version for the right syntax to use near ‘--’ at line 1

数据文件中有--注释信息，导入到OceanBase会报错，可以忽略，并不影响数据导入。我对源文件作了编辑，删除了这些内容。

其它类似如‘ENABLE KEYS */’、‘DISABLE KEYS */’等报错，可以忽略，并不影响数据导入。我对源文件作了编辑，删除了这些内容。

变量 SQL_NOTES，DEFINER 语句等 OceanBase MYSQL 会不支持，但是不影响，需要替换掉其中部分。

文章知识点与官方知识档案匹配，可进一步学习相关知识

MySQL入门技能树SQL高级技巧CTE和递归查询75729 人正在系统学习中