迁移数据库mysql
文档 <http://site.clairvoyantsoft.com/migrate-cloudera-scm-database-from-postgresql-to-mysql/>
http://node0:7180/api/v14/cm/deployment -------------正确网址。
#####1.停止服务;
1.在UI界面,停止集群;
2.在UI界面,停止cm的service,monitor等全部服务;
3.在Linux,停止agent服务:service cloudera-scm-agent stop
#####2.备份CM配置,通过API ------
$ curl -v -u admin:admin http://node0:7180/api/<version>/cm/deployment > /home/user/deployment
本机:
$ curl -v -u admin:admin http://node0:7180/api/v14/cm/deployment > /home/user/deployment
注意:这个文件被保留和保护至关重要,因为它将需要重新导入功能配置到新数据库中。(v14)
Obtain version with: http://manager_host:7180/api/version
#####3.对postgre的db和server目录做备份。
#cd /var/lib/cloudera-scm-server-db/
#tar -cvf /home/user/cloudera-scm-server-db.tar .
#cd /etc/cloudera-scm-server/
#tar -cvf /home/user/cloudera-scm-server.tar .
文件归档在 /home/user/ 下。
#####4.在server端,停止server,停止server-db,抛弃server-db off
$ sudo service cloudera-scm-server stop
$ sudo service cloudera-scm-server-db stop
$ sudo chkconfig cloudera-scm-server-db off
#####5.保证mysql server正确安装。--------------------<font color=red>[1]</font>
#####6.安装、配置mysql软件------<font color=red>[2]</font>
#####7.创建"temp" db 并且赋权限,记录“示例1:运行脚本当MySQL安装在另一个主机”<font color=red>[3]</font>
#mysql -h mysql_hostname -u user -p
mysql> create database temp;
mysql> grant all on *.* to 'temp'@'%' identified by 'temp' with grant option;
#####8.执行/usr/share/cmf/schema/scm_prepare_database.sh(可重置)
$/usr/share/cmf/schema/scm_prepare_database.sh mysql -h mysql_hostname -u user -p --scm-host manager_host <scm_db_name> <scm_user> <scm_password>
Note: run $ /usr/share/cmf/schema/scm_prepare_database.sh
with no arguments to get syntax assistance
#####9.开启server服务。
service httpd start
$ sudo service cloudera-scm-server start
#####10.Cloudera Manager web用户界面登录和上传企业许可证密钥。
#####11.重启scm-server
$ sudo service cloudera-scm-server restart
#####12.修复CM配置(step2),通过API---
$ curl --upload-file /home/user/deployment -u admin:admin http://node0:7180/api/v14/cm/deployment?deleteCurrentDeployment=true -H "Content-Type: application/json"
//add http header option(恢复集群的命令): -H "Content-Type: application/json" ..if required
//verify that there are no errors, the command prints the api even on connection failure.
#####13.登录CM,验证当前的配置选项。所有服务现在应该可用但是停止状态。
尝试,所有主机-重新运行升级向导。
#####14.cleanup:
$ yum erase cloudera-manager-server-sb
#####15.如果scm-agent启动失败,你必须删除或者一出pid ./var/lib/cloudera-scm-agent/ 并且重启agent。
###参考网址
[1] <http://www.cloudera.com/documentation/enterprise/latest/topics/cm_ig_mysql.html#cmig_topic_5_5_2>
[2] <http://dev.mysql.com/downloads/mysql/>
[3] <http://www.cloudera.com/documentation/enterprise/latest/topics/cm_ig_installing_configuring_dbs.html#concept_i2r_m3m_hn__example_fsj_cyp_bm>
[4] ref: https://gist.github.com/gwenshap/7044525</br>
<font color = 'red'>[5] <http://site.clairvoyantsoft.com/migrate-cloudera-scm-database-from-postgresql-to-mysql/>【译】</br></font>
http://cwiki.apachecn.org/pages/viewpage.action?pageId=2888090
参考网址1-----配置mysql server和jdbc driver:
1.
参考网址3:在另一台主机配置mysql2,连接mysql1。
---
3、 查看postgresql 的scm用户的密码
grep password /etc/cloudera-scm-server/db.properties
会得到如下信息:
[root@hadoop1 /]# grep password /etc/cloudera-scm-server/db.properties
com.cloudera.cmf.db.password=pfxlUudKJo
4、 登陆postgresql 数据库
psql -h localhost -p 7432 -U scm
输入第三步查到的密码
/usr/share/cmf/schema/scm_prepare_database.sh postgresql scm scm scm
/etc/init.d/cloudera-manager-server-db restart
http://blog.csdn.net/dracotianlong/article/details/7907633
<http://blog.csdn.net/mirabelle521/article/details/71169631>
**guid删除,重新运行升级向导**
/var/lib/cloudera-scm-agent/cm_guid 删除guid--主机状况不良(由于原集群的guid存在唯一性,过时)
---http://blog.csdn.net/wonder4/article/details/58585180
---http://blog.csdn.net/u011031430/article/details/74057601
---https://www.cloudera.com/documentation/enterprise/release-notes/topics/cm_rn_known_issues.html#rn_OPSAPS-34847
---**重新运行升级向导<br>**
---parcel没有分发,但是是活动的<BR>
**取消parcel异常分发状态--激活卡主**
> use curl -X POST with Cloudera API.
> http://node0:7180/api/v14/cm/deployment中找到相应的配置。
> 格式API文档:http://node0:7180/static/apidocs/
curl -u admin:admin -X POST http://node0:7180/api/v14/clusters/cluster/parcels/products/KAFKA/versions/2.0.2-1.2.0.2.p0.5/commands/deactivate
curl -u admin:admin -X POST http://node0:7180/api/v14/clusters/cluster/parcels/products/CDH/versions/5.8.0-1.cdh5.8.0.p0.42/commands/deactivate
<http://community.cloudera.com/t5/Cloudera-Manager-Installation/Parcel-not-distributed-but-have-active-state-ACTIVATING/m-p/32474/highlight/true><br>
**ctrl + B**
拒绝连接-- /etc/hosts
**官方文档**
https://www.cloudera.com/documentation/enterprise/latest/topics/installation.html
迁移数据库mysql的更多相关文章
- 如何将MongoDB数据库的数据迁移到MySQL数据库中
FAQ v2.0终于上线了,断断续续忙了有2个多月.这个项目是我实践的第一个全栈的项目,从需求(后期有产品经理介入)到架构,再到设计(有征询设计师的意见).构建(前端.后台.数据库.服务器部署),也是 ...
- ABP .Net Core Entity Framework迁移使用MySql数据库
一.迁移说明 ABP模板项目Entity Framework Core默认使用的是Sql Server,也很容易将数据库迁移到MySQL,步骤如下. 二.迁移MySQL步骤 1. 下载项目 请到 ht ...
- Saiku数据库迁移H2迁移到Mysql(二十二)
Saiku数据库迁移H2迁移到Mysql Saiku默认使用H2数据库来存储saiku的用户与角色信息,我们可以根据角色来做saiku的权限控制,然后将角色分配给用户 ,该用户就会有对应的约束了! 由 ...
- 使用navicat premium将数据库从Oracle迁移到SQL Server,或从Oracle迁移到MySQL
有时候我们有迁移数据库的需求,例如从Oracle迁移到SQL Server,或者从MySQL迁移到Oracle. 很多江湖好汉一时不知如何手工操作,所幸的是Navicat提供了迁移的自动化操作界面. ...
- 将ABP的数据库从SQLSERVER迁移到MySql
摘要:之前跟着网上的一些教程,学习了一点ABP的知识.最近想说把默认的SQLSERVER数据迁移到mysql吧 首先网上搜一波 安装MySql.Data.Entity 然后你需要安装 MySql.Da ...
- 【数据库】各种主流 SQLServer 迁移到 MySQL 工具对比
在部署前期,首要任务就是考虑如何快速把基于 SQL Server 数据库的应用程序移植到阿里云的 MySQL 数据库.由于程序是基于 O/R mapping 编写,并且数据库中没有使用存储过程.用户函 ...
- 怎么将数据库从Oracle迁移到SQL Server,或从Oracle迁移到MySQL
有时候我们有迁移数据库的需求,例如从Oracle迁移到SQL Server,或者从MySQL迁移到Oracle. 很多江湖好汉一时不知如何手工操作,所幸的是Navicat提供了迁移的自动化操作界面. ...
- [转载]如何将OFBIZ(opentaps)默认数据库迁移至mysql((2
原文地址:如何将OFBIZ(opentaps)默认数据库迁移至mysql(利昂原创)作者:利昂 ofbiz自带的数据库是Derby,这是一种小型的适合与测试系统的数据库,但不适合在产品级系统中使用,所 ...
- Oracle 数据库迁移到MySQL (kettle,navicate,sql developer等工具
Oracle 数据库迁移到MySQL (kettle,navicate,sql developer等工具 1 kettle --第一次使用kettle玩迁移,有什么不足之处和建议,请大家指正和建议. ...
随机推荐
- Swiper 的引入
1. 从官网下载必要资源 https://www.swiper.com.cn/download/index.html#file1 2. 在项目中<head>中引入swiper.min.cs ...
- js 反斜杠 处理
var t = jsonstr.replace(/\\/g,"\\\\\\\\"); --\\ 表示 代码 输出 \' 单引号 \" 双引号 \& 和号 \\ 反 ...
- Linux入门培训教程 linux下拷贝cp删除rm移动mv命令参数以及说明
拷贝移动删除在windows中看起来这么简单,但linux经常使用的文字界面,所以对于linux系统 下拷贝cp删除 rm 移动mv命令参数就不得不需要了解和学习了 cp 该命令的功能是将给出的文件或 ...
- 可持久化Trie模板
如果你了解过 01 Trie 和 可持久化线段树(例如 : 主席树 ).那么就比较好去可持久化 Trie 可持久化 Trie 当 01 Trie 用的时候能很方便解决一些原本 01 Trie 不能解决 ...
- window.location.hash(hash应用)---跳转到hash值制定的具体页面
location是javascript里边管理地址栏的内置对象,比如location.href就管理页面的url,用location.href=url就可以直接将页面重定向url.而location. ...
- 一个ros包依赖另一个ros包提供的库
背景: 编写一个点云配准的ros包,记为A,在其中打算使用多种点云配准算法. 同一个ros工作空间下有另一个ros包,记为B,B中提供了几种点云配准算法,并将它们都编译成一个库文件并安装在工作空间中. ...
- vue-cli 构建的 Vue 项目用 localhost 加 端口 能访问,但是切换到 ip 加 端口 就不能访问
问题出在 webpack 的配置 在 config 文件夹下, 找到 index.js 目录, 找到如下代码 host: 'localhost', // can be overwritten by p ...
- (61)C语言预处理命令详解
一 前言 预处理(或称预编译)是指在进行编译的第一遍扫描(词法扫描和语法分析)之前所作的工作.预处理指令指示在程序正式编译前就由编译器进行的操作,可放在程序中任何位置. 预处理是C语言的一个重要功能 ...
- java实现豆瓣回帖机器人
最近一直帮老板写爬虫,写累了就寻思着找点乐子,碰巧平时喜欢逛豆瓣,就打算写一个自动回帖机器人,废话不多说我们进入正题: 主要用到2个开源工具:Jsoup和httpclient Step 1:模拟登陆 ...
- springboot+mybatis+SpringSecurity 实现用户角色数据库管理(一)
本文使用springboot+mybatis+SpringSecurity 实现用户权限数据库管理 实现用户和角色用数据库存储,而资源(url)和权限的对应采用硬编码配置. 也就是角色可以访问的权限通 ...