阿里云rds mysql数据库数据恢复到ecs中

背景:aliyun上的rds数据库快满了,于是删除了某个备份的表后面大boss说是有用的表,需要恢复回来,阿里云有7天内的物理全量备份(通过percona-xtrabackup备份的)第一时间应该延长备份时间(默认保留7天,可以配置15天或更长避免在恢复过程中被阿里云的rds删除) 准备:数据库大概有700G左右,物理备份文件100G左右,恢复回来需要占用大概1多T的空间,于是在现有同样区域的ecs上挂载一块2T的磁盘用来做恢复整体的过程是:在相同地域的ecs安装好mysql,恢复到上面,然后…

记阿里云 RDS MySQL 的一个大坑

花了一个下午的时间,终于把一个阿里云 RDS MySQL 的一个大坑填上了,解决方法令人匪夷所思!绝对会让各位看官感到大吃一惊,阿里云 RDS MySQL 居然有这样 xx 的大坑! 问题最近应业务的需求,加了一个定时统计的任务,其中的算法很简单,只是需要大量的 CRUD 操作. 由于业务简单,且时效性要求不高,所以代码写起来若行云流水,一气呵成,本地测试一遍通过. 没料想,当部署到线上测试的时候,却上演了现场翻车,真是让人大跌眼镜-- 看了一下错误日志,大致如下所示: ERROR [DAL.…

本地电脑通过Navicat连接阿里云的Mysql数据库

第一步:需要设置mysql的监听地址查看mysql的监听地址: netstat -nao 如果3306(mysql默认端口)前面是0.0.0.0,则表示端口监听没有问题,如果是127.0.0.1,则需要修改. 修改方式:打开/etc/mysql/my.cnf文件在文件中加入如下代码: [mysqld] bind-address=0.0.0.0 重启mysql: service mysql restart 第二步:mysql数据库中的user的表权限: mysql -u root -p; /*…

关于阿里云 RDS mysql索引优化的一点经验

2019年9月5日10:02:34 本地调试 git https://github.com/barryvdh/laravel-debugbar composer require barryvdh/laravel-debugbar --dev APP_DEBUG TRUE 配置.env 本地调试很方便,千万不要弄到线上去了,因为这个东西其实很消耗资源的公司的项目,因为使用workerman做消息推送,我之前想是做主从,但是想到需要额外花费,而且目前大部分是内部使用,就开始了优化mysql之路框…

阿里云服务器安装mysql数据库及连接使用

第一步:安装mysql 我个人是申请的阿里云ecs服务器CentOs操作系统,由于是初装咱们直接进行安装 1.首先从官网下载安装mysql-serve # wget http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm # rpm -ivh mysql-community-release-el7-5.noarch.rpm # yum install mysql-community-server 2.安装成功后,重启m…

远程连接阿里云的mysql数据库

第一步由于mysql版本问题先尝试打开 sudo vim /etc/mysql/my.cnf 如空,再尝试打开 sudo vim /etc/mysql/mysql.conf.d/mysqld.cnf # 号注释该行 bind-address = 127.0.0.1 第二步进入mysql mysql -uroot -p 授权 grant all privileges on *.* to root@"%" identified by "root密码" with…

阿里云服务器 Mysql数据库的安装和使用

为了做服务迁移,mysql的安装总是不那么顺利, 教程很多, 但都不能够一蹴而就, 所以,单独总结一篇, 当然也借鉴了一些前辈的经验. ===================================================================== 前端监控系统: DEMO地址 ===================================================================== 操作系统: ubantu16.4 1.下载地址:htt…

阿里云安装mysql数据库出现2002错误解决办法

在安装数据库的时候出现了如下错误: 解决办法如下: 1.在bin目录下输入:kill -s 9 9907 再输入:ps -ef|grep mysql 显示如下: 2.回到lampp目录下,重启数据库,服务器: 1. ./lampp restart…

再也不怕数据丢失！阿里云RDS MySQL 8.0上线回收站功能

背景 MySQL 在生产环境使用过程中,会伴随着开发和运维人员的误操作,比如 DROP TABLE / DATABASE,这类 DDL 语句不具有可操作的回滚特性,而导致数据丢失,AliSQL 8.0 新特性支持回收站功能(Recycle Bin),临时把删除清理的表转移到回收站,并保留可设置的时间,方便用户找回数据.为了方便,提供了 DBMS_RECYCLE package 作为管理接口. Recycle Bin 管理接口 Recycle Bin 提供了两个管理接口,分别是: DBMS_REC…

阿里云RDS与ECS服务器数据库做主从

阿里云RDS与ECS服务器数据库做主从 [精] 里云RDS(数据库)基于飞天大规模分布式计算和存储能力,提供超高性价比的单机版实例,同时利用读写分离横向扩展读能力,满足网站类的业务需求.提供稳定.高性能.安全可靠的数据库服务,针对电商秒杀场景进行专项优化,解决热点数据的高并发更新性能瓶颈,100倍性能提升.通过高安全模式,内置SQL注入检测模块,实时拦截风险SQL,保护数据安全.数据强一致性保证,满足金融级可靠性要求,搭建事前.事中.事后三层数据安全防护网,提供双机热备.同城.异地三中心部署架构…

Navicat 连接阿里云的 MySQL

1 利用Navicat连接阿里云服务器中MySQL 常规连接方式常用于连接本机数据库以及虚拟机中的数据库:但是连接阿里云的MySQL数据库时会出现连接不上的情况,错误信息如下: 1.1 常规中的配置 1.1.1 主机IP 填写本机的回环IP 1.1.2 端口阿里云中MySQL的开放端口,采用默认的3306即可 1.1.3 用户名阿里云中MySQL的用户名 1.1.4 密码阿里云中MySQL用户名对应的用户密码 1.2 SSH配置 1.2.1 主机IP 阿里云服务器的公网IP 1.2.2 用…

50倍时空算力提升，阿里云RDS PostgreSQL GPU版本上线

2019年3月19日,阿里云RDS PostgreSQL数据库GPU规格版本正式上线,开启了RDS异构计算并行加速之路.该版本在RDS(关系型数据库服务)的云基础设施层面首次完成了与阿里云异构计算产品的适配,实现了PostgreSQL时空引擎Ganos在空间图形图像处理上的并行计算加速,成为国内第一个将GPU应用于商业空间信息领域的数据库. 1. GPU并行计算 GPU(Graphic Processing Unit)是一种高并行架构图形处理器,其最突出的特点就是计算核心多,相比传统CPU四个.…

为更强大而生的开源关系型数据库来了！阿里云RDS for MySQL 8.0 正式上线！

2019年5月29日15时,阿里云RDS for MySQL 8.0正式上线,使得阿里云成为紧跟社区步伐,发布MySQL最新版本的云厂商.RDS for MySQL 8.0 产品是阿里云推出的 MySQL 系列云产品之一,使用完全兼容 MySQL 8.0 的阿里云 AliSQL 8.0 分支,除了官方在 MySQL 8.0 推出的全新功能外,AliSQL 沉淀了许多在 Alibaba 集团电商业务和云上几十万客户在使用 MySQL 过程中遇到的问题和需求,以此来加固AliSQL, 提升 AliS…

阿里云 RDS for MySQL 物理备份文件恢复到自建数据库

想把阿里云的Mysql 生成的RAS 文件.tar文件恢复到本地自建mysql, 遇到的坑.希望帮助大家阿里云提供的地址 https://help.aliyun.com/knowledge_detail/41817.html#h2-url-1 1:安装 Mysql 和 innobackup 需要安装2个软件,根据阿里提供的文档 MySQL 5.6及之前的版本需要安装 Percona XtraBackup 2.3 MySQL 5.7版本需要安装 Percona XtraBackup 2.4…

阿里云RDS的mysql数据库占用空间超过90%的处理

阿里云RDS数据库最大支持2T,目前已经占用了90%,如果进行分库或者迁移比较麻烦,思路是找出占用空间过大的日志或不重要的文件进行删除操作查询所有数据库占用磁盘空间大小的SQL语句: show binary logs; show variables like '%log%'; set global expire_logs_days = 10; select TABLE_SCHEMA, concat(truncate(sum(data_length)/1024/1024,2),' MB')…

阿里云rds数据库迁移实战（多数据源）

由于某几个业务表数据量太大,数据由业务写,数据部门读. 写压力不大,读却很容易导致长时间等待问题(读由单独系统进行读),导致连接被占用,从而容易并发稍稍增长导致全库卡死! 于是,就拆库呗. 业务系统拆分就不要做了(微服务化),没那工夫. 直接原系统拆两个数据源出来,对某几个高压力表的写就单独用这个数据源,从而减轻压力. 所以,分库工作就变为了两个步骤: 1. 两个数据源读写业务: 2. 将新数据库写动作同步回读库: 再由于方便性,数据库也是使用阿里的rds数据库,一个变为两个! 代码上做两个数据…

阿里云RDS数据库改造迁移方案

1. 改造原因 (1) 由于历史原因, 本应该是同一个库的表分布在两个数据库中,需要对这两个库进行合并. (2) 已有的数据库性能无法满足业务的增长需要, 查询卡,慢问题突出. (3) 当前自建Mysql数据库在配置优化.性能监控.负载均衡上缺乏成熟的方案和经验, 故借托管到阿里云RDS,有利于数据库的数据安全和服务器稳定. 2. RDS数据库现状分析 (1)RDS基本配置 (2)RDS使用情况 eunke-db007: 当前只用于做RDS性能测试, 不做生产使用, 故可以释放. eunke-…

阿里云 RDS 数据库又发 CPU 近 100% 的“芯脏病”

最近云界发生了2件事,一件是大事,一件是小事,大事是阿里云与微软合作推出了开放应用模型 Open Application Model(OAM),小事是由于微软 SQL Server 在阿里云上水土不服(仅是我们的猜测),阿里云 SQL Server RDS 患上了间隙性芯脏病,该病容易在夜间酣睡的时候发病,目前唯一的急救药是“主备切换”. 对于大事,我们拍手叫好,云厂商绑定的问题正在被逐步解决.对于小事,我们提心吊胆,阿里云你可要保重龙体啊,你打个喷嚏,我们都抖三抖,你要是生个小病,我们怎么活.…

阿里云RDS数据库备份同步到自建库方法（SHELL脚本）

一.背景: 由于阿里云RDS生产库每天都需要备份且拷贝到自建读库,而如果使用阿里云的自动拷贝到只读实例, 费用太高, 故采用自编写同步脚本方法实现. 二.前提: 1). 已开通阿里云RDS, 且开启定期备份功能.(备份功能生成备份文件供下载) 2). 已在备份的目标服务器上安装mysql数据库. 3). 备份目标服务器已安装数据恢复工具Percona XtraBackup,您可以从Percona XtraBackup官网下载安装. MySQL 5.6及之前的版本需要安装 Percona Xtra…

云计算之路-阿里云上：数据库连接数过万的真相，从阿里云RDS到微软.NET Core

在昨天的博文中,我们坚持认为数据库连接数过万是阿里云RDS的问题,但后来阿里云提供了当时的数据库连接情况,让我们动摇了自己的想法. 帐户连接数 A 4077 B 3995 C 741 D 698 E 519 上面这5个帐户产生了10030个数据库连接,当看前4个帐户(产生了9511个连接)的名称时,我们打了一个寒颤 —— 这些都是运行 Linux 上的 ASP.NET Core 站点...这不是巧合,其中必有蹊跷. 随后,我们观察了主备库切换后的 RDS 中数据库连接情况.有一个运行在 Lin…

阿里云 RDS for MySQL支持什么引擎

问题:我们的服务器是买的是阿里云,mysql版本5.011 ,本地和服务器配置一样,在本地可以安装discuzX3.4,但是在服务器上却报错了,如下图: 找了半天,才知道阿里云RDS 支持的mysql不支持memory引擎,官方的通知是: 目前仅支持MyISAM(新创建实例已不支持,只支持部分存量实例).InnoDB.TokuDB三种. 出于性能和安全性考虑建议尽量采用InnoDB存储引擎.我们推荐您使用InnoDB引擎,这将获得更好的性能. (MyISAM引擎虽不会产生错误,但由于MyISAM…

【故障公告】阿里云 RDS 数据库服务器 CPU 100% 造成全站故障

非常非常抱歉,今晚 19:34 ~ 21:16 园子所使用的阿里云 RDS 数据库服务器突然出现 CPU 100% 问题,造成全站无法正常访问,由此您带来了很大的麻烦,请您谅解. 故障经过是这样的.19:34 这个时间点本来是一个访问低峰,数据库压力比访问高峰时低很多,但数据库服务器却异想天开.吃饱了撑着地让自己的 CPU 满负荷工作(到现在我们都没想通,难道是服务器晚饭吃多了想帮助消化?).开始我们以为是某个应用引起的,一个一个应用排查与重启, 但 CPU 不为所动,依然百分百.接着,我们一边…

云上的芯脏病：奇怪的阿里云 RDS 数据库突发 CPU 近 100% 问题

最近遇到了奇怪的阿里云 RDS 数据库突发 CPU 近 100% 问题,遇到了3次. 第一次是10月12日(周六)凌晨 3:24 负载极低的时候开始出现,早上发现后进行了主备切换,恢复了正常. 第二次也是出现在10月12日,就在主备切换后不久,发现后又进行了主备切换,切换回之前出问题的服务器,恢复了正常. 第三次是昨天(10月18日)23:15 开始出现,今天早上(也是周六)发现后,再次通过主备切换恢复了正常. 阿里云 RDS 型号用的是 SQL Server 2016 标准版,是9月份从 SQ…