关于阿里云 RDS mysql索引优化的一点经验

2019年9月5日10:02:34 本地调试 git https://github.com/barryvdh/laravel-debugbar composer require barryvdh/laravel-debugbar --dev APP_DEBUG TRUE 配置.env 本地调试很方便,千万不要弄到线上去了,因为这个东西其实很消耗资源的公司的项目,因为使用workerman做消息推送,我之前想是做主从,但是想到需要额外花费,而且目前大部分是内部使用,就开始了优化mysql之路框…

记阿里云 RDS MySQL 的一个大坑

花了一个下午的时间,终于把一个阿里云 RDS MySQL 的一个大坑填上了,解决方法令人匪夷所思!绝对会让各位看官感到大吃一惊,阿里云 RDS MySQL 居然有这样 xx 的大坑! 问题最近应业务的需求,加了一个定时统计的任务,其中的算法很简单,只是需要大量的 CRUD 操作. 由于业务简单,且时效性要求不高,所以代码写起来若行云流水,一气呵成,本地测试一遍通过. 没料想,当部署到线上测试的时候,却上演了现场翻车,真是让人大跌眼镜-- 看了一下错误日志,大致如下所示: ERROR [DAL.…

阿里云rds mysql数据库数据恢复到ecs中

背景:aliyun上的rds数据库快满了,于是删除了某个备份的表后面大boss说是有用的表,需要恢复回来,阿里云有7天内的物理全量备份(通过percona-xtrabackup备份的)第一时间应该延长备份时间(默认保留7天,可以配置15天或更长避免在恢复过程中被阿里云的rds删除) 准备:数据库大概有700G左右,物理备份文件100G左右,恢复回来需要占用大概1多T的空间,于是在现有同样区域的ecs上挂载一块2T的磁盘用来做恢复整体的过程是:在相同地域的ecs安装好mysql,恢复到上面,然后…

再也不怕数据丢失！阿里云RDS MySQL 8.0上线回收站功能

背景 MySQL 在生产环境使用过程中,会伴随着开发和运维人员的误操作,比如 DROP TABLE / DATABASE,这类 DDL 语句不具有可操作的回滚特性,而导致数据丢失,AliSQL 8.0 新特性支持回收站功能(Recycle Bin),临时把删除清理的表转移到回收站,并保留可设置的时间,方便用户找回数据.为了方便,提供了 DBMS_RECYCLE package 作为管理接口. Recycle Bin 管理接口 Recycle Bin 提供了两个管理接口,分别是: DBMS_REC…

为更强大而生的开源关系型数据库来了！阿里云RDS for MySQL 8.0 正式上线！

2019年5月29日15时,阿里云RDS for MySQL 8.0正式上线,使得阿里云成为紧跟社区步伐,发布MySQL最新版本的云厂商.RDS for MySQL 8.0 产品是阿里云推出的 MySQL 系列云产品之一,使用完全兼容 MySQL 8.0 的阿里云 AliSQL 8.0 分支,除了官方在 MySQL 8.0 推出的全新功能外,AliSQL 沉淀了许多在 Alibaba 集团电商业务和云上几十万客户在使用 MySQL 过程中遇到的问题和需求,以此来加固AliSQL, 提升 AliS…

使用阿里云RDS for SQL Server性能洞察优化数据库负载-初识性能洞察

简介数据库性能调优通常需要较高数据库水平,并伴随较多的前期准备工作,比如收集各种性能基线.不同种类的性能指标.慢SQL日志等,这通常费时费力且效果一般,当面对多个数据库时总体拥有成本会大幅增加.今天数据库早已迈入云时代,借助阿里云RDS for SQL Server Clouddba这一免费工具,可以快速准确地降低阿里云RDS for SQL Server数据库负载优化成本与操作人员技能水平要求,从而达到将更多精力用于实现业务本身的,而不是数据库上实现细节. 本篇文章主要分享阿里云Cloudd…

阿里云 RDS for MySQL支持什么引擎

问题:我们的服务器是买的是阿里云,mysql版本5.011 ,本地和服务器配置一样,在本地可以安装discuzX3.4,但是在服务器上却报错了,如下图: 找了半天,才知道阿里云RDS 支持的mysql不支持memory引擎,官方的通知是: 目前仅支持MyISAM(新创建实例已不支持,只支持部分存量实例).InnoDB.TokuDB三种. 出于性能和安全性考虑建议尽量采用InnoDB存储引擎.我们推荐您使用InnoDB引擎,这将获得更好的性能. (MyISAM引擎虽不会产生错误,但由于MyISAM…

阿里云 RDS for MySQL 物理备份文件恢复到自建数据库

想把阿里云的Mysql 生成的RAS 文件.tar文件恢复到本地自建mysql, 遇到的坑.希望帮助大家阿里云提供的地址 https://help.aliyun.com/knowledge_detail/41817.html#h2-url-1 1:安装 Mysql 和 innobackup 需要安装2个软件,根据阿里提供的文档 MySQL 5.6及之前的版本需要安装 Percona XtraBackup 2.3 MySQL 5.7版本需要安装 Percona XtraBackup 2.4…

阿里云RDS的mysql数据库占用空间超过90%的处理

阿里云RDS数据库最大支持2T,目前已经占用了90%,如果进行分库或者迁移比较麻烦,思路是找出占用空间过大的日志或不重要的文件进行删除操作查询所有数据库占用磁盘空间大小的SQL语句: show binary logs; show variables like '%log%'; set global expire_logs_days = 10; select TABLE_SCHEMA, concat(truncate(sum(data_length)/1024/1024,2),' MB')…

阿里云RDS数据库改造迁移方案

1. 改造原因 (1) 由于历史原因, 本应该是同一个库的表分布在两个数据库中,需要对这两个库进行合并. (2) 已有的数据库性能无法满足业务的增长需要, 查询卡,慢问题突出. (3) 当前自建Mysql数据库在配置优化.性能监控.负载均衡上缺乏成熟的方案和经验, 故借托管到阿里云RDS,有利于数据库的数据安全和服务器稳定. 2. RDS数据库现状分析 (1)RDS基本配置 (2)RDS使用情况 eunke-db007: 当前只用于做RDS性能测试, 不做生产使用, 故可以释放. eunke-…

阿里云RDS与ECS服务器数据库做主从

阿里云RDS与ECS服务器数据库做主从 [精] 里云RDS(数据库)基于飞天大规模分布式计算和存储能力,提供超高性价比的单机版实例,同时利用读写分离横向扩展读能力,满足网站类的业务需求.提供稳定.高性能.安全可靠的数据库服务,针对电商秒杀场景进行专项优化,解决热点数据的高并发更新性能瓶颈,100倍性能提升.通过高安全模式,内置SQL注入检测模块,实时拦截风险SQL,保护数据安全.数据强一致性保证,满足金融级可靠性要求,搭建事前.事中.事后三层数据安全防护网,提供双机热备.同城.异地三中心部署架构…

50倍时空算力提升，阿里云RDS PostgreSQL GPU版本上线

2019年3月19日,阿里云RDS PostgreSQL数据库GPU规格版本正式上线,开启了RDS异构计算并行加速之路.该版本在RDS(关系型数据库服务)的云基础设施层面首次完成了与阿里云异构计算产品的适配,实现了PostgreSQL时空引擎Ganos在空间图形图像处理上的并行计算加速,成为国内第一个将GPU应用于商业空间信息领域的数据库. 1. GPU并行计算 GPU(Graphic Processing Unit)是一种高并行架构图形处理器,其最突出的特点就是计算核心多,相比传统CPU四个.…

阿里云rds 备份和还原

阿里云rds 备份和还原转发:https://www.cnblogs.com/lin1/p/8617764.html 转发:https://help.aliyun.com/knowledge_detail/41817.html 1.阿里云数据库备份实例,恢复数据的时候需要将数据恢复到本地数据库,是不能直接恢复到RDS上的. 2.需要在本地服务器上下载一个数据库,尽量和RDS数据库版本保持一致.(我现在用的是5.6的版本) 3.这里需要用到xtrabakcup工具进行数据恢复 1,下载5.6版本…

阿里云数据库MySQL版快速上手！

MySQL是全球最受欢迎的开源数据库,其在各Web应用中均有广泛部署.阿里云数据库MySQL版基于Alibaba的MySQL源码分支,经过双11高并发.大数据量的考验,拥有优良的性能和吞吐量.除此之外,阿里云数据库MySQL版还拥有经过优化的读写分离.数据压缩.智能调优等高级功能. 阿里云数据库MySQL版优势: 最高安全等级,保证数据库安全性.已通过ISO 20000.SOC\PCI-DSS\等保三级等十项安全合规认证. 多种部署架构,满足各类可用性要求.通过多种部署架构,您可以自由选择,满足…

云上的芯脏病：奇怪的阿里云 RDS 数据库突发 CPU 近 100% 问题

最近遇到了奇怪的阿里云 RDS 数据库突发 CPU 近 100% 问题,遇到了3次. 第一次是10月12日(周六)凌晨 3:24 负载极低的时候开始出现,早上发现后进行了主备切换,恢复了正常. 第二次也是出现在10月12日,就在主备切换后不久,发现后又进行了主备切换,切换回之前出问题的服务器,恢复了正常. 第三次是昨天(10月18日)23:15 开始出现,今天早上(也是周六)发现后,再次通过主备切换恢复了正常. 阿里云 RDS 型号用的是 SQL Server 2016 标准版,是9月份从 SQ…

本地库还原至阿里云RDS服务器

在此也感谢阿里云售后兄弟的支持.全文参考 https://help.aliyun.com/document_detail/95738.html? 1. 首先得要有个阿里云账号,已经购买RDS数据库(本文针对SQL Server)且已经开通阿里云OSS服务. 2. 本文档适用于以下版本的实例: RDS for SQL Server 2012/2016 Web版 RDS for SQL Server 2012 企业版基础系列 RDS for SQL Server 2012/2016标准版.企业版 R…

阿里云RDS数据库备份同步到自建库方法（SHELL脚本）

一.背景: 由于阿里云RDS生产库每天都需要备份且拷贝到自建读库,而如果使用阿里云的自动拷贝到只读实例, 费用太高, 故采用自编写同步脚本方法实现. 二.前提: 1). 已开通阿里云RDS, 且开启定期备份功能.(备份功能生成备份文件供下载) 2). 已在备份的目标服务器上安装mysql数据库. 3). 备份目标服务器已安装数据恢复工具Percona XtraBackup,您可以从Percona XtraBackup官网下载安装. MySQL 5.6及之前的版本需要安装 Percona Xtra…

强强联合阿里云 RDS for SQL Server 与金蝶 K/3 WISE 产品实现兼容适配

强强联合阿里云 RDS for SQL Server 与金蝶 K/3 WISE 产品实现兼容适配,原K/3 WISE用户通过简单配置就可以无缝搭配RDS SQL Server使用,不需再费时费力自建SQL Server数据库,RDS for SQL Server 为K/3 WISE的数据存储提供超捷的便利性.极其稳定的可靠性以及极高的安全性保障.据悉,此为业内首家云计算厂商的数据库服务支持金蝶K/3 WISE. 金蝶K/3 WISE是一款面向成长型企业,适应企业在快速成长过程中业务与管理的…

阿里云RDS备份恢复到本地

目录一.恢复准备二.具体操作一.恢复准备阿里云RDS默认配置了全备份+binlog,可以精准恢复到某个时间点上. 可以下载备份的包到本地,进行本地恢复,要预留好本地的数据库容量和cpu等规格,不然可能启动失败. 二.具体操作 1.点击备份实例,可以立刻进行一次备份,但要考虑负载压力情况,一般情况下不会占用RDS太多资源,选择物理备份,逻辑备份是备份sql. 2.可以下载内网或外网的包 3.如果在服务器内下载,可以用如下命令 wget -c '<数据备份文件外网下载地址>' -O mys…

实测：云RDS MySQL性能是自建的1.6倍

1. 摘要基于之前写的「云厂商 RDS MySQL 怎么选」的文章,为了进一步了解各云厂商在RDS MySQL数据库性能上的差异,本文将对自建MySQL.阿里云.腾讯云.华为云和AWS 的 RDS MySQL数据库性能进行对比说明.本文的压测结果仅作为参考,不作为购买建议. 2. 测试结果从本文「测试详情」里的各个结论中得到如下结果: 说明:100分制,按照本文后面测试详情的结论进行评分.评分规则比较简单:最好的为100分,其次按照和100分的比值进行打分,如「自建-Percona」的QPS…

抱歉！15:44-16:39阿里云RDS故障造成全站不能正常访问

非常非常抱歉!2016年3月7日15:44-16:39,由于阿里云RDS(云数据库)故障,造成全站不能正常访问,给您带来了很大很大的麻烦,恳请您的谅解! 故障是在15:44开始出现的,应用日志中出现大量这样的错误: System.Data.SqlClient.SqlException (0x80131904): Logon failed for login '...' due to trigger execution. 当前命令发生了严重错误.应放弃任何可能产生的结果. 在 System.Dat…