利用Azure高级存储搭建高性能Linux服务器(1)
目前Azure针对虚拟机提供两种类型的存储,一种是标准存储,基于HDD的,一种是高性能存储Premium Storage(在下文中简称PS),基于SSD的。针对用户高性能,低延迟,I/O密集型的应用,比如数据库MySQL, MongoDB,SAP等提供良好的支持。
本文主要介绍如何在CentOS上使用高级存储构建数据库服务器的最佳实践,包括你的应用需求在超过单盘IOPS限制的情况下,如何通过使用软RAID来构建50000级别的IOPS服务器。
目前高级存储只能用于DS/GS/FS系列机器作为数据磁盘使用,根据虚拟机的大小不同,对每个虚拟机,你最多可以挂载32T的高级存储,达到最高64000的IOPS(受限于你的虚拟机大小和磁盘带宽)。
需要理解的是,磁盘性能取决于三个要素: 磁盘类型、磁盘大小和虚拟机大小。高级磁盘比标准磁盘具有更高的 I/O 限制,I/O 限制随磁盘大小而增加,较大的虚拟机比较小虚拟机具有更高的带宽限制。使用高级磁盘时,请确保虚拟机足够大,能够处理总磁盘带宽。

注意事项
本文中以CentOS 6.7为例,使用DS14作为测试虚拟机,为在CentOS上使用高级存储用做数据库服务器,需要注意一下几项:
1.如果想获得最佳性能和稳定性,在CentOS 6/7上必须手动安装LIS 4.1以上驱动,下载地址如下:
https://www.microsoft.com/en-us/download/details.aspx?id=51612
对于LIS的说明如下:https://www.azure.cn/documentation/articles/storage-premium-storage/
为方便下载,我已经把最新的LIS4.1的包放在了blob storage, Linux下直接wget即可下载:
https://www.azure.cn/documentation/articles/storage-premium-storage/

#安装之前首先保证你的系统最新
$ sudo yum update
请注意:LIS的安装要求你的kernel是最新版本,所以更新之后请重启一下机器确保装载的是最新的Linux kernel,否则后续安装会报错。
#解压缩并安装LIS4
$ tar -xzvf lis-rpms-4.1.2-2.tar.gz
$ sudo ./inshall.sh
可能会有一些警告,忽略即可,安装完成后机器需要重启,以便让新的驱动生效。
[azureuser@mycent67 LISISO]$ rpm -aq|grep microsoft
kmod-microsoft-hyper-v-4.1.2.2-20161013.x86_64
microsoft-hyper-v-debuginfo-4.1.2.2-20161013.x86_64
microsoft-hyper-v-4.1.2.2-20161013.x86_64
2.合理使用高级存储的缓存设置:
关于premium高级磁盘缓存设置,你需要根据你的应用的实际情况进行正确设置获得最佳性能:
设置为无:如果你的应用基本都是写入,或者超过80%以上的都是写入操作,则缓存设置为无。
设置为只读:这个选项是Premium Storage的默认选项也是最为常见的选项,如果你的应用操作是读写的,或者只读的操作,建议使用该选项。
设置为读写:如果你的程序可以处理缓存数据,并且在需要的时候可以将缓存数据写入到持久化磁盘,对应用程序有较高要求,处理不当可能会有数据损失。
例如对于SQL Server而言,你可以:
- 将有数据库数据文件的磁盘的缓存设置为只读,获得快速读取和处理性能
- 将日志文件的目录设置为无,因为日志文件基本上以写为主
对于MySQL数据库而言,道理比较类似,你可以将bin log文件设置为一个目录,而将数据文件也单独设置为一个目录,利用缓存获得最佳性能。
4. 在设置fstab自动加载的时候,一定要使用UUID,否则某些情况下会出现不可预知的问题;另外,在设置fstab的时候,为避免在某些情况磁盘加载失败而系统无法启动的情况(比如最为常见的UUID写错,配置错误等等)最好加上nobootwait(ubuntu)或者nofail(centos)参数,具体用法见后面例子。
单个P30盘性能测试
- 创建DS系列的虚拟机,如果你需要更高级别的处理性能的虚拟机,可以创建DS V2系列的虚拟机,V2系列比DS系列的虚拟机处理能力快35%左右,本实例中创建一台DS14系列的虚拟机:

- 挂载单个1024大小的P30 SSD磁盘到虚拟机,我们进行单盘的性能测试:

- 查看添加的磁盘,当前是个裸设备,需要分区并添加:
$ ls -l /dev/sd*
$ sudo fdisk /dev/sdc

输入n创建新的分区,p选择primary,partition number选择1,其他的选择默认值。
然后输入t,选择partition为1,修改hex code为fd,这个类型代表 Linux raid auto:

重复以上步骤,直到新增加的4块盘都分区完成:

4.我们先用sdc来做个单盘测试,格式化你的设备为ext4文件系统,创建目录,挂载分区到测试目录:
$ sudo mkfs -t ext4 /dev/sdc1
$ sudo mkdir /data
$ sudo mount /dev/sdc1 /data
5.我们使用标准的Linux磁盘测试工具fio来测试一下磁盘的性能,首先我们安装一下fio软件,使用epel的repo来做安装:
$ sudo yum install epel-release

$ sudo yum install fio

利用Azure高级存储搭建高性能Linux服务器(1)的更多相关文章
- 利用Azure高级存储搭建高性能Linux服务器(2)
我们首先来测试随机写的IOPS,可以看到随机写的IOPS可以达到,顺序写的IOPS可以达到: $ sudo fio -filename=/data/testfile -direct=1 -iodept ...
- 高性能Linux服务器 第10章 基于Linux服务器的性能分析与优化
高性能Linux服务器 第10章 基于Linux服务器的性能分析与优化 作为一名Linux系统管理员,最主要的工作是优化系统配置,使应用在系统上以最优的状态运行.但硬件问题.软件问题.网络环境等 ...
- 高性能Linux服务器 第11章 构建高可用的LVS负载均衡集群
高性能Linux服务器 第11章 构建高可用的LVS负载均衡集群 libnet软件包<-依赖-heartbeat(包含ldirectord插件(需要perl-MailTools的rpm包)) l ...
- 高性能Linux服务器 第6章 ext3文件系统反删除利器ext3grep extundelete工具恢复rm -rf 误删除的文件
高性能Linux服务器 第6章 ext3文件系统反删除利器ext3grep extundelete工具恢复rm -rf 误删除的文件 只能用于ext3文件系统!!!!!!!高俊峰(高性能Linux ...
- 优化系统资源ulimit《高性能Linux服务器构建实战:运维监控、性能调优与集群应用》
优化系统资源ulimit<高性能Linux服务器构建实战:运维监控.性能调优与集群应用> 假设有这样一种情况,一台Linux 主机上同时登录了10个用户,在没有限制系统资源的情况下,这10 ...
- 优化Linux内核参数/etc/sysctl.conf sysctl 《高性能Linux服务器构建实战:运维监控、性能调优与集群应用》
优化Linux内核参数/etc/sysctl.conf sysctl <高性能Linux服务器构建实战:运维监控.性能调优与集群应用> http://book.51cto.com/ar ...
- 高性能linux服务器内核调优
高性能linux服务器内核调优 首先,介绍一下两个命令1.dmesg 打印系统信息.有很多同学们服务器出现问题,看了程序日志,发现没啥有用信息,还是毫无解决头绪,这时候,你就需要查看系统内核抛出的异常 ...
- 分享关于搭建高性能WEB服务器的一篇文章
这篇文章主要介绍了Centos5.4+Nginx-0.8.50+UWSGI-0.9.6.2+Django-1.2.3搭建高性能WEB服务器的相关资料,需要的朋友可以参考下(http://m.0813s ...
- 高性能Linux服务器
TCP/IP协议族——高性能Linux服务器编程 现在 Internet 使用的主流协议族是 TCP/IP 协议族,它是一个分层.多协议的通信体系. TCP/IP 协议族体系结构以及主要协议 TC ...
随机推荐
- ios7中使用scrollview来横向滑动图片,自动产生偏移竖向的偏移 问题
ios7中使用scrollview来横向滑动图片,自动产生偏移竖向的偏移 问题 如图红色为scrollview的背景色,在scrollview上加了图片之后,总会有向下的偏移 设置conten ...
- 自制单片机之十六……将文字或图形转成LCD上使用的C51字模数据
这一讲说说如何用取模软件将图形转成数据吧,有很多人反复问我这个问题,我就再罗嗦下吧! 取字模的软件有很多款.有的只能将文字转成字模数据,有的既可将文本文字转字模也能将图片转成点阵数据.在这里我就介绍一 ...
- 64位调试器花费的时间比预期的要长(A 64-bit debugging operation is taking longer than expected)
在stackoverflow上找到解决方案的: http://stackoverflow.com/questions/21329899/vs2013-professional-local-64-bit ...
- 搜索引擎选择: Elasticsearch与Solr
我用过这两种搜索引擎,但也仅仅是用过而已,没有非常深入研究,以下是我的看法 lucene是完全用java实现,而sphinx是支持java api.显然这两者是有差别的,用java实现的意义在于,你可 ...
- 开机启动tomcat
windows: 成功之后在dos窗口键入 service.bat install Tomcat 输完然后按Enter键,出现如下窗口,便成功了. 进入windows服务管理,设成是自动的. #chk ...
- mv,Directory not empty不能目录覆盖
一.mv /test1/* /test2/test1rm -rf /test1 二. You can however use rsync with the --remove-source-files ...
- Annotation(二)——Hibernate中注解的开发
在利用注解开发数据库持久层以前,需要学习一个规范JPA(Java Persistence API),这也是SUN公司提出的数据库的持久化规范.就类似于JDBC,Servlet,JSP等规范一样.而Hi ...
- hdu 3836 Equivalent Sets(tarjan+缩点)
Problem Description To prove two sets A and B are equivalent, we can first prove A is a subset of B, ...
- ubuntu14.04 cocos2d-x-3.6 glfw编译出错解决方案
lib/libcocos2d.a(CCGLViewImpl-desktop.cpp.o): In function `cocos2d::GLViewImpl::GLViewImpl()': /home ...
- (转)iOS7界面设计规范(8) - UI基础 - 术语和措辞
讨厌周一,讨厌一周.今天中午交互组聚餐,却很开心:大家都是很厉害的人,你可以感到他们身上的能量,可以感到有些什么东西正在推着自己尽力向前走.这是一种很健康的状态,同时也很难得,自然越发需要珍惜.从无到 ...