微软的Azure Data Warehouse是基于MPP架构的分布式系统:

Control Node负责管理系统和接受用户的请求,Compute Node负责计算。

目前在国内Azure Data Warehouse已经落地了。可以使用新的Portal页面进行管理,也可以使用PowerShell进行管理。

本文将介绍用PowerShell的管理方式。包括创建、Scale out、Suspend和Resume。

1 环境准备

登陆Azure China,并创建Resource Group

$mycred = Get-Credential -UserName admin@xxxx.partner.onmschina.cn -Message hello
Login-AzureRmAccount -EnvironmentName AzureChinaCloud -Credential $mycred
 
New-AzureRmResourceGroup -Name hwdweast -Location "China East"
 
ResourceGroupName : hwdweast
Location : chinaeast
ProvisioningState : Succeeded
Tags :
ResourceId : /subscriptions/xxxx-xxxx-xxxx/resourceGroups/hwdweast
 

2 创建Azure SQL Server

创建的SQL Server是V12版本

$sqlcred = Get-Credential -UserName hengwei -Message hello
New-AzureRmSqlServer -ServerName hwdwsv -SqlAdministratorCredentials $sqlcred -ResourceGroupName hwdweast -Location "China East" -ServerVersion 12.0 ResourceGroupName : hwdweast
ServerName : hwdweast
Location : China East
SqlAdministratorLogin : hengwei
SqlAdministratorPassword :
ServerVersion : 12.0
Tags :

3 给新创建的Database server配置Firewall规则,本例子中因为是测试,添加了所有可用的地址段

new-AzureRmSqlServerFirewallRule -FirewallRuleName all -StartIpAddress 1.1.1.1 -EndIpAddress 223.255.255.254 -ServerName hwdweast -ResourceGroupName hwdweast
 
ResourceGroupName : hwdweast
ServerName : hwdweast
StartIpAddress : 1.1.1.1
EndIpAddress : 223.255.255.254
FirewallRuleName : all
 

4 创建Data WareHouse

New-AzureRmSqlDatabase -DatabaseName hwdwdbeast -RequestedServiceObjectiveName "DW100" -ServerName hwdwsv -ResourceGroupName hwdweast -Edition DataWarehouse -CollationName "SQL_Latin1_General_CP1_CI_AS" -MaxSizeBytes 10995116277760

ResourceGroupName : hwdweast
ServerName : hwdweast
DatabaseName : hwdwdbeast
Location : China East
DatabaseId : 3e5f4387-099d-4a7d-858d-0d663381663a
Edition : DataWarehouse
CollationName : SQL_Latin1_General_CP1_CI_AS
CatalogCollation :
MaxSizeBytes : 1099511627776
Status : Online
CreationDate : 2016/10/5 13:46:19
CurrentServiceObjectiveId : 4e63cb0e-91b9-46fd-b05c-51fdd2367618
CurrentServiceObjectiveName : DW100
RequestedServiceObjectiveId : 4e63cb0e-91b9-46fd-b05c-51fdd2367618
RequestedServiceObjectiveName :
ElasticPoolName :
EarliestRestoreDate : 0001/1/1 0:00:00
Tags :
ResourceId : /subscriptions/xxxx-xxxx-xxxx/resourceGroups/hwdweast/providers/Microsoft.Sql/servers/hwdw
east/databases/hwdwdbeast
CreateMode :
 

其中,

-Edition DataWarehouse 表明这个是Data Warehouse

-RequestedServiceObjectiveName "DW100" 指定Data Warehouse的大小,DW100表示有1个计算节点

-CollationName "SQL_Latin1_General_CP1_CI_AS" 指定字符集

-MaxSizeBytes 10995116277760 指定最大容量

几分钟的时间,一个Data Warehouse就创建好了。

4 更改Data Warehouse大小

set-azurermsqldatabase -DatabaseName hwdwdbeast -RequestedServiceObjectiveName "DW200" -ServerName hwdwsv -ResourceGroupName hwdweast
 
ResourceGroupName : hwdweast
ServerName : hwdweast
DatabaseName : hwdwdbeast
Location : China East
DatabaseId : 3e5f4387-099d-4a7d-858d-0d663381663a
Edition : DataWarehouse
CollationName : SQL_Latin1_General_CP1_CI_AS
CatalogCollation :
MaxSizeBytes : 1099511627776
Status : Online
CreationDate : 2016/10/5 13:46:19
CurrentServiceObjectiveId : 99e78a92-d724-4e1b-857b-2be661f3d153
CurrentServiceObjectiveName : DW200
RequestedServiceObjectiveId : 99e78a92-d724-4e1b-857b-2be661f3d153
RequestedServiceObjectiveName :
ElasticPoolName :
EarliestRestoreDate : 0001/1/1 0:00:00
Tags :
ResourceId : /subscriptions/xxxx-xxxx-xxxx/resourceGroups/hwdweast/providers/Microsoft.Sql/servers/hwdw
east/databases/hwdwdbeast
CreateMode :
 

5 暂停某个Data Warehouse的服务

Suspend-AzureRmSqlDatabase -DatabaseName hwdwdbeast -ServerName hwdweast -ResourceGroupName hwdweast
 
ResourceGroupName : hwdweast
ServerName : hwdweast
DatabaseName : hwdwdbeast
Location : China East
DatabaseId : 3e5f4387-099d-4a7d-858d-0d663381663a
Edition : DataWarehouse
CollationName : SQL_Latin1_General_CP1_CI_AS
CatalogCollation :
MaxSizeBytes : 1099511627776
Status : Paused
CreationDate : 2016/10/5 13:46:19
CurrentServiceObjectiveId : 4e63cb0e-91b9-46fd-b05c-51fdd2367618
CurrentServiceObjectiveName : DW100
RequestedServiceObjectiveId : 4e63cb0e-91b9-46fd-b05c-51fdd2367618
RequestedServiceObjectiveName :
ElasticPoolName :
EarliestRestoreDate : 0001/1/1 0:00:00
Tags :
ResourceId : /subscriptions/xxxx-xxxx-xxxx/resourceGroups/hwdweast/providers/Microsoft.Sql/servers/hwdw
east/databases/hwdwdbeast
CreateMode :

此时,数据还保留在Data Warehouse中,但计算单元已经停止计费了。

这种模式特别适合需要月末、季度末、年末进行报表统计的场景。

6 恢复某个Data Warehouse的服务

Resume-AzureRmSqlDatabase -DatabaseName hwdwdbeast -ServerName hwdweast -ResourceGroupName hwdweast
 
ResourceGroupName : hwdweast
ServerName : hwdweast
DatabaseName : hwdwdbeast
Location : China East
DatabaseId : 3e5f4387-099d-4a7d-858d-0d663381663a
Edition : DataWarehouse
CollationName : SQL_Latin1_General_CP1_CI_AS
CatalogCollation :
MaxSizeBytes : 1099511627776
Status : Online
CreationDate : 2016/10/5 13:46:19
CurrentServiceObjectiveId : 4e63cb0e-91b9-46fd-b05c-51fdd2367618
CurrentServiceObjectiveName : DW100
RequestedServiceObjectiveId : 4e63cb0e-91b9-46fd-b05c-51fdd2367618
RequestedServiceObjectiveName :
ElasticPoolName :
EarliestRestoreDate : 0001/1/1 0:00:00
Tags :
ResourceId : /subscriptions/xxxx-xxxx-xxxx/resourceGroups/hwdweast/providers/Microsoft.Sql/servers/hwdw
east/databases/hwdwdbeast
CreateMode :
 

目前Data Warehouse还只能通过PowerShell的方式进行创建,将来China 的Azure也会和Global的Azure一样,通过图形化界面完成上面所有的操作。

使用PowerShell在Azure China创建Data Warehouse的更多相关文章

  1. 使用Json Template在Azure China创建ARM类型的虚拟机

    前面几篇文章介绍过Azure的两种VM的模式,包括ASM和ARM.并且介绍了如何用Azure CLI和PowerShell创建虚拟机.本文将介绍如何采用Json的Template来创建基于ARM的VM ...

  2. Azure China (8) 使用Azure PowerShell创建虚拟机,并设置固定Virtual IP Address和Private IP

    <Windows Azure Platform 系列文章目录> 本文介绍的是由世纪互联运维的Windows Azure China. 相比于Global Azure (http://www ...

  3. Azure China (5) 管理Azure China Powershell

    <Windows Azure Platform 系列文章目录> 本文介绍的是国内由世纪互联运维的Azure China Cloud Update 2015-09-01 发现一个新的命令,在 ...

  4. 在Azure China用自定义镜像创建Azure VM Scale Set

    在Azure China用自定义镜像创建Azure VM Scale Set 在此感谢世纪互联的工程师Johnny Lee和Lan,你们给了我很大的帮助.因为Azure China的官网没有给出完整的 ...

  5. Azure SQL 数据库仓库Data Warehouse (3) DWU

    <Windows Azure Platform 系列文章目录> 在笔者的上一篇文章中:Azure SQL 数据库仓库Data Warehouse (2) 架构 介绍了SQL DW的工作节点 ...

  6. Azure SQL Data Warehouse

    Azure SQL Data Warehouse & AWS Redshift Amazon Redshift Amazon Redshift 是一种快速.完全托管的 PB 级数据仓库,可方便 ...

  7. Azure SQL 数据库仓库Data Warehouse (1) 入门

    <Windows Azure Platform 系列文章目录> 在之前的项目中遇到了客户使用SQL数据仓库的场景,在这里记录一下 1.什么是SQL 数据库仓库 (SQL DW) SQL D ...

  8. Azure SQL 数据库仓库Data Warehouse (2) 架构

    <Windows Azure Platform 系列文章目录> 在上一篇文章中,笔者介绍了MPP架构的基本内容 在本章中,笔者给大家介绍一下Azure SQL Data Warehouse ...

  9. Windows Azure HandBook (2) Azure China提供的服务

    <Windows Azure Platform 系列文章目录> 对于传统的自建数据中心,从底层的Network,Storage,Servers,Virtualization,中间层的OS, ...

随机推荐

  1. box-flex兼容写法

    box-flex布局在这几年发生了多次变化,可分为2009版.2011版以及2013版, 区分: display:box(inline-box), box-{*}的格式为2009版 display:b ...

  2. cocos2dx打飞机项目笔记三:HeroLayer类和坐标系

    HeroLayer类主要是处理hero的一些相关东西,以及调用bulletLayer的一些方法,因为子弹是附属于hero的~~ HeroLayer 类的成员如下: class HeroLayer : ...

  3. Linux vi 编辑器 常用命令行

    1.vi 模式   a) 一般模式: vi 处理文件时,一进入该文件,就是一般模式了.   b) 编辑模式:在一般模式下可以进行删除,复制,粘贴等操作,却无法进行编辑操作.等按下'i,I,o,O,a, ...

  4. Mybatis细节问题

    1.将字符串转换为日期格式? @DateTimeFormat(pattern="yyyy-MM-dd")

  5. showModalDialog改进版,包括Chrome下的特殊处理

    父页面: if(window.ActiveXObject){ //IE          $("#choose_entp").click(function(){           ...

  6. Sqoop将MySQL表结构同步到hive(text、orc)

    Sqoop将MySQL表结构同步到hive sqoop create-hive-table --connect jdbc:mysql://localhost:3306/sqooptest --user ...

  7. 【转】jQuery对象与DOM对象之间的转换方法

    刚开始学习jquery,可能一时会分不清楚哪些是jQuery对象,哪些是DOM对象.至于DOM对象不多解释,我们接触的太多了,下面重点介绍一下jQuery,以及两者相互间的转换. 什么是jQuery对 ...

  8. java应用线上CPU过高问题排查

    1.top 命令,查看占用CPU最高的PID.ps aux|grep PID 进一步确定tomcat进程出现问题.2.ps -mp pid -o THREAD,tid,time显示线程列表3.prin ...

  9. django学习笔记整理(2)django的路由系统

    创建一个属于你的django框架.django-admin startproject 框架名 打开你的django框架,你会发现里面还有一个和框架名同名的文件夹,那个文件夹就称为一个app. 创建了d ...

  10. Linux开放端口

    开放端口8081 -A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 8081 -j ACCEPT 重启端口服务 ser ...