zure Storage Explorer工具的下载 Azure 存储客户端工具 https://docs.azure.cn/zh-cn/storage/storage-explorers Azure Storage Explorer登录方法: ·        点击“add account” ·        在弹出的窗口中选择“Use a storage account name and key”,点击下一步. ·        填写“Account name”和“Account Key”的…
<Windows Azure Platform 系列文章目录> PowerShell我已经提交到GitHub: https://github.com/leizhang1984/AzureChinaPowerShell/blob/master/ARM/ConvertManagedDisk/ConvertManagedDisk.ps1 在笔者之前的文章中,我们如果需要使用Azure虚拟机,必须预先创建一个Azure存储账户(Storage Account),用来保存虚拟机的VHD文件. 这会有几个…
本文说明如何在 Azure 中上传自定义的虚拟硬盘 (VHD) 或复制现有 VHD,并从自定义磁盘创建 Linux 虚拟机 (VM). 可以根据要求安装并配置 Linux 分发版,并使用该 VHD 快速创建新的 Azure 虚拟机. 如果想要从自定义磁盘创建多个 VM,则应该从 VM 或 VHD 创建映像. 有关详细信息,请参阅使用 CLI 创建 Azure VM 的自定义映像. 可以使用两个选项: 上传 VHD 复制现有的 Azure VM 快速命令 Note 在 Azure 中国区使用 Az…
背景 相较传统的重量级OLAP数据仓库,“数据湖”以其数据体量大.综合成本低.支持非结构化数据.查询灵活多变等特点,受到越来越多企业的青睐,逐渐成为了现代数据平台的核心和架构范式. 数据湖的核心功能,简单地可以分为数据存储与数据查询计算两个部分,在云端可以有多种的实现选择.在之前的文章中,我们曾介绍Azure上Azure Data Lake Storage (ADLS Gen1)和Azure Data Lake Analytics (ADLA)这一对可配合使用的服务.这对黄金搭档正是为数据湖而生…
引言 相较传统的重量级OLAP数据仓库,“数据湖”以其数据体量大.综合成本低.支持非结构化数据.查询灵活多变等特点,受到越来越多企业的青睐,逐渐成为了现代数据平台的核心和架构范式. 因此数据湖相关服务成为了云计算的发展重点之一.Azure平台早年就曾发布第一代Data Lake Storage,随后微软将它与Azure Storage进行了大力整合,于今年初正式对外发布了其第二代产品:Azure Data Lake Storage Gen2 (下称ADLS Gen2).ADLS Gen2的口号是…
相较传统的重量级OLAP数据仓库,“数据湖”以其数据体量大.综合成本低.支持非结构化数据.查询灵活多变等特点,受到越来越多企业的青睐,逐渐成为了现代数据平台的核心和架构范式. 作为微软Azure上最新一代的数据湖服务,Data Lake Storage Gen2的发布,将云上数据湖的能力和体验提升上了一个新的台阶.在前面的文章中,我们已分别介绍了其基本使用和大数据集群挂载的场景.作为本系列的下篇,让我们继续深度体验之旅. ADLS Gen2体验:数据湖共享 在企业中,一个庞大的数据湖往往需要被共…
DBFS使用dbutils实现存储服务的装载(mount.挂载),用户可以把Azure Data Lake Storage Gen2和Azure Blob Storage 账户装载到DBFS中.mount是data lake storage和 blob storage的指针,因此数据不会同步到本地. 一,创建Azure Data Lake Storage Gen2 从Azure Portal中搜索Storage Account,开始创建Data Lake V2 1,创建Data Lake V2的…
Azure GitHub wiki 同步发布 传送门 Azure Functions 通过 Functions(一个事件驱动型无服务器计算平台,还可以解决复杂的业务流程问题)更加高效地进行开发.在本地构建和调试,而无需额外的设置,在云中大规模部署和操作,并使用触发器和绑定集成服务. --Azure Functions Azure Storage Azure 存储平台是适用于新式数据存储方案的 Microsoft 云存储解决方案. 核心存储服务为数据对象.适用于 Azure 虚拟机(Vm)的磁盘存…
客户需求 客户的环境是一个网络音乐播放系统,根据网络情况提供给手机用户收听各种码率的MP3歌曲,在客户没购买歌曲的情况下提供一个三十秒内的试听版本.这样一个系统非常明确地一个需求就是会定期需要将一批从音乐版商手中获取到的高比特率音乐文件转换成各种低码率的MP3文件和试听文件,由于收到版商的文件数量和时间都不确定,所以长期部署大量的转码服务器为系统提供转码服务显然非常浪费资源,但是如果不准备好足够的转码服务器的话,当大批量文件需要转码时又没法能够快速完成任务,在现在这个时间比金钱更加重要的互联网时…
前面我们以相同的方式从数据分析师的视角介绍了Sqlserver,本系列亦同样地延续下去,同样是挖掘数据分析师值得使用的Azure云平台的功能.因云平台功能太多,笔者所接触的面也十分有限,有更专业的读者欢迎补充. 对云服务的一点点小认识 笔者接触Azure云时间不长,因没有IT背景,故对各大云市场也只能是浅尝即止,有关注Excel催化剂插件的读者们,也应该对笔者使用其他云市场有一些的了解. Excel催化剂的自动更新机制是放到阿里云上完成的,对应的云服务是构建云服务器(比虚拟主机要高级,可以完全自…
在两个存储帐户之间进行blob拷贝,在客户端,使用Azue PowerShell脚本, 用存储帐户上下文(New-AzureStorageContext)来获取某个StorageAccount中的Container.进而,我们想使用Azure Portal的自动化(Automation), 在Runbook中运行同样的脚本,就出现了如下的错误: 5/25/2015 9:49:19 AM, Error: Get-AzureStorageContainer : Cannot bind paramet…
http://channel9.msdn.com/Series/Windows-Azure-Storage-SQL-Database-Tutorials Windows Azure offers multiple services to help manage your data in the cloud. SQL Database, formerly known as SQL Azure Database, enables organizations to rapidly create, sc…
相较传统的重量级OLAP数据仓库,“数据湖”以其数据体量大.综合成本低.支持非结构化数据.查询灵活多变等特点,受到越来越多企业的青睐,逐渐成为了现代数据平台的核心和架构范式. 作为微软Azure上最新一代的数据湖服务,Data Lake Storage Gen2的发布,将云上数据湖的能力和体验提升上了一个新的台阶.在前面的文章中,我们已分别介绍了其基本使用和大数据集群挂载的场景.作为本系列的下篇,让我们继续深度体验之旅. ADLS Gen2体验:数据湖共享 在企业中,一个庞大的数据湖往往需要被共…
问题描述 在Hadoop集中中,使用ADLS 作为数据源,在执行PUT操作(上传文件到ADLS中),遇见 400错误[put: Operation failed: "An HTTP header that's mandatory for this request is not specified.", 400] 启用Debug输出详细日志: 错误消息文本内容: [hdfs@hadoop001 ~]$ hadoop fs -put a.txt abfs://adsl@xxxxxxxxxx…
Redis相信玩开源,大数据的朋友们并不陌生,大家最熟悉的使用者就是新浪微博,微博的整体数据缓存都是基于Redis的,而新浪对Redis的使用也非常深,据说是一组64G内存的Redis集群.前段时间我们也对自己的产品架构中的一部分功能进行了Redis改造,将用户关注,粉丝以及用户动态的数据都存入Redis,但存储中还是保留了持久化数据,效率提升了很多,用户在获取相关数据时也快了很多(使用的代码框架是ServiceStack.Redis). 我们是Windows Azure的资深用户,当然这次Re…
This document provides guidance on how to make an informed decision in choosing between Windows Azure Web Sites, Cloud Services, and virtual machines to host a web application. Each of these services allows you to run highly scalable web applications…
Windows Azure Execution Models Windows Azure provides different execution models for running applications. Each one provides a different set of services, and so which one you choose depends on exactly what you’re trying to do. This article looks at t…
- Storage Account. 和之前介绍的Azure Table和AzureBlob一样.你须要一个StorageAccount,仅仅须要创建1次AzureStorageAccount就好了,它们3个是共享的. 创建好之后.就能够使用下面属性来訪问Azure的Storage了: private static CloudStorageAccount StorageAccount { get { var creds = new StorageCredentials(AccountName,…
<Windows Azure Platform 系列文章目录> 如果熟悉Windows Azure平台的用户不难发现,对于SQL Server数据库来说,微软提供了两种服务,分别是: -Windows Azure SQL Database(也就是以前的SQL Azure),提供PaaS的关系数据库服务 -Windows Azure SQL Virtual Machine (SQL VM),提供了IaaS的关系型数据库服务 有些读者可能会疑惑,为什么微软要提供以上2种的关系型数据库服务?我们在实…
学习方法: DEX为入门培训,fundamental book进阶材料,Azure 官方为补充权威材料,网站一些大拿的Blog是很多实践精华,推荐阅读. 推荐教材和学习内容: EDX培训:http://openedx.microsoft.com Fundamental book:Fundamental Book 链接: https://pan.baidu.com/s/1gfqntXx 密码: xq36 Azure (全球)官方文档:https://docs.microsoft.com/zh-cn…
介绍 Azure DevOps,以前称为Visual Studio Team Services(VSTS),可帮助个人和组织更快地规划,协作和发布产品.其中一项值得注意的服务是Azure Pipelines,它可以帮助开发人员构建持续集成(CI)和持续交付(CD)管道,从而自动化和标准化软件开发过程的构建,测试和部署阶段.此外,Azure Pipelines还提供本机容器支持,可与任何语言,平台和云配合使用.像软件开发这样的机器学习也是一个包括构建,测试和部署阶段的过程,这使其成为自动化和标准化…
http://technet.microsoft.com/en-us/solutionaccelerators/dd537566.aspx http://blogs.technet.com/b/mapblog/archive/2012/11/08/windows-azure-virtual-machine-readiness-and-capacity-assessment.aspx With the release of MAP Toolkit 8.0, we have added a new…
Windows Azure Identity Managing identity is just as important in the public cloud is it is on premises. To help with this, Windows Azure supports several different cloud identity technologies. They include these: You can run Windows Server Active Dir…
Windows Azure Virtual Network Overview 18 out of 33 rated this helpful - Rate this topic Updated: April 25, 2013 Windows Azure Virtual Network provides you with the capability to extend your network into Windows Azure and treat deployments in Windows…
Microsoft Windows Azure SQL Database extends SQL Server capabilities to the cloud. SQL Database offers a relational database service called Microsoft SQL Database, and using Windows Azure SQL Database, you can easily provision and deploy relational d…
当初迁移至阿里云遇到的第一个问题是在程序中通过Request.UserHostAddress得到的是负载均衡(SLB)的内网IP,而不是用户的真实IP.真实IP存储在服务器变量HTTP_X_Forwarded_For中,后来通过IIS的Url Rewrite Module将HTTP_X_Forwarded_For的值重写入REMOTE_ADDR解决了问题. 这个问题是由于使用七层负载均衡( Layers 7 Load Balancing)带来的,而使用四层负载均衡不会有这个问题.但是如果让我们选…
假设还没有配置Azure Power shell 能够參照这里进行配置:http://blog.csdn.net/lan_liang/article/details/46850221 打开Azure Power Shell 1. 执行 Add-AzureAccount (假设已经加入就不用了) 2. 执行  New-AzureManagedCache -Name mycache -Location "South Central US" -Sku Basic -Memory 128MB…
本章介绍了Windows Azure平台,并介绍了该平台提供的不同的服务和解决方案.本章主要针对还不熟悉什么Windows Azure是和它能做什么的读者.如果你已经熟悉了Windows Azure,那么可以跳过首章,但是你可能也想读它,因为可能会学到一些有价值的东西,它可以帮助您增长业务和应对它所面临的市场挑战.什么是Windows Azure?如果你问, “什么是Windows Azure的? ”的最佳答案可能是这样的:你希望它是什么它就是什么 作为微软的云平台,它提供多种不同的服务,Win…
偶有感触:遇到这个问题,经过一个下午的排查, 终于解决. 故事情节:我的阿里云服务器突然被黑客攻击了,整个系统down了. 找客服,他们排查说usr目录的文件全部丢失.让我重新初始化系统盘.初始化之前先生成一个快照.还好生成了快照,让事情没有发展为不可挽救的地步. mysql数据库数据恢复. 其他的问题都一一解决了. 到了最后, mysql上的数据无论如何都不能正常显示出来.数据库不要紧(有备份), 之前的数据才是最要紧的. 这就是本文的目的. 最终如何将mysql数据显示出来. -------…
准备条件 Azure Batch账号 需要安装的软件包(zip)文件,里面包含该软件的msi安装文件, 此处使用python.msi 版本 3.3.3 作为例子(https://www.python.org/downloads/windows/) 开始安装 1) 上传需要安装的软件包到Batch Account中的Applications中 参考文档: 添加新应用程序包:https://docs.azure.cn/zh-cn/batch/batch-application-packages#ad…