将 HPC 作业从本地计算机提交到部署在 Azure 中的 HPC Pack 群集
Note
Azure 具有用于创建和处理资源的两个不同的部署模型:Resource Manager 和经典。 这篇文章介绍了如何使用这两种模型,但 Azure 建议大多数最新部署使用 Resource Manager 模型。
配置本地客户端计算机,将作业提交到 Azure 中的 Microsoft HPC Pack 群集。本文介绍如何使用客户端工具设置本地计算机,以通过 HTTPS 将作业提交到 Azure 中的群集。这样,多个群集用户就可以将作业提交到基于云的 HPC Pack 群集中,而无需直接连接到头节点 VM 或访问 Azure 订阅。

先决条件
Azure VM 中部署的 HPC Pack 头节点 - 建议使用 Azure 快速入门模板或 Azure PowerShell 脚本等自动化工具来部署头节点和群集。需要获得头节点的 DNS 名称和群集管理员的凭据才能完成本文中的步骤。
客户端计算机 - 需要有可运行 HPC Pack 客户端实用工具的 Windows 或 Windows Server 客户端计算机(请参阅系统要求)。如果只想使用 HPC Pack Web 门户或 REST API 来提交作业,则可以使用自选的任意客户端计算机。
HPC Pack 安装媒体 - 若要安装 HPC Pack 客户端实用工具,可从 Microsoft 下载中心下载最新版 HPC Pack (HPC Pack 2012 R2) 的免费安装包。确保下载的 HPC Pack 版本与头节点 VM 上安装的版本相同。
步骤 1:在头节点上安装并配置 Web 组件
若要使 REST 接口可通过 HTTPS 将作业提交到群集,请确保在 HPC Pack 头节点上配置了 HPC Pack Web 组件。若尚未安装,则先通过运行 HpcWebComponents.msi 安装文件来安装 Web 组件。然后,通过运行 HPC PowerShell 脚本 Set-HPCWebComponents.ps1 来配置组件。
有关详细过程,请参阅安装 Microsoft HPC Pack Web 组件。
Tip
HPC Pack 的某些 Azure 快速启动模板将自动安装并配置 Web 组件。如果使用 HPC Pack IaaS 部署脚本创建群集,可在部署期间选择安装并配置 Web 组件。
安装 Web 组件
使用群集管理员的凭据连接到头节点 VM。
在头节点上从 HPC Pack 安装程序文件夹中运行 HpcWebComponents.msi。
按照向导中的步骤安装 Web 组件。
配置 Web 组件
在头节点上,以管理员身份启动 HPC PowerShell。
若要将目录切换到配置脚本所在的位置,请键入以下命令:
复制cd $env:CCP_HOME\bin
若要配置 REST 接口并启动 HPC Web 服务,请键入以下命令:
复制.\Set-HPCWebComponents.ps1 -Service REST -enable
在系统提示选择证书时,请选择与头节点的公共 DNS 名称对应的证书。例如,若使用经典部署模型部署头节点 VM,则证书名称将类似于:CN=<HeadNodeDnsName>.chinacloudapp.cn。若使用 Resource Manager 部署模型,则证书名称将类似于:CN=<HeadNodeDnsName>.<region>.chinacloudapp.cn。
Note
稍后将作业从本地计算机提交到头节点时选择此证书。不要选择或配置与 Active Directory 域中头节点的计算机名称对应的证书(例如 CN=MyHPCHeadNode.HpcAzure.local)。
若要配置用于作业提交的 Web 门户,请键入以下命令:
复制.\Set-HPCWebComponents.ps1 -Service Portal -enable
脚本完成后,请键入以下命令停止并重启 HPC 作业计划程序服务:
复制net stop hpcscheduler
net start hpcscheduler
步骤 2:在本地计算机上安装 HPC Pack 客户端实用工具
若要在计算机上安装 HPC Pack 客户端实用工具,请从 Microsoft 下载中心下载 HPC Pack 安装程序文件(完整安装)。开始安装时,请选择针对 HPC Pack 客户端实用工具的安装选项。
若要使用 HPC Pack 客户端工具向头节点 VM 提交作业,还需要导出头节点中的证书并将其安装在客户端计算机上。证书必须为 .CER 格式。
从头节点中导出证书
在头节点上,向 Microsoft 管理控制台中添加用于“本地计算机”帐户的证书管理单元。有关添加此管理单元的步骤,请参阅向 MMC 中添加证书管理单元。
在控制台树中,依次展开“证书 - 本地计算机”>“个人”,然后单击“证书”。
找到在步骤 1:在头节点上安装并配置 Web 组件中为 HPC Pack Web 组件配置的证书(例如 CN=<HeadNodeDnsName>.chinacloudapp.cn)。
右键单击该证书,然后单击“所有任务”>“导出”。
在证书导出向导中,单击“下一步”并确保选中“否,不导出私钥”。
执行此向导中的其余步骤,以“DER 编码二进制 X.509 (.CER)”格式导出证书。
在客户端计算机上导入证书
将你从头节点中导出的证书复制到客户端计算机上的某个文件夹中。
在客户端计算机上,运行 certmgr.msc。
在证书管理器中,依次展开“证书 - 当前用户”>“受信任的根证书颁发机构”,右键单击“证书”,然后单击“所有任务”>“导入”。
在证书导入向导中单击“下一步”,然后按照步骤将从头节点中导出的证书导入“受信任的根证书颁发机构”存储。
Tip
由于客户端计算机未识别头节点上的证书颁发机构,因此可能会出现安全警告。出于测试目的,可忽略此警告并完成证书导入。
步骤 3:在群集上运行测试作业
若要验证你的配置,可以尝试通过本地计算机在 Azure 中的群集上运行作业。例如,可以使用 HPC Pack GUI 工具或 HPC Pack 命令行命令向群集提交作业,也可以使用基于 Web 的门户来提交作业。
在客户端计算机上运行作业提交命令
在安装了 HPC Pack 客户端实用工具的客户端计算机上,启动命令提示符。
键入示例命令。例如,若要列出群集中的所有作业,可键入如下所示的某个命令,具体取决于头节点的完整 DNS 名称:
复制job list /scheduler:https://<HeadNodeDnsName>.chinacloudapp.cn /all
或
复制job list /scheduler:https://<HeadNodeDnsName>.<region>.chinacloudapp.cn /all
Tip
在计划程序 URL 中使用头节点的完整 DNS 名称,而不是 IP 地址。如果指定 IP 地址,将会出现类似于下面的错误:“服务器证书必须具有有效的信任链,或放置在受信任的根存储区中。”
出现提示时,请键入 HPC 群集管理员或你配置的另一群集用户的用户名(格式为 <DomainName>\<UserName>)和密码。你可以选择在本地存储凭据以执行更多作业操作。
将显示作业列表。
在客户端计算机上使用 HPC 作业管理器
如果以前提交作业时未存储群集用户的域凭据,则可在凭据管理器中添加凭据。
a.在客户端计算机上的控制面板中,启动凭据管理器。
b.单击“Windows 凭据”>“添加普通凭据”。
c.指定 Internet 地址(例如 https://<HeadNodeDnsName>.chinacloudapp.cn/HpcScheduler 或 https://<HeadNodeDnsName>.<region>.chinacloudapp.cn/HpcScheduler )以及群集管理员或所配置的另一群集用户的用户名(格式为 <DomainName>\<UserName>)和密码。
在客户端计算机上启动 HPC 作业管理器。
在“选择头节点”对话框中,键入指向 Azure 中头节点的 URL(例如 https://<HeadNodeDnsName>.chinacloudapp.cn 或 https://<HeadNodeDnsName>.<region>.chinacloudapp.cn )。
HPC 作业管理器将会打开并显示头节点上的作业列表。
使用在头节点上运行的 Web 门户
在客户端计算机上启动 Web 浏览器,输入以下任一地址,具体取决于头节点的完整 DNS 名称:
复制https://<HeadNodeDnsName>.chinacloudapp.cn/HpcPortal
或
复制https://<HeadNodeDnsName>.<region>.chinacloudapp.cn/HpcPortal
在出现的安全性对话框中,键入 HPC 群集管理员的域凭据。(你还可以添加具有不同角色的其他群集用户。请参阅管理群集用户。)
Web 门户将会打开并显示作业列表视图。
若要从群集中提交返回“Hello World”字符串的示例作业,请在左侧导航区域中单击“新建作业”。
在“新建作业”页面上的“从提交页面”下,单击“HelloWorld”。此时将显示作业提交页面。
单击“提交”。出现提示时,请提供 HPC 群集管理员的域凭据。作业已提交,作业 ID 将出现在“我的作业”页面上。
若要查看提交的作业的结果,请单击作业 ID,然后单击“查看任务”,在“输出”下方查看命令输出。
后续步骤
还可以使用 HPC Pack REST API 将作业提交到 Azure 群集。
若要从 Linux 客户端提交群集作业,请参阅 HPC Pack 2012 R2 SDK 和示例代码中的 Python 示例
立即访问http://market.azure.cn
将 HPC 作业从本地计算机提交到部署在 Azure 中的 HPC Pack 群集的更多相关文章
- 使用 Azure Active Directory 管理 Azure 中的 HPC Pack 群集
Microsoft HPC Pack 2016 支持在 Azure 中部署 HPC Pack 群集的管理员将其与 Azure Active Directory (Azure AD) 集成. 请按照本文 ...
- 使用 HPC Pack 为 Azure 中的 Windows HPC 工作负荷创建和管理群集的选项
利用 Microsoft HPC Pack 和 Azure 的计算与基础结构服务,创建和管理基于云的高性能计算 (HPC) 群集. HPC Pack 是在 Azure 和 Windows Server ...
- 在 Azure VM 中使用应用商店映像创建 HPC Pack 群集的头节点
使用 Azure 应用商店和 Azure 门户中的 Microsoft HPC Pack 2012 R2 虚拟机映像创建 HPC 群集的头节点. 此 HPC Pack VM 映像基于预安装了 HPC ...
- 关于如何使用sourcetree将本地项目提交到远端github总结?
使用sourcetree将本地项目提交到github里,目前来说还是很流行的,我也是听说好玩,所以来琢磨了一下,从环境搭建到配置好,差不多用了一下午加一晚上的时间,有点虐心,好吧,废话不多说,介绍一下 ...
- webservice 测试窗体只能用于来自本地计算机的请求
Question: WebService部署成站点之后,如果在本地测试webservice可以运行,在远程却显示“测试窗体只能用于来自本地计算机的请求”或者"The test form is ...
- 本地计算机 上的 OracleOraDb11g_home1TNSListener 服务启动后停止
今天玩oracle的时候突然遇到一个问题:本地计算机 上的 OracleOraDb11g_home1TNSListener 服务启动后停止.某些服务在未由其他服务或程序使用时将自动停止. 在网上找解决 ...
- MySQL 安装和启动服务,“本地计算机 上的 MySQL 服务启动后停止。某些服务在未由其他服务或程序使用时将自动停止。”
MySQL 安装和启动服务,以及遇到的问题 MySQL版本: mysql-5.7.13-winx64.zip (免安装,解压放到程序文件夹即可,比如 C:\Program Files\mysql-5. ...
- 【GIT】使用Git命令窗口将本地工程提交至远程GitHub
目标: 1.解决的问题是如何通过Git命令窗口将本地工程提交至GitHub. 2.方便园友的同时也方便自己以后解决此类问题. 步骤: 1.首先登陆GitHub网站https://github.com/ ...
- 本地计算机 上的 Redis Server 服务启动后停止
服务器上Redis服务安装正常..却启动不了.. 报错 : 本地计算机 上的 Redis Server 服务启动后停止.某些服务在未由其他服务或程序使用时将自动停止. 最后发现是Redis的配置 ...
随机推荐
- postman参数化 接口响应数据获取符合条件的内容参数化给后面的接口使用
一:主要内容 从响应结果中找到满足条件的key,获取其value,参数化给后面的接口使用 二:参数化获取想要的value值,传给后面的接口使用 有时我们获取的响应数据,需要的那个字段可能在一个数组里面 ...
- [Python] 震惊, 我居然用Python干这种事ꈍ .̮ ꈍ
阅读本文只需花费你两分钟, 两分钟你买不了吃亏,你也买不了上当. 那么, 为何不静下心来看看呢? Python 海龟创意绘画, Turtle库创作精美图画 Author:Amd794 E-ma ...
- 软件架构设计学习总结(3):QQ空间技术架构之详解
QQ空间作为腾讯海量互联网服务产品,经过近七年的发展,实现了从十万级到亿级同时在线的飞跃.在这个过程中,QQ空间团队遇到了哪些技术挑战?其站点前后台架构随着业务规模的变化又进行了怎样的演进与变迁?成长 ...
- Apache运维中常用功能配置笔记梳理
Apache 是一款使用量排名第一的 web 服务器,LAMP 中的 A 指的就是它.由于其开源.稳定.安全等特性而被广泛使用.下边记录了使用 Apache 以来经常用到的功能,做此梳理,作为日常运维 ...
- HTTPS加密传输数据,加强P2P平台网络安全和信任
12月28日,银监会会同工信部.公安部.网信办等部门研究起草了<网络借贷信息中介机构业务活动管理暂行办法(征求意见稿)>(以下简称<办 法>),并向社会公开征求意见.该< ...
- Flux --> Redux --> Redux React 基础实例教程
本文的目的很简单,介绍Redux相关概念用法 及其在React项目中的基本使用 假设你会一些ES6.会一些React.有看过Redux相关的文章,这篇入门小文应该能帮助你理一下相关的知识 一般来说,推 ...
- es6学习笔记4--数组
数组的扩展 Array.from() Array.from方法用于将两类对象转为真正的数组:类似数组的对象(array-like object)和可遍历(iterable)的对象(包括ES6新增的数据 ...
- [转]Magento2命令行配置之性能测试生成数据
本文转自:https://blog.csdn.net/xz_src/article/details/72799539 性能测试数据概述 使用Magento性能工具包或其他工具进行性能测试,你必定产生大 ...
- 面向对象 【类库】【委托】【is as运算符】
类库(Class Library) .dll文件 类库字面意思就是类的集合,里面有很多被编译后的C#代码,不可阅读,不可修改,只能调用 类库是一个综合性的面向对象的可重用类型集合,这些类型包括:接口. ...
- 关于eclipse的项目前有感叹号和errors exist in required project相关问题
一般来说 项目运行中 各个类的信息中并没有报错 但在运行中会出现errors exist in required project 且有时候运行也会成功.这种情况是由于项目中其他的类存在问题未解决 导 ...