检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
1.1版本的OpenMPI为例）。 前提条件 已配置弹性云服务器免密登录。 操作步骤 安装HPC-X工具套件。 下载需要的HPC-X工具套件以及OpenMPI。 使用社区OpenMPI时，需要同时使用Mellanox的HPC-X 套件，HPC-X 的下载需要参考弹性云服务器操作系统
提高效率。 可以利用公有云的跨地域能力，共享计算资源，海量数据，并能实现云端大数据分析。 优化性能 性能比普通云服务器大幅提升。 通过虚拟化优化（SR-IOV、PCI直通）等，各类测试报告显示：大规模云化HPC性能损耗不大。 约束与限制 MPI和通讯库的版本需要提前适配RoCE，
localhost $ ssh hostname1 依次登录集群中其他ECS，重复执行步骤1～4。 执行以下命令，验证参加测试的ECS之间是否可以免密码互相登录。 假设集群中有2个弹性云服务器，另一个云服务器的主机名为hostname2，则命令行为： $ ssh 用户名@SERVER_IP $ ssh
3eval_170901-rh7_Apr11.x86_64.rpm 下载需要的HPC-X工具套件。 IBM MPI在EDR SR-IOV场景下的运行需要HPC-X提供的MXM库的支持，HPC-X 的下载需要参考弹性云服务器操作系统的版本以及IB驱动版本，例如，下载的HPC-X版本为：hpcx-v2.0.0-gcc-MLNX_OFED_LINUX-4
此时，pbs作业回到queued状态，等待可用的计算资源。 开机2中关闭的计算节点，提供可用的计算资源。 此时，pbs作业会继续进行。 作业执行完成后，执行以下命令，查看作业信息。 qstat -f 作业ID 如图5所示，作业运行了3分03秒。由此可以看出，作业是从断点的位置进行续算的。 图5 中断后运行作业信息
基于STAR-CCM+部署HPC集群 方案概述 资源和成本规划 STAR-CCM+部署HPC集群流程图 实施步骤 附录 父主题： 弹性云服务器场景最佳实践
实施步骤 创建HPC私有镜像 创建弹性云服务器 配置节点互信 创建SFS Turbo 挂载共享目录 通讯录安装 MPI安装 STAR-CCM+安装与运行 父主题： 基于STAR-CCM+部署HPC集群
附录 常见问题 主要概念 父主题： 基于STAR-CCM+部署HPC集群
输流时内核内存空间与用户空间之间环境切换的次数。 没有CPU参与：应用程序可以访问远程内存，而不占用远程机器中的任何CPU。远程存储器将被读取，无需任何干预的远程进程(或处理器)。远程CPU中的缓存将不会被访问的内存内容填满。 基于消息的事务：数据被作为离散消息处理，而不是作为流
主要概念 RDMA RoCE 父主题： 附录
常见问题 RoCE网络问题 STAR-CCM+启动相关问题 父主题： 附录
SFS Turbo提供按需扩展的高性能文件存储（NAS），可为云上多个弹性云服务器（Elastic Cloud Server，ECS），容器（CCE&CCI），裸金属服务器（BMS）提供共享访问，能够弹性伸缩至320TB规模，具备高可用性和持久性，为海量的小文件、低延迟高IOPS型应用提供有力支持。
验证MPI运行在RoCE网络上 执行以下命令，安装iproute2。 yum -y install iproute* 执行以下命令，查看RoCE上是否有流量。 rdma res show 若MPI运行中，回显结果中qp 数量较大（大于1），则证明运行在 RoCE 网络上： 无业务时 有业务时
-h 192.168.0.96 ofa-v2-cma-roe-enp177s0是上一步/etc/dat.conf中首行配置的名称； client端的192.168.0.96是server端的ip。 验证通过的观测指标：client和server端都出现DAPL Test Complete
STAR-CCM+集群运行时候需要跨节点运行，推荐使用互信免密登录。 # 生成ssh公钥和私钥 ssh-key-gen # 拷贝公钥到指定主机的~/.ssh/authorized_key文件中 ssh-copy-id root@目标主机IP 例如：ssh-copy-id root@192
本，v1和v2。其中RoCE v1是一种链路层协议，允许在同一个广播域下的任意两台主机直接访问。而RoCE v2是一种Internet层协议，即可以实现路由功能。虽然RoCE协议这些好处都是基于融合以太网的特性，但是RoCE协议也可以使用在传统以太网网络或者非融合以太网络中。 应用场景
/etc/fstab 执行mount -a 备注： 192.168.0.15:/ 是从sfs turbo console中获取到的挂载的路径。 第1个1表示备份文件系统，第2个1表示从/分区的顺序开始fsck磁盘检测，0表示不检测，_rnetdev 表示主机无法挂载直接跳过，避免无法挂载主机无法启动。
创建HPC私有镜像 前提条件 创建镜像需选择ECS系统盘镜像。 需修改镜像属性才能在ECS创建界面的C6h规格中选择到相应的镜像。 镜像获取 请联系技术支持进行操作。 创建系统盘镜像 请使用镜像文件创建系统盘镜像，需注意镜像用途选择ECS系统盘镜像如图1，选择启动方式为UEFI图2，否则系统无法启动。
B机器作为Server端，A机器作为Client端，dtest/rping测试RoCE网络仍异常。 解决方案： 1.请检查集群中每个节点的配置文件/etc/dat.conf中"ofa-v2-cma-roe-enp177s0"是否放在首行且每个节点都一致。 2.若以上方法无法解决，请联系技术支持处理。
gids：查下设备名和index。 UCX_NET_DEVICES: hiroce gids查到的有ip值一行的ib_dev的值: port的值。 UCX_IB_GID_INDEX：hiroce gids查到的有ip值一行的idx的值。 2.若以上方法无法解决，请联系技术支持进行处理。 STAR-CCM+启动时，报错“udapl
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
