检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
该任务指导用户在已配置好的弹性云服务器上，运行社区MPI应用（3.1.1版本）。 前提条件 已成功创建带IB网卡的弹性云服务器，并绑定了弹性IP进行登录。 已使用私有镜像创建多个弹性云服务器。 操作步骤 使用“PuTTY”，采用密钥对方式登录弹性云服务器。 登录用户为创建弹性云服务器时指定的用户名。
主要概念 RDMA RoCE 父主题： 附录
在HPC集群上运行MPI应用（鲲鹏BMS场景） 该任务指导以CentOS 7.6的操作系统为例在集群上运行MPI应用。 安装和使用IB驱动自带的Open MPI 安装和使用社区OpenMPI 安装和使用MPICH 父主题： 裸金属服务器场景典型应用
1.1版本为例）。 对于集群中的每台BMS，都需要执行该操作。 前提条件 已配置BMS集群间互相免密登录。 操作步骤 安装HPC-X工具套件。 使用社区OpenMPI时，需要同时使用Mellanox的HPC-X 套件，适用于CentOS 7.3的HPC-X版本是“hpcx-v2
SFS Turbo提供按需扩展的高性能文件存储（NAS），可为云上多个弹性云服务器（Elastic Cloud Server，ECS），容器（CCE&CCI），裸金属服务器（BMS）提供共享访问，能够弹性伸缩至320TB规模，具备高可用性和持久性，为海量的小文件、低延迟高IOPS型应用提供有力支持。
常见问题 RoCE网络问题 STAR-CCM+启动相关问题 父主题： 附录
在HPC集群上运行MPI应用（X86 BMS场景） 该任务指导以CentOS7.3的OS为例在集群上运行MPI应用。 IB驱动自带的OpenMPI 社区OpenMPI Spectrum MPI Intel MPI Platform MPI 父主题： 裸金属服务器场景典型应用
输流时内核内存空间与用户空间之间环境切换的次数。 没有CPU参与：应用程序可以访问远程内存，而不占用远程机器中的任何CPU。远程存储器将被读取，无需任何干预的远程进程(或处理器)。远程CPU中的缓存将不会被访问的内存内容填满。 基于消息的事务：数据被作为离散消息处理，而不是作为流
x86_64.rpm 下载地址：https://www-01.ibm.com/marketing/iwm/iwm/web/preLogin.do?source=swerpsysz-lsf-3 安装IBM Spectrum MPI。 将1.a中下载的MPI软件包上传至运行MPI的BMS内（建议“/home/rhel”目录下）。
MPI安装 Platform MPI安装 PlatformMPI使用STAR-CCM+自带的，不需要安装。 OpenMPI安装（可选） 若使用STAR-CCM+自带的，可不用安装。 cd /root tar zxvf openmpi-4.0.1.tar.gz cd openmpi-4
本，v1和v2。其中RoCE v1是一种链路层协议，允许在同一个广播域下的任意两台主机直接访问。而RoCE v2是一种Internet层协议，即可以实现路由功能。虽然RoCE协议这些好处都是基于融合以太网的特性，但是RoCE协议也可以使用在传统以太网网络或者非融合以太网络中。 应用场景
/etc/fstab 执行mount -a 备注： 192.168.0.15:/ 是从sfs turbo console中获取到的挂载的路径。 第1个1表示备份文件系统，第2个1表示从/分区的顺序开始fsck磁盘检测，0表示不检测，_rnetdev 表示主机无法挂载直接跳过，避免无法挂载主机无法启动。
+指定的物理核数。 ip1,ip2：运行STAR-CCM+指定的主机信息。 core_num1,core_num2：指定每个主机运行的物理核数。 hiroce gids：查下设备名和index。 UCX_NET_DEVICES: hiroce gids查到的有ip值一行的ib_dev的值:
STAR-CCM+集群运行时候需要跨节点运行，推荐使用互信免密登录。 # 生成ssh公钥和私钥 ssh-key-gen # 拷贝公钥到指定主机的~/.ssh/authorized_key文件中 ssh-copy-id root@目标主机IP 例如：ssh-copy-id root@192
96 ofa-v2-cma-roe-enp177s0是上一步/etc/dat.conf中首行配置的名称； client端的192.168.0.96是server端的ip。 验证通过的观测指标：client和server端都出现DAPL Test Complete. PASSED则表示验证通过
B机器作为Server端，A机器作为Client端，dtest/rping测试RoCE网络仍异常。 解决方案： 1.请检查集群中每个节点的配置文件/etc/dat.conf中"ofa-v2-cma-roe-enp177s0"是否放在首行且每个节点都一致。 2.若以上方法无法解决，请联系技术支持处理。
创建HPC私有镜像 前提条件 创建镜像需选择ECS系统盘镜像。 需修改镜像属性才能在ECS创建界面的C6h规格中选择到相应的镜像。 镜像获取 请联系技术支持进行操作。 创建系统盘镜像 请使用镜像文件创建系统盘镜像，需注意镜像用途选择ECS系统盘镜像如图1，选择启动方式为UEFI图2，否则系统无法启动。
本节指导用户在BMS集群上安装和使用Platform MPI应用（以版本platform_mpi- 09.01.04.03r-ce.bin为例）。 对于集群中的每台BMS，都需要执行该操作。 前提条件 已配置BMS集群间互相免密登录。 操作步骤 安装Platform MPI 下载platformMPI，如：platform_mpi-
依次登录集群中所有BMS，重复执行1.b～1.c，关闭所有BMS的防火墙。 修改配置文件。 登录集群中任意一台BMS。 执行以下命令，查看BMS的主机名。 $ hostname 图2 查看BMS的主机名 依次登录集群中所有BMS，重复执行1.b～2.b，获取所有BMS的主机名。 登录集群中任意一台BMS。 执行以下命令，添加hosts配置文件。
依次登录集群中所有BMS，重复执行步骤1.2～步骤1.3，关闭所有BMS的防火墙。 修改配置文件。 登录集群中任意一台BMS, 执行以下命令，添加hosts配置文件。 # vi /etc/hosts 添加的内容为集群中所有BMS的私网IP和主机名，例如： 192.168.1.138 bms-arm-ib-0001
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
