检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Turbo提供按需扩展的高性能文件存储（NAS），可为云上多个弹性云服务器（Elastic Cloud Server，ECS），容器（CCE&CCI），裸金属服务器（BMS）提供共享访问，能够弹性伸缩至320TB规模，具备高可用性和持久性，为海量的小文件、低延迟高IOPS型应用提供有力支持。
在HPC集群上运行MPI应用（鲲鹏BMS场景） 该任务指导以CentOS 7.6的操作系统为例在集群上运行MPI应用。 安装和使用IB驱动自带的Open MPI 安装和使用社区OpenMPI 安装和使用MPICH 父主题： 裸金属服务器场景典型应用
RoCE RoCE概念 RDMA over Converged Ethernet (RoCE)是一种网络协议，允许应用通过以太网实现远程内存访问。目前RoCE有两个协议版本，v1和v2。其中RoCE v1是一种链路层协议，允许在同一个广播域下的任意两台主机直接访问。而RoCE v
使用“PuTTY”，采用密钥对方式登录弹性云服务器。 登录用户为创建弹性云服务器时指定的用户名。 执行以下命令，防止系统超时退出。 # TMOUT=0 执行以下命令，验证参加测试的弹性云服务器之间是否可以免密码互相登录。 $ ssh 用户名@SERVER_IP 执行以下命令，关闭弹性云服务器的防火墙。 #
安装IB驱动。 下载安装包“MLNX_OFED_LINUX-4.3-1.0.1.0-rhel7.3-x86_64.tgz”。 下载地址：https://network.nvidia.com/products/infiniband-drivers/linux/mlnx_ofed/ 图2 IB驱动的下载页面
主要概念 RDMA RoCE 父主题： 附录
RoCE网络问题 dtest或rping打流测试网络双向不通问题 问题现象： dtest/rping打流测试网络双向不通问题：A机器作为Server端，B机器作为Client端，dtest/rping测试RoCE网络异常；调换A、B机器角色，B机器作为Server端，A机器作为C
常见问题 RoCE网络问题 STAR-CCM+启动相关问题 父主题： 附录
MPI安装 Platform MPI安装 PlatformMPI使用STAR-CCM+自带的，不需要安装。 OpenMPI安装（可选） 若使用STAR-CCM+自带的，可不用安装。 cd /root tar zxvf openmpi-4.0.1.tar.gz cd openmpi-4
在HPC集群上运行MPI应用（X86 BMS场景） 该任务指导以CentOS7.3的OS为例在集群上运行MPI应用。 IB驱动自带的OpenMPI 社区OpenMPI Spectrum MPI Intel MPI Platform MPI 父主题： 裸金属服务器场景典型应用
依次登录集群中所有ECS，重复执行1.a～1.c，关闭所有ECS的防火墙。 修改配置文件。 登录集群中任意一台ECS。 执行以下命令，查看ECS的主机名。 # hostname 图2 查看主机名 依次登录集群中所有ECS，重复执行2.a～2.b，获取所有ECS的主机名。 登录集群中任意一台ECS。
安装和使用MPICH 操作场景 本节指导用户在鲲鹏BMS集群上安装和使用MPICH应用（以版本mpich-3.3.2为例）。 对于集群中的每台BMS，都需要执行该操作。 前提条件 已配置BMS集群间互相免密登录。 操作步骤 安装MPICH。 下载MPICH。 下载地址：https://aur
MPI。 以两个BMS为例： $ mpirun -np 2 --pernode -hostfile hostfile /home/rhel/hello 图2 集群上运行社区OpenMPI成功 hostfile文件在运行时需要指定路径，可执行文件hello路径需为绝对路径，集群中所有可执行文件在同一路径下。
RDMA RDMA概念 远程直接内存访问(即Remote Direct Memory Access)是一种直接内存访问技术，它将数据直接从一台计算机的内存传输到另一台计算机，无需尤其是面对高性能计算HPC、大数据分析和浪涌型IO高并发、低时延应用，现有TCP/IP软硬件架构和应用
安装和使用社区OpenMPI 操作场景 本节指导用户在BMS上安装和使用社区OpenMPI（以4.0.2版本为例）。 对于集群中的每台BMS，都需要执行该操作。 前提条件 已配置BMS集群间互相免密登录。 操作步骤 安装OpenMPI。 下载社区OpenMPI，版本号为“openmpi-4
创建HPC私有镜像 前提条件 创建镜像需选择ECS系统盘镜像。 需修改镜像属性才能在ECS创建界面的C6h规格中选择到相应的镜像。 镜像获取 请联系技术支持进行操作。 创建系统盘镜像 请使用镜像文件创建系统盘镜像，需注意镜像用途选择ECS系统盘镜像如图1，选择启动方式为UEFI图2，否则系统无法启动。
配置节点互信 配置节点互信免密登录 STAR-CCM+集群运行时候需要跨节点运行，推荐使用互信免密登录。 # 生成ssh公钥和私钥 ssh-key-gen # 拷贝公钥到指定主机的~/.ssh/authorized_key文件中 ssh-copy-id root@目标主机IP 例如：ssh-copy-id
b，获取所有BMS的主机名。 登录集群中任意一台BMS。 执行以下命令，添加hosts配置文件。 # vi /etc/hosts 添加的内容为集群中所有BMS的私网IP和主机名，例如： 192.168.0.1 bms-0004 192.168.0.2 bms-0005 ... 执行以下命令，添加hostfile文件。
MPI。 以两个BMS为例： $ mpirun -np 2 --pernode -hostfile hostfile /home/rhel/hello 图3 集群上运行社区OpenMPI成功 hostfile文件在运行时需要指定路径，可执行文件hello路径需为绝对路径，集群中所有可执行文件在同一路径下。
以两台BMS为例： $ mpirun -perhost 2 -np 12 -machinefile hostfile /home/rhel/hello 图3 BMS集群上运行Intel MPI成功 hostfile文件在运行时需要指定路径，可执行文件hello路径需为绝对路径，集群中所有可执行文件在同一路径下。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
