MAPREDUCE服务 MRS-MRS集群节点规格说明:磁盘角色

时间：2024-10-16 09:00:33

MAPREDUCE服务 MRS 业务选型

表1 MRS 集群节点磁盘类型
磁盘角色	描述
系统盘	节点系统盘的存储类型和存储空间。存储类型： SAS：高IO SSD：超高IO GPSSD：通用型SSD
数据盘	节点数据磁盘存储空间。为增大数据存储容量，创建集群时可同时添加磁盘，每个Core或者Task节点最多支持添加10块磁盘，有如下应用场景：数据存储和计算分离，数据存储在OBS中，集群存储成本低，存储量不受限制，并且集群可以随时删除，但计算性能取决于OBS访问性能，相对HDFS有所下降，建议在数据计算不频繁场景下使用。数据存储和计算不分离，数据存储在HDFS中，集群成本较高，计算性能高，但存储量受磁盘空间限制，删除集群前需将数据导出保存，建议在数据计算频繁场景下使用。目前的存储类型： SAS：高IO SSD：超高IO GPSSD：通用型SSD 说明： MRS集群内节点个数越多，对管理节点（即Master节点）的硬盘容量要求越高。为了保证集群能够健康地运行，当创建的节点个数达到300时，建议将Master的硬盘容量配置成600 GB以上；当创建的节点个数达到500时，建议将Master的硬盘容量配置成1TB以上。