MAPREDUCE服务 MRS-购买自定义集群:软件配置

时间:2024-07-03 15:11:48

软件配置

表1 MRS 集群软件配置

参数

参数说明

区域

选择区域

不同区域的云服务产品之间内网互不相通。请就近选择靠近您业务的区域,可减少网络时延,提高访问速度。

计费模式

MRS提供两种计费模式:
  • 包年/包月
  • 按需计费

    选择“按需计费”时,可能需要冻结一定的保证金。详细内容,请参见计费说明

购买时长

包年/包月模式下该参数有效,表示购买集群的时长。最短时长为1个月,最长时长为1年。

如需开通自动续费功能,请勾选“自动续费”,开通后按月购买的集群自动续费周期为1个月,按年购买的集群自动续费周期为1年。

集群名称

集群名称不允许重复。

只能由字母、数字、中划线和下划线组成,并且长度为1~64个字符。

默认名称为mrs_xxxx,xxxx为字母和数字的四位随机组合数,系统自动组合。

集群类型

提供几种集群类型:
  • 分析集群:用来做离线数据分析,提供的是Hadoop体系的组件。
  • 流式集群:用来做流处理任务,提供的是流式处理组件。
  • 混合集群:既可以用来做离线数据分析,也可以用来做流处理任务,提供的是Hadoop体系的组件和流式处理组件。建议同时需要做离线数据分析和流处理任务时使用混合集群。
  • 自定义:用户可按照业务需求调整集群服务的部署方式,具体请参见购买自定义拓扑集群。(目前仅MRS 3.x版本支持)
说明:
  • MRS流式集群不支持“作业管理”“文件管理”功能
  • 如需在集群中安装全部组件,请选择“自定义”类型集群。

版本类型

提供以下版本类型:

  • 普通版:
    • 支持集群基础操作,如配置、管理和运维。
    • 支持Presto、Impala、Kudu、Sqoop等组件。
  • LTS版:
    • 除支持集群基础操作外,还提供版本升级能力。
    • 支持多可用区部署。
    • 支持HetuEngine、IoTDB、CDL组件。

默认版本类型为普通版。

集群版本

MRS目前支持MRS 1.9.2、MRS 3.1.0、MRS 3.1.2-LTS.3、MRS 3.1.5、MRS 3.2.0-LTS.1、MRS 3.3.0-LTS.1版本。默认值为当前最新版本。

组件选择

MRS集群配套的组件,MRS不同版本集群支持的组件版本请参见MRS组件版本一览表

元数据

是否使用外部数据源存储元数据。

  • 本地元数据: 元数据存储在集群本地。
  • 外置数据连接:使用外部数据源元数据,若集群异常或删除时将不影响元数据,适用于存储计算分离的场景。

支持Hive或Ranger组件的集群支持该功能。

组件名

当“元数据”选择“外置数据连接”时该参数有效。用于表示可以设置外部数据源的组件类型。

  • Hive
  • Ranger

数据连接类型

当“元数据”选择“外置数据连接”时该参数有效。用于表示外部数据源的类型。创建集群时“数据连接类型”仅支持“本地数据库”。

组件端口(目前仅LTS版本支持)

当前MRS集群内各组件默认通讯端口值的策略。

  • 开源:组件的默认通讯端口遵循开源社区的规范不做修改,与开源社区保持一致。
  • 定制:组件的默认通讯端口与开源社区不一致。

开源默认端口与定制默认端口区别请参考开源组件Web站点

support.huaweicloud.com/usermanual-mrs/mrs_01_0513.html