MAPREDUCE服务 MRS-创建集群时配置LakeFormation数据连接:创建集群时配置LakeFormation数据连接

时间:2024-08-17 08:59:29

创建集群时配置LakeFormation数据连接

  1. 进入购买 MRS 集群页面。
  2. 单击“购买集群”,进入“购买集群”页面。
  3. 在购买集群页面,选择“自定义购买”。
  4. 参考购买自定义拓扑集群进行配置并创建集群,且集群需满足表1中要求。

    表1 LakeFormation数据连接参数说明

    参数

    参数说明

    版本类型

    LTS版

    集群版本

    选择配置对接的MRS集群版本。

    当前仅MRS 3.3.0-LTS及之后版本支持在创建集群时配置LakeFormation数据连接。

    组件选择

    必须包含Hadoop、Ranger、Hive、Guardian、Spark(可选)、Flink(可选)等组件。

    例如,配置如下图所示,不同版本集群可能存在差异,具体界面显示以实际为准。

    元数据

    选择“外置数据连接”,并配置以下参数:

    1. LakeFormation元数据:单击按钮开启。
    2. LakeFormation连接实例:选择创建LakeFormation数据连接已创建的LakeFormation数据连接名称。
    3. 数据连接类型:保持默认。

    例如,配置如下图所示,不同版本集群可能存在差异,具体界面显示以实际为准。

    虚拟私有云

    与LakeFormation数据连接所在的虚拟私有云保持一致。

    子网

    选择子网名称。

    拓扑调整

    选择“开启”,并确认Ranger组件至少添加1个PolicySync(PSC)实例(该实例部署节点需要同时包含RangerAdmin实例)、Guardian组件至少添加2个TokenSever(TS)实例。

    例如,配置如下图所示,不同版本集群可能存在差异,具体界面显示以实际为准。

    Kerberos认证

    开启

    委托

    勾选“高级配置”后的“现在配置”,“委托”选择“现有委托”,并选择创建对接E CS /BMS云服务委托创建的委托。

    例如,配置如下图所示,不同版本集群可能存在差异,具体界面显示以实际为准。

  5. 等待集群创建完成后,在“现有集群”页面单击已创建的MRS集群名称,在“概览”页签单击“ IAM 用户同步”后的“同步”,根据界面提示同步当前用户。

  6. 参考配置MRS 3.3.0-LTS版本集群配置组件存算分离、下载客户端等操作。
support.huaweicloud.com/usermanual-mrs/mrs_01_24882.html