MAPREDUCE服务 MRS-MRS存算分离配置流程说明:基于Guardian服务的存算分离配置流程

时间:2024-12-06 09:11:17

基于Guardian服务的存算分离配置流程

  1. 创建 MRS 集群。

    MRS集群内需包含Guardian、Ranger、Hadoop等基础组件。

    目前仅MRS 3.3.0-LTS及之后的版本支持基于Guardian组件对接OBS。

  2. 创建OBS委托。

    用户需要创建1个具有OBS访问权限的委托,用于Guardian组件对接OBS时使用。

  3. 开启Guardian组件对接OBS开关并配置组件。

    修改Guardian服务相关配置参数,配置 IAM 委托认证信息。

  4. 配置组件数据回收站目录的清理策略。

    在存算分离场景下,对接OBS的组件默认开启了数据防误删功能,用户删除数据时,被删除对象会移动至用户对应的回收站目录内,用户需要在OBS文件系统中为对应的目录配置生命周期策略,以避免存储空间被占满的风险。

  5. 组件对接OBS。
  6. 在具备OBS资源的访问权限后,MRS集群内组件可直接访问对应路径。用户可以通过组件客户端以绝对路径方式直接访问OBS文件系统下的资源。
support.huaweicloud.com/usermanual-mrs/mrs_01_0467.html