MAPREDUCE服务 MRS-使用distcp命令跨集群复制HDFS数据:操作步骤

时间:2024-08-01 19:24:49

操作步骤

  1. 登录安装客户端的节点。
  2. 执行以下命令,切换到客户端安装目录。

    cd /opt/client

  3. 执行以下命令配置环境变量。

    source bigdata_env

  4. 如果集群为安全模式,执行distcp命令的用户所属的用户组必须为supergroup组,且执行以下命令进行用户认证。普通模式集群无需执行用户认证。

    kinit 组件业务用户

  5. 直接执行distcp命令。例如:

    hadoop distcp hdfs://hacluster/source hdfs://hacluster/target

support.huaweicloud.com/cmpntguide-mrs/mrs_01_0794.html