MAPREDUCE服务 MRS-执行distcp命令报错如何处理:回答

时间:2024-08-01 19:24:47

回答

当用户在distcp命令中使用webhdfs://时,会发生上述异常,是由于集群所使用的HTTP政策为HTTPS,即配置在“hdfs-site.xml”(文件路径为“客户端安装目录/HDFS/hadoop/etc/hadoop”)的“dfs.http.policy”值为“HTTPS_ONLY”。所以要避免出现此异常,应使用swebhdfs://替代webhdfs://

例如:

./hadoop distcpswebhdfs://IP:PORT/testfile hdfs://IP:PORT/testfile1

support.huaweicloud.com/cmpntguide-mrs/mrs_01_1695.html