检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
MRS节点访问OBS报错408如何处理？ 问： MRS节点访问OBS报错408，怎么办？ 答： MRS节点访问OBS报错408时，用户需要更换OBS域名。 修改OBS域名为myhuaweicloud.com后缀的域名即可。 父主题： 作业管理类
具体的参数值可以在ClickHouse服务界面单击“实例”页签，查看当前ClickHouseServer实例所在“主机名称”列获取。 “带宽上限”为可选参数，如果不填写则为无上限，最大可设置为10000MB/s。 在选择迁移数据表界面，单击“数据库”后的，选择待迁出节点上存在的
选。 2022年6月之后购买的集群：按“MRS-BASIC服务费用”进行筛选。 IaaS基础设施资源费用（弹性云服务器，云硬盘，弹性IP/带宽等） MRS服务管理费用详情，请参见产品价格详情。 您可以通过MRS提供的价格计算器，选择您需要的集群节点规格，来快速计算出购买MRS集群的参考价格。
csv”，则导出后源文件名为“test-loader.csv.txt”。 .log 压缩 使用SFTP协议导入数据时，是否开启压缩传输功能以减小带宽使用。 选择“true”，表示开启压缩。 选择“false”，表示关闭压缩。 true 设置数据转换 单击“下一步”，进入“转换”界面，设
数据倾斜 Rows/s Task每秒钟读取的数据条数，通过分析相同Stage阶段不同Task每秒钟读取数据条数可以快速判断节点是否存在网络带宽差异，定位是否节点网卡存在问题 Bytes Task读取的数据量 Bytes/s Task每秒钟读取的数据量 Elapsed Task执行时长
Kafka Topic监控页签在Manager页面不显示如何处理？ 问： Kafka Topic监控页签在Manager页面不显示怎么办？ 答： 分别登录集群Master节点，并切换用户为omm。 进入目录“/opt/Bigdata/apache-tomcat-7.0.78/we
份文件集数量。 “最大map数”：填写执行MapReduce任务的最大map数，默认值为“20”。 “单个map的最大带宽(MB/s)”：填写单个map最大带宽，默认值为“100”。 OBS 表示将备份文件保存在OBS目录中，仅MRS 3.3.0-LTS及之后版本支持。 “目的端路径”：填写保存备份数据的OBS目录。
educe类设置为Combiner即可。通过Combiner，一般情况下可以显著减少Map输出的中间结果，从而减少shuffle过程的网络带宽占用。可通过如下接口为一个任务设置Combiner类。 表2 Combiner设置接口 类名 接口名 描述 org.apache.hadoop
educe类设置为Combiner即可。通过Combiner，一般情况下可以显著减少Map输出的中间结果，从而减少shuffle过程的网络带宽占用。可通过如下接口为一个任务设置Combiner类。 表2 Combiner设置接口 类名 接口名 描述 org.apache.hadoop
csv”，则导出后源文件名为“test-loader.csv.txt”。 .log 压缩 使用SFTP协议导入数据时，是否开启压缩传输功能以减小带宽使用。 选择“true”，表示开启压缩。 选择“false”，表示关闭压缩。 true 设置数据转换 单击“下一步”，进入“转换”界面，设
如何关闭ZooKeeper的SASL认证？ 问： 怎么关闭ZooKeeper SASL认证？ 答： 登录FusionInsight Manager。 选择“集群 > 服务 > ZooKeeper > 配置 > 全部配置”。 在左侧导航栏选择“quorumpeer > 自定义”添加参数名称和值：zookeeper
内存不足导致HDFS NameNode启动失败 问题背景与现象 场景一：重启HDFS服务后，HDFS的状态为Bad，且NameNode实例状态异常，并且很久没有退出安全模式。 场景二：NameNode启动时，启动超时后启动失败，原生页面无法打开。 原因分析 在NameNode运行
文件错误导致上传文件到HDFS失败 问题背景与现象 用hadoop dfs -put把本地文件拷贝到HDFS上，有报错。 上传部分文件后，报错失败，从NameNode原生页面看，临时文件大小不再变化。 原因分析 查看NameNode日志“/var/log/Bigdata/hdfs
据成本分析阶段的分析结果识别成本偏高的资源，然后采取针对性的优化措施。 监控资源利用率，评估当前配置是否过高。例如：CPU、内存、云硬盘、带宽等资源的利用率。 监控闲置的资源，避免浪费。例如：未挂载的云硬盘、未绑定的EIP等。 计费模式优化 不同类型的业务对资源使用周期有不同的要
执行select语句时报错“Execution Error return code 2” 问题现象 执行语句select count(*) from XXX;时客户端报错： Error:Error while processing statement :FAILED:Execution
编码类型 导出文件的编码格式，如UTF-8。导出文本文件时才能配置。 UTF-8 压缩 使用SFTP协议导入数据时，是否开启压缩传输功能以减小带宽使用。 选择“true”，表示开启压缩。 选择“false”，表示关闭压缩。 true 单击“保存并运行”，开始保存并运行作业。 查看作业完成情况
编码类型 导出文件的编码格式，如UTF-8。导出文本文件时才能配置。 UTF-8 压缩 使用SFTP协议导入数据时，是否开启压缩传输功能以减小带宽使用。 选择“true”，表示开启压缩。 选择“false”，表示关闭压缩。 true 单击“保存并运行”，开始保存并运行作业。 查看作业完成情况
网络：“虚拟私有云”与MRS集群保持一致。 安全组：与MRS集群的安全组保持一致。 公网访问：设置“弹性公网IP”为“现在购买”，并设置“线路”、“公网带宽”和“带宽大小”，勾选“随实例释放”。 在https://grafana.com/grafana/download/9.5.2?edition=
将Oracle数据库中的数据导入HDFS时各连接器的区别 问题 使用Loader将Oracle数据库中的数据导入到HDFS中时，可选择的连接器有generic-jdbc-connector、oracle-connector、oracle-partition-connector三种，要怎么选？有什么区别？
进程被终止如何定位原因 问题背景与现象 在某环境出现DataNode异常重启，且确认此时未从页面做重启DataNode的操作，需要定位是什么进程终止了DataNode服务端进程。 原因分析 常见的进程被异常终止有2种原因： Java进程OOM被终止 一般Java进程都会配置OOM
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
