检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
如何处理集群内部OBS证书过期 用户问题 用户在MRS集群中访问OBS服务过程中出现证书过期问题。 问题现象 MRS集群产生“ALM-12054 证书文件失效”或“ALM-12055 证书文件即将过期”告警，且告警详情中触发告警的证书为OBS证书。 图1 OBS证书即将过期告警 图2
任务下次启动，与上一次运行的时间间隔，支持按“小时”或按“天”。 备份策略 每次都全量备份 选择数据周期备份策略。 首次全量备份，后续增量备份 每次都全量备份 每n次进行一次全量备份 说明： 备份组件元数据时不支持增量备份，仅支持“每次都全量备份”。 在“备份配置”，勾选“元数据和其它数据”区域下的“IoTDB”。
任务下次启动，与上一次运行的时间间隔，支持按“小时”或按“天”。 备份策略 首次全量备份，后续增量备份 首次全量备份，后续增量备份 每次都全量备份 每n次进行一次全量备份 说明： 备份Manager数据和组件元数据时不支持增量备份，仅支持“每次都全量备份”。 在“备份配置”，勾选“业务数据”下的“ClickHouse”。
择“更多 > 即时备份”，开始执行备份任务。 备份任务执行完成后，系统自动在备份目录中为每个备份任务创建子目录，目录名为“备份任务名_任务创建时间”，用于保存数据源的备份文件。备份文件的名称为“数据源_任务执行时间.tar.gz”。 创建ClickHouse备份任务路径选择RemoteHDFS时的环境配置
小时”或按“天”。 备份策略 每次都全量备份 首次全量备份，后续增量备份 每次都全量备份 每n次进行一次全量备份 说明： 备份Manager数据和组件元数据时不支持增量备份，仅支持“每次都全量备份”。 如果“路径类型”要使用NFS或CIFS，不能使用增量备份功能。因为在NFS或C
CDM支持文件到文件类数据的迁移，本章节以MRS HDFS至OBS为例，介绍如何通过CDM将文件类数据迁移到OBS文件系统中。 使用CDM服务迁移MRS HDFS数据至OBS流程如下： 步骤1：创建CDM集群并绑定EIP 步骤2：创建MRS HDFS连接 步骤3：创建OBS连接 步骤4：创建迁移作业 方案架构
手动备份Doris数据 Doris支持将当前数据以文件的形式，通过Broker备份到远端存储系统中，可实现将Doris数据定期进行快照备份及数据迁移操作。 备份恢复相关的操作目前只允许拥有ADMIN权限的用户执行。 一个DataBase内，只允许有一个正在执行的备份作业。 Dor
Spark作业访问OBS报错“requestId=XXX”如何处理？ 问： Spark作业访问OBS报错，错误信息如下，如何处理？ xxx requestId=4971883851071737250 xxx 答： 登录Spark客户端节点，进入conf目录，修改配置文件“core-site
MRS节点访问OBS报错408如何处理？ 问： MRS节点访问OBS报错408，怎么办？ 答： MRS节点访问OBS报错408时，用户需要更换OBS域名。 修改OBS域名为myhuaweicloud.com后缀的域名即可。 父主题： 作业管理类
查看备份目录下是否有很多备份包。 是，执行13。 否，执行16。 将备份包移出备份目录，或者直接删除备份包，直到备份目录挂载节点剩余空间大于20GB。 再一次启动该备份任务，查看备份任务是否执行成功。 是，执行15。 否，执行16。 等待2分钟，检查告警是否消除。 是，结束操作。 否，执行16。 收集故障信息
通过Flink作业处理OBS数据 应用场景 MRS支持在大数据存储容量大、计算资源需要弹性扩展的场景下，用户将数据存储在OBS服务中，使用MRS集群仅做数据计算处理的存算分离模式。 本文将向您介绍如何在MRS集群中运行Flink作业来处理OBS中存储的数据。 方案架构 Flink
SparkStreaming作业运行后报OBS访问403如何处理？ 问： SparkStreaming作业运行几十个小时后失败，报OBS访问403如何处理？ 答： 当用户提交作业需要读写OBS时，提交作业程序会默认为用户添加访问OBS的临时accesskey和secretkey，但是临时accesskey和secretkey有过期时间。
HBase容灾集群业务切换指导 操作场景 MRS集群管理员可配置HBase集群容灾功能，以提高系统可用性。容灾环境中的主集群完全故障影响HBase上层应用连接时，需要为HBase上层应用配置备集群信息，才可以使得该应用在备集群上运行。 对系统的影响 切换业务后，写入备集群的数据默
源。 各组件访问OBS配置说明可参考如下内容： MRS集群服务对接OBS示例 MRS集群服务对接OBS示例 基于Guardian服务的存算分离配置流程 创建MRS集群。 MRS集群内需包含Guardian、Ranger、Hadoop等基础组件。 目前仅MRS 3.3.0-LTS及
> 重启服务”，输入当前用户密码，单击“确定”，并勾选“同时重启上层服务。”，单击“确定”，重启Hive服务。 进入beeline客户端，在创建表时指定Location为OBS文件系统路径。 beeline 例如，创建一个表“test”，该表的Location为“obs://OB
配置Flink通过IAM委托访问OBS 参考配置MRS集群通过IAM委托对接OBS完成存算分离集群配置后，即可在Flink客户端访问OBS并行文件系统并运行作业。 Flink对接OBS 使用安装客户端的用户登录Flink客户端安装节点。 执行如下命令初始化环境变量。 source
在新页面中修改任务参数。 手动备份支持修改的参数项如下： 目的端路径：修改备份文件在HDFS中保存的目录。 最大备份数：修改备份目录中可保留的备份文件集数量。 周期备份支持修改的参数项如下： 开始时间：修改备份任务第一次启动的时间。 周期：修改备份任务下次启动，与上一次运行的时间间隔，支持“按小时”或“按天”。
Hive表的Location支持跨OBS和HDFS路径吗 问题 Hive表的location支持跨OBS和HDFS路径吗？ 回答 Hive存储在OBS上的普通表，支持表location配置为hdfs路径。 同一个Hive服务中可以分别创建存储在OBS上的表和存储在HDFS上的表。 Hive存储在OBS上的分
表名' 示例： disable_table_replication 't1' 切换主备 重新配置HBase容灾，参考配置HBase主备集群容灾。 父主题： HBase集群容灾高可用
MRS集群客户端如何通过AK/SK信息对接OBS MRS 1.9.2及之后的版本支持使用obs://的方式对接OBS服务，当前主要支持的组件为Hadoop、Hive、Spark、Presto、Flink。其中HBase组件使用obs://的方式对接OBS服务暂不支持。 该章节主要
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
