检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
"[units]") spec使用正则表达式来选择需要TTL的分区，可以执行show partitions命令查看Hudi表的分区格式，然后写正确的正则表达式来匹配分区。 value和units要搭配使用，value给定的是整数值，units是数值的单位，表示数据要保留的时长。 更新TTL策略：
配置Container日志聚合功能 配置场景 Yarn提供了Container日志聚合功能，可以将各节点Container产生的日志收集到HDFS，释放本地磁盘空间。日志收集的方式有两种： 应用完成后将Container日志一次性收集到HDFS。 应用运行过程中周期性收集Container输出的日志片段到HDFS。
端文件，文件生成后默认保存在主管理节点“/tmp/FusionInsight-Client”。支持自定义其他目录且omm用户拥有目录的读、写与执行权限。然后执行4。 否，单击“确定”指定本地的保存位置，开始下载完整客户端，等待下载完成，然后执行4。 使用WinSCP工具，以客户端
ALM-18008 Yarn ResourceManager堆内存使用率超过阈值（2.x及以前版本） 告警解释 系统每30秒周期性检测Yarn ResourceManager堆内存使用率，并把实际的Yarn ResourceManager堆内存使用率和阈值相比较。当Yarn Re
登录备集群FusionInsight Manager。 下载并安装HBase客户端。 在备集群HBase客户端，以hbase用户执行以下命令指定备集群写数据状态启用。 kinit hbase hbase shell set_clusterState_active 界面提示以下信息表示执行成功：
ode.customized.configs）中设置该参数。 flush_proportion IoTDBServer 0.4 调用刷盘的写内存比例，如果写入负载过高（如批处理=1000），可以降低该值。 replica_affinity_policy IoTDBServer random
如何配置HBase文件存储 使用条件 集群版本小于MRS 3.x。 使用场景 HBase文件存储模块（HBase FileStream，简称HFS）是HBase的独立模块，它作为对HBase与HDFS接口的封装，应用在MRS的上层应用，为上层应用提供文件的存储、读取、删除等功能。
Guardian日志介绍 日志描述 日志路径：Guardian相关日志的存储路径为：“/var/log/Bigdata/guardian/token-server”。 日志归档规则：Guardian的运行日志启动了自动压缩归档功能，当日志大小超过50MB的时候（此日志文件大小可进
使用Loader导出数据 操作场景 该任务指导用户完成将数据从MRS导出到外部的数据源的工作。 一般情况下，用户可以手工在Loader界面管理数据导入导出作业。当用户需要通过shell脚本来更新与运行Loader作业时，必须对已安装的Loader客户端进行配置。 前提条件 创建或
使用Loader导出MRS集群内数据 操作场景 该任务指导用户完成将数据从MRS导出到外部的数据源的工作。 一般情况下，用户可以手工在Loader界面管理数据导入导出作业。当用户需要通过shell脚本来更新与运行Loader作业时，必须对已安装的Loader客户端进行配置。 前提条件
ALM-12045 网络读包丢包率超过阈值 ALM-12046 网络写包丢包率超过阈值 ALM-12047 网络读包错误率超过阈值 ALM-12048 网络写包错误率超过阈值 ALM-12049 网络读吞吐率超过阈值 ALM-12050 网络写吞吐率超过阈值 ALM-12051 磁盘Inode使用率超过阈值
ALM-18009 MapReduce JobHistoryServer堆内存使用率超过阈值（2.x及以前版本） 告警解释 系统每30秒周期性检测Mapreduce JobHistoryServer堆内存使用率，并把实际的Mapreduce JobHistoryServer堆内存
ALM-14038 Router堆内存使用率超过阈值 告警解释 系统每30秒周期性检测HDFS Router堆内存使用大小和能够分配的最大堆内存大小，计算堆内存使用大小和能够分配的最大堆内存大小的比值得到堆内存使用率，并把实际的HDFS Router堆内存使用率和阈值相比较。HDFS
x版本） 组件 样例工程位置 描述 Alluxio alluxio-examples 使用Alluxio通过公共接口连接到存储系统示例程序。可实现写文件、读文件等功能。 Flink flink-examples 该样例工程提供以下样例程序： DataStream程序 Flink构造Dat
MemArtsCC日志介绍 日志描述 日志路径：MemArtsCC相关日志的存储路径为：“/var/log/Bigdata/memartscc”。 日志归档规则：MemArtsCC的运行日志启动了自动压缩归档功能，当日志大小超过50MB的时候（此日志文件大小可进行配置），会自动压
ClickHouse > Clickhouse Scope”，勾选对应数据库的创建权限。单击对应的数据库名称，根据不同任务场景，勾选对应表的“读”、“写”权限，单击“确定”保存。 单击“系统 > 权限 > 用户组 > 添加用户组”，创建一个用户组，例如developgroup。 单击“系统 >
写入文件的过程如图2所示。 图2 写入文件过程 HDFS文件写入的详细步骤如下所示： Driver创建要写入文件的目录。 根据RDD分区分块情况，计算出写数据的Task数，并下发这些任务到Executor。 Executor执行这些Task，将具体RDD的数据写入到步骤1创建的目录下。 HDFS和ZooKeeper的关系
例如，为用户组“obs_hadoop1”添加“obs://OBS并行文件系统名称/hadoop1”的“Read”和“Write”权限： 图2 为新建用户组赋予OBS路径读和写的权限 父主题： MRS集群服务对接OBS示例
的应用容错。如图3所示，客户端应用请求集群时，使用ELB（Elastic Load Balance）来进行流量分发，通过ELB的轮询机制，写不同节点上的本地表（Local Table），读不同节点上的分布式表（Distributed Table），这样，无论集群写入的负载、读的负
String类型，TTL的冲突解决策略 否，MAX_TTL或者MIN_TTL，默认是MAX_TTL runInline String类型，TTL是否在写操作完成时触发 否，true或者false，默认是false 示例 指定表名开启TTL（每10个replacecommit触发一次TTL）：
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
