检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据资源目录管理 数据资源目录是以树型结构管理和展现的包括数据库、大数据、Web服务和文件等资源在内的注册信息。数据资源目录管理包括节点管理、数据库资源管理、大数据管理、接口服务管理、业务分类管理等。 数据管理员登录数据服务共享平台，对资资源目录进行配置管理。
数据采集 使用kafka采集数据时报错IllegalArgumentException 采集数据时报错HoodieException 采集数据时报错HoodieKeyException 父主题： Hudi常见问题
（仅MRS 3.x及之后版本需配置该参数） 当前已使用的文件数的数据采集周期为1个小时，因此超过文件数阈值的告警上报会存在延迟。 存储空间配额 ：填写租户目录的存储空间大小。 为了保证数据的可靠性，HDFS中每保存一个文件则自动生成1个备份文件，即默认共2个副本。
数据目录支持采集哪些对象的资产？
元数据管理 当创建MRS集群选择部署Hive和Ranger组件时，MRS提供多种元数据存储方式，您可以根据自身需要进行选择： 本地元数据：元数据存储于集群内的本地GaussDB中，当集群删除时元数据同时被删除，如需保存元数据，需提前前往数据库手动保存元数据。
登录集群客户端所在节点，执行以下命令，切换到客户端安装目录并认证用户。 cd /opt/client source bigdata_env kinit HetuEngine组件操作用户 （普通模式集群跳过） 执行以下命令，登录数据源的catalog。
数据迁移 数据迁移方案介绍 数据迁移到MRS前信息收集 数据迁移到MRS前网络准备 使用CDM服务迁移Hadoop数据至MRS集群 使用CDM服务迁移HBase数据至MRS集群 使用CDM服务迁移Hive数据至MRS集群 使用BulkLoad工具向HBase中批量导入数据 使用CDM
下载相应关系型数据库的JDBC驱动放置到“${Sqoop_Home}/lib”目录。 执行如下命令导出所有Hive元数据表。 例如所有导出数据保存在HDFS上的“/user/<user_name>/<table_name>”目录。
ALM-18022 Yarn队列资源不足 告警解释 MRS 3.3.1之前版本：告警模块按60秒周期检测Yarn队列资源，当队列可用资源或队列AM（ApplicationMaster）可用资源不足时，产生该告警。 当可用资源充足时，该告警自动消除。
调整Yarn资源分配 HetuEngine依赖Yarn服务提供的资源分配、控制等能力，需要根据实际业务和集群的服务器配置情况调整Yarn服务配置，以获得最佳的性能效果。 登录FusionInsight Manager页面。
选择器属性的配置 数据源名称（source）可设置如下： CLI：使用--source选项。 JDBC：在Connection实例上设置ApplicationName客户端信息属性。
在“资源池”选择指定的资源池。 “可用资源配额”：表示每个资源池默认所有资源都可分配给队列。 在“资源分配”列表指定队列的“操作”列，单击“修改”。 在“修改资源分配”窗口设置任务队列在此资源池中的资源容量策略。 “资源容量 (%)”：表示当前租户计算资源使用的资源百分比。
在图表区域，查看集群服务资源使用状态指标数据图表。 可通过“为图表添加服务”，将特定服务的静态服务资源数据添至图表，最多可选择12个服务。 管理单个图表的操作，可参见查看MRS集群资源监控指标。
产生Yarn队列资源不足告警时正在运行的资源队列如何查看？ 问： 产生“ALM-18022 Yarn队列资源不足”告警时，正在运行的资源队列可以在哪查看？
管理MRS租户资源 管理MRS租户资源目录 管理MRS租户资源池 清除MRS租户队列配置 重装Yarn服务后手动恢复MRS租户数据 删除MRS租户 Superior调度器模式下管理MRS全局用户策略 Capacity调度器模式下清除租户非关联队列 父主题： 管理MRS集群租户
系统中默认包含了一个名为“default”的资源池，所有未加入用户自定义资源池的NodeManager属于此资源池。 该任务指导用户通过MRS添加一个自定义的资源池，并将未加入自定义资源池的主机加入此资源池。
可能原因 Tomcat目录权限异常，Tomcat进程异常。 处理步骤 检查Tomcat目录权限是否正常。 打开FusionInsight Manager页面，在告警列表中，单击此告警所在行的，查看该告警的主机地址。
对系统的影响 执行Balance操作时会占用DataNode的网络带宽资源，请根据业务需求在维护期间执行任务。 默认使用带宽控制为20MB/s，如果重新设置带宽流量或加大数据量，Balance操作可能会对正在运行的业务产生影响。 前提条件 已安装HDFS客户端。
使用CDM服务迁移MRS HDFS数据至OBS 应用场景 MRS支持在大数据存储容量大、计算资源需要弹性扩展的场景下，用户将数据存储在OBS服务中，使用MRS集群仅作数据计算处理的存算分离模式，从而实现按需灵活扩展资源、低成本的海量数据分析方案。
且需要通过Ranger为该用户配置操作数据源的数据库、表、列的管理权限，具体操作请参考添加HetuEngine的Ranger访问权限策略。 已安装集群客户端，例如安装目录为“/opt/client”。 访问Hive数据源步骤 创建并启动HetuEngine计算实例。
压缩格式 在下拉菜单中选择数据导入HDFS后保存文件的压缩格式，未配置或选择NONE表示不压缩数据。 输出目录 数据导入到HDFS里存储的保存目录。 文件操作方式 数据导入时的操作行为。
检查租户数据状态。 在“概述”，查看租户状态，绿色表示租户可用，灰色表示租户不可用。 单击“资源”，查看“Yarn”或者“HDFS 存储”状态，绿色表示资源可用，灰色表示资源不可用。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
