-
在本地Windows环境中调测ClickHouse应用(MRS 3.3.0及之后版本) - MapReduce服务 MRS
在本地Windows环境中调测ClickHouse应用(MRS 3.3.0及之后版本) 编译并运行程序 在程序代码完成开发后,您可以在Windows环境中运行应用。本地和集群业务平面网络互通时,您可以直接在本地进行调测。 操作步骤 单击IDEA右边Maven窗口的“Reload All Maven Projec
-
配置Flink任务进程参数 - MapReduce服务 MRS
责任。 因而JobManager和TaskManager的参数配置对Flink应用的执行有着很大的影响意义。用户可通过如下操作对Flink集群性能做优化。 操作步骤 配置JobManager内存。 JobManager负责任务的调度,以及TaskManager、RM之间的消息通信
-
提升HBase非业务高峰期的Compaction执行速度 - MapReduce服务 MRS
offpeak.start.hour HBase集群运行的非高峰开始时间,取值范围为:-1~23,且值只能为整数,当参数值为“-1”则不支持HBase分时Compaction吞吐量功能。 -1 hbase.offpeak.end.hour HBase集群运行的非高峰结束时间,取值范围为:-1
-
使用Loader从HDFS导出数据到ClickHouse - MapReduce服务 MRS
Manager,选择“集群 > 服务 > ClickHouse >逻辑集群”,查看对应逻辑集群,获取“HTTP Balancer端口号”中“加密端口”参数值。 未启用Kerberos认证集群具体的端口值可通过登录集群FusionInsight Manager,选择“集群 > 服务 > ClickHouse
-
添加Hudi数据源 - MapReduce服务 MRS
com”),否则HetuEngine无法根据主机名称连接到非本集群节点。 参考创建HetuEngine权限角色创建HetuEngine管理员用户。 操作步骤 获取Hudi数据源集群的“hdfs-site.xml”,“core-site.xml”配置文件。 登录Hudi数据源所在集群的FusionInsight Manager页面。
-
管理CDL ENV变量 - MapReduce服务 MRS
i环境变量并进行管理。 前提条件 开启Kerberos认证的集群需已参考CDL用户权限管理创建具有CDL管理操作权限的用户。 操作步骤 使用具有CDL管理操作权限的用户或admin用户(未开启Kerberos认证的集群)登录CDLService WebUI界面,请参考登录CDLService
-
配置FlinkServer作业运行残留信息自动清理 - MapReduce服务 MRS
HDFS中残留目录,开启FlinkServer目录残留清理功能可以清理残留目录。 前提条件 集群已安装FlinkServer实例并运行正常。 配置步骤 登录Manager页面。 选择“集群 > 服务 > Flink > 配置 > 全部配置”,搜索参数“ClearUpEnabled
-
PGXC - 数据仓库服务 GaussDB(DWS)
PGXC_LOCK_CONFLICTS PGXC_LOCK_CONFLICTS视图提供集群中有冲突的锁的信息。 当某一个锁正在等待另一个锁,或正在被另一个锁等待,即该锁是有冲突的。 目前,PGXC_LOCK_CONFLICTS视图只收集locktype为relation、part
-
PGXC - 数据仓库服务 GaussDB(DWS)
PGXC_TABLE_STAT PGXC_TABLE_STAT视图提供集群所有CN和DN节点上当前数据库所有表的统计信息。除在每一行前面增加name类型的nodename字段外,其余字段的名称、类型和顺序与GS_TABLE_STAT视图相同,具体的字段请参考GS_TABLE_STAT。
-
GLOBAL - 数据仓库服务 GaussDB(DWS)
GLOBAL_REL_IOSTAT GLOBAL_REL_IOSTAT视图显示集群中所有节点上磁盘读写统计信息的总和。其各字段的名称与GS_REL_IOSTAT视图相同,但含义为各节点上GS_REL_IOSTAT视图同名字段的数值之和。 需要有系统管理员权限才可以访问此视图。 父主题:
-
配置Hive Transform功能开关 - MapReduce服务 MRS
进入Hive服务配置页面: MRS 3.x之前版本,单击集群名称,登录集群详情页面,选择“组件管理 > Hive > 服务配置”,单击“基础配置”下拉菜单,选择“全部配置”。 若集群详情页面没有“组件管理”页签,请先完成IAM用户同步(在集群详情页的“概览”页签,单击“IAM用户同步”右侧的“同步”进行IAM用户同步)。
-
为什么在启动spark-beeline的命令中指定“--hivevar”选项无效 - MapReduce服务 MRS
令中指定“--hivevar”选项无效 问题 为什么在启动spark-beeline的命令中指定“--hivevar”选项无效? 在MRS集群启动spark-beeline的命令中如果使用了“--hivevar <VAR_NAME>=<var_value>”选项自定义一个变量,在
-
修改健康检查配置 - MapReduce服务 MRS
修改健康检查配置 操作场景 管理员可以启用自动健康检查减少手工操作时间。自动健康检查默认会对整个集群进行检查。 操作步骤 登录FusionInsight Manager。 选择“运维 > 健康检查 > 配置”。 “定期健康检查”表示是否启用自动执行健康检查,选择“启用”表示启用,默认“不启用”表示不启用。
-
ALM-45615 CDL服务不可用 - MapReduce服务 MRS
在FusionInsight Manager首页,选择“集群 > 待操作集群的名称 > 服务 > CDL > 实例”。 查看是否全部CDLService实例和CDLConnector实例故障。 是,重启CDL服务,选择“集群 > 待操作集群的名称 > 服务 > CDL > 更多 > 重启
-
ALM-50201 Doris服务不可用 - MapReduce服务 MRS
告警参数 参数名称 参数含义 来源 产生告警的集群或系统名称 服务名 产生告警的服务名称 角色名 产生告警的角色名称 主机名 产生告警的主机名 对系统的影响 Doris服务异常,无法通过FusionInsight Manager对Doris进行集群操作,无法使用Doris服务功能。 可能原因
-
Impala常见配置参数 - MapReduce服务 MRS
Impala常见配置参数 本章节适用于MRS 3.x及后续版本。 参数入口 在Manager系统中,选择“集群 > 服务 > Impala > 配置”,选择“全部配置”。在搜索框中输入参数名称。 参数说明 下表仅列举了部分常用参数,实际参数以Manager页面为准,参数详情请参见官网https://docs
-
配置Guardian服务对接OBS - MapReduce服务 MRS
”,单击“完成”,委托成功创建。 登录MRS控制台,在导航栏选择“现有集群”。 单击集群名称,进入集群详情页面。 在集群详情页的“概览”页签,单击“IAM用户同步”右侧的“同步”进行IAM用户同步。 在集群详情页的“概览”页签,单击委托右侧的“管理委托”选择创建的委托名称,例如
-
GLOBAL - 数据仓库服务 GaussDB(DWS)
GLOBAL_REL_IOSTAT GLOBAL_REL_IOSTAT视图显示集群中所有节点上磁盘读写统计信息的总和。其各字段的名称与GS_REL_IOSTAT视图相同,但含义为各节点上GS_REL_IOSTAT视图同名字段的数值之和。 需要有系统管理员权限才可以访问此视图。 父主题:
-
如何获取接口URI中参数 - 云容器引擎 CCE
D。 集群ID(cluster_id) 登录CCE控制台,在左侧导航栏中选择“集群管理”。 单击所创建集群的名称,进入集群详情页面,获取集群ID。 图1 获取cluster_id 节点ID(node_id) 登录CCE控制台,在左侧导航栏中选择“集群管理”。 单击所创建集群的名称
-
使用Loader从关系型数据库导入数据到HBase - MapReduce服务 MRS
影响其他业务访问数据库,并且导入时间长。 在有索引的多个字段中,选择字段值最离散的字段作为分区列,不离散的分区列会导致多个导入MR任务负载不均衡。 分区列的排序规则必须支持大小写敏感,否则在数据导入过程中,可能会出现数据丢失。 不建议分区列选择类型为float或double的字段