检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
executor内存不足导致查询性能下降 现象描述 在不同的查询周期内运行查询功能,查询性能会有起伏。 可能原因 在处理数据加载时,为每个executor程序实例配置的内存不足,可能会产生更多的Java GC(垃圾收集)。当GC发生时,会发现查询性能下降。
使用Presto客户端执行查询语句 用户可以根据业务需要,在MRS集群的客户端中进行交互式查询。启用Kerberos认证的集群,需要提交拓扑的用户属于“presto”组。 MRS 3.x版本Presto组件暂不支持开启Kerberos认证。
根据报错信息在到对应节点去查看presto worker实例的进程日志。 日志显示: java.lang.OutOfMemoryError: Java heap space 根据报错预判发生了oom导致查询报错。
检查SQL语句执行是否耗时较长 查看告警对象所属的逻辑集群。登录Manager页面,选择“集群 > 服务 > ClickHouse > 逻辑集群 > 查询管理 > 正在进行的慢查询”。
CREATE TABLE test1_s3 ('name' String, 'age' int) ENGINE = S3(path, [ak, sk,] format, [compression]) 执行以下命令查询表。
选择“运维 > 告警 > 告警 > HetuEngine计算实例查询时延超过阈值”,检查该告警的“附加信息”,查看并记录告警上报的租户名。
CREATE TABLE test1_s3 ('name' String, 'age' int) ENGINE = S3(path, [ak, sk,] format, [compression]) 执行以下命令查询表。
说明: 用户可登录FusionInsight Manager,选择“系统 > 权限 > 域和互信”,查看“本端域”参数,即为当前系统域名,如“HADOOP.COM”。 admintest@HADOOP.COM keytab文件 开启安全模式时填写此参数。
父主题: 版本元数据查询
可能原因 该Impalad服务维护的查询数量过多,或者阈值设定的太小。 处理步骤 在FusionInsight Manager首页,选择“运维 > 告警 > 阈值设置 > Impala > 查询任务总数统计 > 等待中的查询总数”,检查阈值大小。 修改阈值大小。
可能原因 该Impalad服务维护的查询数量过多,或者阈值设定的太小。 处理步骤 在FusionInsight Manager首页,选择“运维 > 告警 > 阈值设置 > Impala > 查询任务总数统计 > 提交中的查询总数”,检查阈值大小。 修改阈值大小。
可能原因 该Impalad服务维护的查询数量过多,或者阈值设定的太小。 处理步骤 在FusionInsight Manager首页,选择“运维 > 告警 > 阈值设置 > Impala > 查询任务总数统计 > 执行中的查询总数”,检查阈值大小。 修改阈值大小。
处理步骤 如果运行任务的BE节点故障,需查看具体的故障原因再进行解决。 如果RPC源端有大量未发送的数据超过了阈值,可设置如下参数: brpc_socket_max_unwritten_bytes:用于设置未发送的数据量的阈值,默认为1GB。
参数说明: family:需要查询的列所在的列族,例如info; qualifier:需要查询的列,例如name; compareOp:比较符,例如=、>等; comparator:需要查找的目标值,例如binary:Zhang San; filterIfMissing:如果某一行不存在该列
参数说明: family:需要查询的列所在的列族,例如info; qualifier:需要查询的列,例如name; compareOp:比较符,例如=、>等; comparator:需要查找的目标值,例如binary:Zhang San; filterIfMissing:如果某一行不存在该列
参数说明: family:需要查询的列所在的列族,例如info; qualifier:需要查询的列,例如name; compareOp:比较符,例如=、>等; comparator:需要查找的目标值,例如binary:Zhang San; filterIfMissing:如果某一行不存在该列
qualifier:需要查询的列; compareOp:比较符,如“=”、“>”等等; comparator:需要查找的目标值; filterIfMissing:如果某一行不存在该列,是否过滤,默认值为false; latestVersionOnly:是否仅查询最新版本的值,默认值为
qualifier:需要查询的列; compareOp:比较符,如“=”、“>”等; comparator:需要查找的目标值; filterIfMissing:如果某一行不存在该列,是否过滤,默认值为false; latestVersionOnly:是否仅查询最新版本的值,默认值为
客户端查询HBase出现SocketTimeoutException异常 问题 使用HBase客户端操作表数据的时候客户端出现类似如下异常: 2015-12-15 02:41:14,054 | WARN | [task-result-getter-2] | Lost task 2.0
用户可登录Manager,选择“系统 > 权限 > 域和互信”,查看“本端域”参数,即为当前系统域名。“spark2x/hadoop.<系统域名>”为用户名,用户的用户名所包含的系统域名所有字母为小写。