检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
python通过thrift访问cloudtable,多个任务并行缓慢 问题现象 访问CloudTable HBase数据表,多个任务并行缓慢。 分析原因 集群节点存在GC内存泄漏,需要对节点进行灰度重启。 另外分析问题是否存在负载过高的问题,联系相关工作人员处理。 解决办法 重启实例regionserver,此操作请联系维护人员操作。
达到自我保护的目的。请参见磁盘空间管理。 影响 太迟钝,会造成磁盘间数据量差异较大,影响并发性能。 太频繁,会产生大量垃圾文件,占用磁盘,需同步调整垃圾文件超时时间。 父主题: 通用类
number_of_open_read_files 读文件打开数 clickhouse实例上的读文件打开数。 Count 60 number_of_open_write_files 写文件打开数 clickhouse实例上的写文件打开数。 Count 60 total_file_opens 文件打开总数 clickhouse实例上的文件打开数。
重启节点过程中,节点不可用。 重启后节点请在业务低谷期进行重启,避免对高峰期业务造成影响。 节点重启时,磁盘扩容、节点扩容、规格变更按钮置灰,不可操作。 节点重启是进程重启,不是整个节点重启。 节点重启操作步骤 登录表格存储服务管理控制台。 单击管理控制台左上角的,选择区域。 单击集群,进入集群列表。
重启节点过程中,节点不可用。 重启后节点请在业务低谷期进行重启,避免对高峰期业务造成影响。 节点重启时,磁盘扩容、节点扩容、规格变更按钮置灰,不可操作。 节点重启是进程重启,不是整个节点重启。 节点重启操作步骤 登录表格存储服务管理控制台。 单击管理控制台左上角的,选择区域。 单击集群,进入集群列表。
的待导入文件就需要通过调整Broker load的导入参数来实现大文件的导入。 根据当前BE的个数和原始文件的大小修改单个BE的最大扫描量和最大并发数。 修改fe配置项。 max_broker_concurrency=BE个数。 当前导入任务单个BE处理的数据量=原始文件大小/m
重启节点过程中,节点不可用。 重启后节点请在业务低谷期进行重启,避免对高峰期业务造成影响。 节点重启时,磁盘扩容、节点扩容、规格变更按钮置灰,不可操作。 节点重启是进程重启,不是整个节点重启。 节点重启操作步骤 登录表格存储服务管理控制台。 单击管理控制台左上角的,选择区域。 单击集群,进入集群列表。
ase集群详细监控指标。具体操作请参见查看集群的监控信息 监控指标 表1 监控指标 指标名 指标说明 CPU使用率 CPU使用率。 内存使用率 内存使用率。 磁盘使用率 HBase节点数据盘使用率。 父主题: HBase监控集群
显示创建集群时所选择的安全组信息。 表3 FE节点配置 参数 参数说明 计算规格 请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。 说明: 支持的计算规格: 8U16G。 16U32G。 32U64G。 64U128G。 4U16G。
配额说明 表格存储服务用户默认的基础资源如下: 实例数 CPU数量 内存容量(GB) 磁盘数 磁盘容量(GB) 上述资源的配额查看及修改,请参见关于配额。
计费说明 表格存储服务器的计费项由集群规格费用组成。 HBase、Doris、ClickHouse计费项 表1 HBase/Doris/ClickHouse计费项 计费项 计费项说明 适用的计费模式 计费公式 计算规格 计费因子:vCPU和内存,不同规格的实例类型提供不同的计算和存储能力。
ouse集群详细监控指标。具体操作请参见查看集群监控信息 监控指标 表1 监控指标 指标名 指标说明 CPU使用率 CPU使用率。 内存使用率 内存使用率。 磁盘使用率 ClickHouse节点数据盘使用率。 父主题: ClickHouse监控集群
jvm_heap_size_bytes_max 最大堆内存 观测JVM内存使用情况。 ≥0 Byte 60s SYS.CloudTable jvm_heap_size_bytes_committed 已申请的堆内存 观测JVM内存使用情况。 ≥0 Byte 60s SYS.CloudTable
开启用户认证后,不允许开启Thrift Server。 开启Thrift Server后,用IP连接Thrift Server节点,如果Thrift Server进程故障会影响Thrift Server的业务。 父主题: HBase Thrift Server
如果在创建集群的时候未开启冷热分离特性,可在集群详情页面或者集群列表的操作列开启冷热分离。 注意使用Doris集群不要长时间处于高负载(高CPU、高内存、高磁盘使用率等)状态,否则影响冷热分离的速率。如果业务需要可进行集群扩容,请参见扩容集群。 父主题: Doris冷热分离应用
切换内核版本时,需要重新选择规格,避免创建集群出现问题。 图3 FE节点配置 表3 FE节点配置 参数 参数说明 计算规格 请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。 说明: 支持的计算规格: 8U16G。 16U32G。
控指标。具体操作请参见查看集群的监控信息 图2 监控指标 监控指标 表1 监控指标 指标名 指标说明 CPU使用率 CPU使用率。 内存使用率 内存使用率。 磁盘使用率 Doris节点数据盘使用率。 父主题: Doris监控集群
Doris集群规格变更 Doris集群目前不支持计算节点CPU、内存规格升、降配,因此需要对Doris集群增加纵向扩容功能。 规格变更只支持从小规格变更为大规格,如果要大规格更改为小规格,建议新建小规格集群,采用数据迁移进行切换。 一次只支持变更一种类型的节点规格(BE、FE),且变更完成后只生效所选类型的节点规格。
规格变更”,进入规格变更页面。 图1 规格变更图 规格变更操作也可以在集群详情页面单击“规格变更”,跳转规格变更页面。 图2 规格变更 选择变配节点。 按下拉框确定CPU、内存规格。 确定费用以及资源配额后,单击确定。 单击确定后,集群状态变更为“亚健康”,任务状态为“规格变更中”,当集群变更完毕
变更计费模式概述 在购买ClouTable集群后,如果发现当前计费模式无法满足业务需求,您可以变更集群计费模式后。支持变更计费模式如表1 表1 支持变更计费模式的CloudTable计费项 计费项 变更说明 相关文档 集群规格 变更节点规格的计费模式: 将CloudTable集群