检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用CopyTable工具导入数据 CopyTable是HBase提供的一个实用工具,可以将部分或全部表复制到同一个集群或另一个集群中。目标表必须预先存在。在CloudTable客户端工具中已经包含了CopyTable工具,用户部署客户端工具后,即可使用CopyTable工具导入数据到CloudTable集群。
Doris集群管理简介 CloudTable集群模式提供了基于Doris的分布式、可伸缩、全托管的实时数据仓库,它提供了亚秒级返回海量数据查询结果的能力,可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。 Doris集群管理下,用户申请专属集群,按需使用,专属集群是完全物理隔离且不受其他业务影响,方便用户管理。
s memtable写入磁盘的耗时 累计值通过斜率可以观测写入延迟 ≥0 us 60s SYS.CloudTable doris_be_memtable_flush_total memtable写入磁盘的个数 累计值通过斜率可以计算写入文件的频率 ≥0 60s SYS.CloudTable
修改用户密码等功能。 admin、root和default用户是ClickHouse集群中默认的用户,不能删除。 只有“用户管理”中的用户可以修改密码,root和默认用户的密码不可修改。 不支持在集群的单节点上创建用户和角色。 给用户A授予表格B的操作权限,当用户A删除数据表B时
连通同区域CloudTable集群与跨VPC对端集群 ClickHouse/Doris VPC对等连接:对等连接用于连通同一个区域内的VPC,您可以在相同账户下或者不同账户下的VPC之间创建对等连接。更多信息请参见对等连接概述章节。 CloudTable集群访问对端集群,需要为集群添加路由。
消息日志类数据存储和查询 应用场景: 消息数据、报表数据、推荐类数据、风控类数据、日志数据、订单数据等结构化、半结构化的KeyValue数据均可以存储和查询。 优势: 海量存储 支持离线、在线海量KeyValue数据存储,存储容量可扩展。 高性能读写 亿级写入吞吐量、ms级查询,用于在线应用和报表展现。
应用背景 CloudTable HBase支持冷热数据分离特性。通过该特性,您可以将冷热数据分别存储在不同类型的存储介质中,以降低存储成本。 在海量大数据场景下,表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低,同时这部分历史数据体量非常大,比如订单数据或者监控数据
表引擎在ClickHouse中的作用十分关键,不同的表引擎决定了: 数据存储和读取的位置。 支持哪些查询方式。 能否并发式访问数据。 能否使用索引。 是否可以执行多线程请求。 数据复制使用的参数。 其中MergeTree和Distributed是ClickHouse表引擎中最重要,也是最常使用的两个引擎,本文将重点进行介绍。
Cold(冷数据):不允许更新或更新频率比较低,访问频率比较低,对访问的响应时间要求不高的数据。 用户可以定义冷热管理表,将符合规则的冷数据切换至OBS上进行存储,可以按照分区自动进行冷热数据的判断和迁移。 原理介绍 创建表:创建含有冷热分离策略的数据表,其中存储策略值必须为hot_to_cold。
3:00尝试一次,直至云服务器到期或者续费成功。 开通自动续费后,还可以手动续费该服务集群。手动续费后,自动续费仍然有效,在新的到期时间前的第7天开始扣款。 自动续费的到期前7日自动扣款属于系统默认配置,您也可以根据需要修改此扣款日,如到期前6日、到期前5日等等。 更多关于自动续费的规则介绍请参见自动续费规则说明。
cloudtable:表的名称 row1:主键 cf:a:自定义的列 value1:插入的值 扫描记录。 执行“scan”命令扫描表,扫描时需要指定表的名称,即可以全表扫描,也可以指定范围扫描。 hbase(main):001:0> scan 'cloudtable' ROW
细说明请参见宽限期保留期。 避免和处理欠费 及时清理不再使用资源、设置费用预警可以有效避免欠费。 欠费后需要及时充值,详细操作请参见账户充值。 如果集群不再使用,您可以将他们删除,以免继续扣费。 您可以在“费用中心 > 总览”页面设置“可用额度预警”功能,当可用额度、通用代金券和
ClickHouse按需集群转包周期集群 如果您需长期使用当前集群,为节省开支,可以将按需购买的集群转为包年/包月计费模式(也称为包周期计费模式)。按需转包年/包月的具体操作,请参见本章节内容。 按需转包年包月 前提条件:集群计费模式是“按需计费”。 按需转包年/包月操作步骤 登录CloudTable管理控制台。
手动续费 包年/包月CloudTable服务器从购买到被自动删除之前,您可以随时在控制台为云服务器续费,以延长云服务器的使用时间。 按需计费模式 如需充值,请参见以下指导完成充值: 登录管理控制台。 单击界面右上角的“费用中心 > 续费管理”。 在左侧导航树单击“总览”,在总览页面单击“资金管理
使用HBase Shell访问集群 用户在弹性云服务器里可以通过手动安装客户端或一键部署客户端的方法,使用HBase Shell访问集群。如果集群开启了安全通道,连接集群的方法请参考HBase安全集群连接步骤。 一键部署客户端 准备Linux弹性云服务器。 使用一键部署客户端工具
使用MySQL客户端访问集群 用户在弹性云服务器里可以通过手动安装客户端的方法,使用MySQL访问集群。 手动安装客户端 准备Linux弹性云服务器,具体操作请见准备弹性云服务章节。 安装客户端,连接集群。 使用SSH登录工具,通过弹性IP远程登录到Linux弹性云服务器。 具体
磁盘扩容过程中,集群业务可能存在抖动。 前提条件 当集群状态处于“服务中”,且没有任何任务操作(如:节点扩容、规格变更、修改参数等)时,可以执行扩容操作。需要注意的是: 扩充目标实例的存储容量,单位:GB。 FE节点的最大扩充后的磁盘容量是2000G。 BE节点的最大扩充后的磁盘容量是10000G。
当所有的Core节点磁盘占用90%时,集群异常且读写不可用。 当集群状态处于“服务中”,且没有任何任务操作(如:节点扩容、规格变更等)时,可以执行扩容操作。 磁盘扩容过程中,集群业务可能存在抖动。 Core节点存储规格为“普通IO”时,不支持磁盘扩容。 磁盘扩容操作步骤 登录CloudTable管理控制台。
用异步接入,也可以考虑使用Broker load。 数据量。 这里仅讨论单个BE的情况,如果用户集群有多个BE则下面标题中的数据量应该乘以BE个数来计算。比如:如果用户有3个BE,则3G以下(包含)则应该乘以3,也就是9G以下(包含)。 3G以下(包含):用户可以直接提交Broker
除。已经到期的包年/包月云服务器不能发起退订,未到期的包年/包月云服务器可以退订。 违规冻结:违规冻结的云服务器允许续费、释放或删除;已经到期的包年/包月云服务器不能发起退订,未到期的包年/包月云服务器可以退订。 公安冻结:已被公安冻结的云服务器允许续费,不允许释放或删除。被公安