检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
应用背景 CloudTable作为大数据存储服务,提供高效的kv随机查询能力。在此基础上,CloudTable服务引入自研的分布式多维标签索引能力,存储格式与计算基于位图进行。用户可以根据自身业务需求来定义HBase表中的哪些字段需要构建标签索引,用户写入数据时将自动生成标签数据
导入功能。 导入的原子性保证 Doris的每一个导入任务,不论是使用Broker Load进行批量导入,还是使用INSERT语句进行单条导入,都是一个完整的事务操作。导入事务可以保证一批次内的数据原子生效,不会出现部分数据写入的情况。 同时,每个导入任务都会有一个Label。这个
Distributed表引擎本身不存储任何数据,而是作为数据分片的透明代理,能够自动路由数据到集群中的各个节点,分布式表需要和其他本地数据表一起协同工作。分布式表会将接收到的读写任务分发到各个本地表,而实际上数据的存储在各个节点的本地表中。 图2 Distributed Distributed表引擎创建模板:
抽样查询 功能介绍 在普通查询的基础上设置setSampling(),查询时从索引表中随机选择一个分片执行查询任务。 可以参考以下样例代码。 样例代码 public void testSamplingQuery() { LOG.info("Entering testSamplingQuery
ssing 当前正在运行的stream load任务数 仅包含curl命令发送的任务 ≥0 60s SYS.CloudTable doris_be_streaming_load_duration_ms 所有stream load任务执行时间的耗时 累计值 ≥0 60s SYS.CloudTable
自身就是一个完备的分布式数据库管理系统,用户无需安装任何第三方管控组件即可运行起Doris集群。同时,任一模块都可以支持横向拓展,集群最高可以拓展到数百个节点,支持存储超过10PB的超大规模数据。 稳定可靠:支持数据多副本存储,集群具备自愈功能,自身的分布式管理框架可以自动管理
路由添加请联系技术人员。 公网访问CloudTable集群 ClickHouse/Doris 绑定ELB,通过ELB绑定的EIP,为集群提供公网访问的能力,同时提供负载均衡能力。更多信息请参见什么是ELB章节。 无法访问对端集群。 连通CloudTable集群和线下数据中心 ClickHouse/Doris
当集群状态为“冻结”时,您需要通过续费保证账户余额不为0才能解冻,详细操作请参见如何续费?。 说明: 冻结期间集群不可用且关闭集群中所有云主机,解冻后集群自动恢复为“服务中”状态。如果用户没有续费,冻结期限到期后集群会被删除。 任务状态 表4 任务状态说明 状态 说明 删除中 表示集群正在删除中。
当集群状态为“冻结”时,您需要通过续费保证账户余额不为0才能解冻,详细操作请参见如何续费?。 说明: 冻结期间集群不可用且关闭集群中所有云主机,解冻后集群自动恢复为“服务中”状态。如果用户没有续费,冻结期限到期后集群会被删除。 任务状态 表4 任务状态说明 状态 说明 删除中 表示集群正在删除中。
为什么冻结后重新购买折扣套餐无法解冻? 冻结时,购买折扣套餐是无法解冻的。您需要通过续费保证账户余额不为0才能解冻,详细操作请参见CloudTable集群如何续费?。如果您原先购买了折扣套餐,冻结后,也只能先通过续费进行解冻,然后再重新购买折扣套餐。 折扣套餐只适用于HBase组件的1
当集群状态为“冻结”时,您需要通过续费保证账户余额不为0才能解冻,详细操作请参见如何续费?。 说明: 冻结期间集群不可用且关闭集群中所有云主机,解冻后集群自动恢复为“服务中”状态。如果用户没有续费,冻结期限到期后集群会被删除。 任务状态 表4 任务状态说明 状态 说明 删除中 表示集群正在删除中。
启动1中创建的作业,单击操作列的“启动 > 立即启动”。作业状态为“运行中”表示作业运行成功。 步骤四:结果验证 待MRS Flink任务和DLI任务运行成功后,回到ClickHouse集群运行命令的窗口,进入集群客户端。 查看数据库。 show databases; 使用数据库。
>=10G=100G/10。 修改后,所有的BE会并发的处理导入任务,每个BE处理原始文件的一部分。 上述两个FE中的配置均为系统配置,也就是说其修改是作用于所有的Broker load的任务的。 在创建导入的时候自定义当前导入任务的timeout时间。 这时候不推荐用户将导入最大超时时
ClickHouse节点扩容状态 表1 节点扩容任务状态说明 任务状态 说明 节点扩容中 表示集群正在扩容中。 节点扩容失败 表示集群扩容失败。 查看扩容详情 单击确定后,集群任务状态变更为“节点扩容中”,当集群扩容完毕后,集群状态为“服务中”。 单击确定后,集群任务状态变更为“节点扩容中”,如果
s系统会根据签名验证用户身份和导入权限。 导入任务参数 label 导入任务的标识。每个导入任务,都有一个在单database内部唯一的label。label是用户在导入命令中自定义的名称。通过这个label,用户可以查看对应导入任务的执行情况。 label的另一个作用,是防止用
在程序代码完成开发后,您可以上传Jar包至准备好的Linux运行环境中运行。该环境需要和clickhouse集群处于同一vpc和安全组,以保证网络连通。 前提条件 Linux环境已安装JDK,版本号需要和IntelliJ IDEA导出Jar包使用的JDK版本一致,并设置好Java环境变量。
选择变配规格,单击,选择规格。 确定费用以及资源配额后,单击确定。 单击确定后,集群状态变更为“亚健康”,任务状态为“规格变更中”,当集群变更完毕后,集群状态更新为“服务中”,任务状态清空。 规格变更状态 表1 规格变更任务状态说明 状态 说明 规格变更中 表示集群正在变更中。 服务中 当集群变更成功并正常提供服务时,其集群状态为服务中。
按下拉框确定CPU、内存规格。 确定费用以及资源配额后,单击确定。 单击确定后,集群状态变更为“亚健康”,任务状态为“规格变更中”,当集群变更完毕后,集群状态更新为“服务中”,任务状态清空。 规格变更状态 表1 规格变更任务状态说明 状态 说明 规格变更中 表示集群正在变更中。 服务中 当集群变更成功并正常提供服务时,其集群状态为服务中。
磁盘扩容状态 表1 磁盘扩容任务状态说明 状态 说明 磁盘扩容中(任务状态) 表示集群正在扩容中。 服务中(集群状态) 当集群扩容成功并正常提供服务时,其集群状态为服务中。 磁盘扩容失败(任务状态) 表示扩容失败。 查看磁盘扩容信息 单击确定后,集群任务状态变更为“磁盘扩容中”,当
确定费用以及资源配额后,单击确定。 磁盘扩容状态 表1 磁盘扩容任务状态说明 状态 说明 磁盘扩容中(任务状态) 表示集群正在扩容中。 服务中(集群状态) 当集群扩容成功并正常提供服务时,其集群状态为服务中。 磁盘扩容失败(任务状态) 表示扩容失败。 父主题: ClickHouse集群扩容