检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在CDM集群中,在“表/文件迁移”页面,新建一个作业。 有关新建“表/文件迁移”作业的详细操作,请参见《云数据迁移用户指南》的新建表/文件迁移作业章节。 在新建“表/文件迁移”类型的作业时,如果待迁移的源端的表/文件在目的端CloudTable集群中不存在相应的HBase表,在作业中为目的端设置表名和字段
数据导入 使用DLI Flink作业实时同步MRS Kafka数据至CloudTable HBase集群 使用DLI Flink作业实时同步MRS Kafka数据至CloudTable ClickHouse集群
【规则】不要使用select *,只查询需要的字段,减少机器负载,提升查询性能。 OLAP分析场景,一张大宽表通常能有几百甚至上千列,选择其中少数的几列做维度列、指标列计算。在这种场景下,ClickHouse的数据也是按照列存储。如果使用select *,会加重系统的压力。 【规则】通过limit限制查
为什么要选择CloudTable服务? CloudTable服务是基于公有云实现的全托管服务,为用户提供专属集群,即开即用,适合业务吞吐量大,时延要求低的用户。选择CloudTable服务,可以免部署、免运维,按需申请,减低成本,能够获取专业指导。 父主题: 通用类
热数据提高时效数据的查询速度和响应能力,冷数据降低存储成本。我们还可以根据实际业务需求进行灵活的配置和调整,以满足不同场景的要求。冷热数据主要从数据访问频率、更新频率进行划分。 Hot(热数据):访问、更新频率较高,未来被调用的概率较高的数据,对访问的响应时间要求很高的数据。 C
num 100 否 int 未更改 - (0,300) 100 该参数限制的例行导入作业的总数,包括NEED_SCHEDULED, RUNNING, PAUSE这些状态。超过后,不能提交新的作业。 use_new_tablet_scheduler true 是 boolean 未更改
集群模式 创建集群 √ 重启集群 √ 扩容集群 √ 删除集群 √ 参数配置 √ 查看CloudTable服务集群列表、集群详细信息 √ 查看监控信息 √ 查看审计日志 √ 相关链接 IAM产品介绍 创建用户并授权使用CloudTable
存储规格:超高IO,容量200GB/节点。 节点数量:3个(集群默认配置为高可用,使用2个master节点,额外免费赠送1个master,用于集群监控)。 Core节点 计算规格:4U16G。 存储规格:高IO,容量400GB/节点。 节点数量:3个。 计费构成分析 用了一段时间后,用户
查看HBase集群基本信息 集群创建完成后,可对集群进行监控和管理。在CloudTable管理控制台单击集群管理,在集群列表中找到所要查看的集群并单击集群名称,进入集群基本信息页面,用户可查看集群信息和集群的网络配置。 集群基本信息参数说明如表1和表2所示。 表1 集群信息 参数
及认证机制章节。 图1 原理架构图 表1 参数说明 参数 说明 Application Client 应用客户端,通常是需要提交任务(或者作业)的应用程序。 Application Server 应用服务端,通常是应用客户端需要访问的应用程序。 Kerberos 提供安全认证的服务。
什么是CloudTable 表格存储服务(CloudTable)是基于HBase、Doris、ClickHouse、StarRocks提供的全托管数据存储和分析服务。CloudTable提供GB~PB级数据存储和分析能力,用于在线查询、数据仓库、数据集市、实时分析等场景。可被广泛
异步导入方式即用户创建导入任务后,Doris直接返回创建成功。创建成功不代表数据已经导入。导入任务会被异步执行,用户在创建成功后,需要通过轮询的方式发送命令查看导入作业的状态。如果创建失败,则可以根据失败信息,判断是否需要再次创建。 无论是异步还是同步的导入类型,都不应该在Doris返回导入失败或导入创建
如果OLAP表没有更新类型的字段,将表的数据分桶模式设置为RANDOM,则可以避免严重的数据倾斜(数据在导入表对应的分区的时候,单次导入作业每个batch的数据将随机选择一个tablet进行写入)。 当表的分桶模式被设置为RANDOM时,因为没有分桶列,无法根据分桶列的值仅对几
ClickHouse集群管理列表简介 登录表格存储服务,在左侧导航树单击集群管理,集群列表中会显示所有的集群,集群数量比较多时,可以采用翻页显示,您可以查看任何状态下的集群。 图1 集群列表图 表1 集群管理列表参数 参数 参数说明 集群名称 集群的名称,创建集群时设置。 集群状态
Doris用户指南 Doris集群管理 Doris监控集群
创建用户并授权使用CloudTable 如果您需要对您所拥有的云服务进行精细的权限管理,您可以使用统一身份认证服务(Identity and Access Management,简称IAM)。通过IAM,您可以: 根据企业的业务组织,在您的云账号中,给企业中不同职能部门的员工创建
使用限制 使用CloudTable前,您需要认真阅读并了解以下使用限制。 CloudTable集群必须创建在VPC子网内。 建议使用支持的浏览器登录表格存储服务。 Chrome:36.0及更高版本 Mozilla FireFox:35.0及更高版本 Internet Explorer:9
创建Doris集群 通过表格存储服务可以集中管理集群,如果需要使用CloudTable服务,首要操作就是创建集群,本章节为您介绍如何在表格存储服务管理控制台创建一个新的集群。 Doris集群目前支持的计费模式有按需付费、包年包月付费。创建集群页面默认采用按需付费方式,即计算单元按