检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
操作流程 基本流程如下: 步骤一:创建CloudTable ClickHouse集群 步骤二:MRS集群中创建Flink作业制造数据 步骤三:创建DLI Flink任务进行数据同步 步骤四:结果验证 准备工作 已注册华为账号并开通华为云,具体请参见注册华为账号并开通华为云,且在使用
使用新创建的用户登录控制台,切换至授权区域,验证权限: 在“服务列表”中选择表格存储服务,进入CloudTable主界面,单击右上角“购买集群”,尝试创建表格存储服务集群,如果可以创建(假设当前权限仅包含cloudtable Administrator),表示“cloudtable
用户可以定义冷热管理表,将符合规则的冷数据切换至OBS上进行存储,可以按照分区自动进行冷热数据的判断和迁移。 原理介绍 创建表:创建含有冷热分离策略的数据表,其中存储策略值必须为hot_to_cold。 写数据:新数据会按照信息导入到对应的数据表中。
访问CloudTable时,需要先切换至授权区域。 如表1所示,包括了CloudTable的所有系统角色。由于云各服务之间存在业务交互关系,表格存储服务的角色依赖其他服务的角色实现功能。因此给用户授予表格存储服务的角色时,需要同时授予依赖的角色,表格存储服务的权限才能生效。
GROWING cluster 删除 DELETING cluster 关闭安全认证 switchHBaseAuthentication cluster 开启或关闭HBase thrift server switchThriftServer cluster 包周期集群扩容、规格变更
CREATE DATABASE mysql_db ENGINE = MySQL('RDS服务MySQL数据库实例IP地址:MySQL数据库实例端口', 'MySQL数据库名', 'MySQL数据库用户名', 'MySQL数据库用户名密码'); 切换到新建的数据库mysql_db,并查询表数据
数据迁移的时候数据首先会保存在临时表中,执行的时候用迁移的数据表替换原表,该过程中可能读取到错误的数据,切换时间为秒级。 数据迁移过程中可能由于集群问题导致此过程暂停,根据报错修复集群继续执行任务。 数据迁移的时候,源节点和重分布节点必须存在相同表,这样才可以进行数据迁移。
扩容:扩容集群中的计算规格(规格变更)、存储规格(磁盘扩容)、节点数量(节点扩容)。具体操作,请参见ClickHouse集群扩容。 开启冷热分离:单击开启冷热分离,开启冷热分离功能。 删除:单击删除,删除一个集群。 重启:单击重启,集群重启。
计费构成分析 用了一段时间后,用户发现云服务器当前规格无法满足业务需要,于2023/03/18 15:30:00对集群扩容,扩容规格如下: 表1 变更计费模式 计费模式 计算规则 付费周期 费用计算 按需计费(节点扩容前) CU费用:CU单价 x 节点数 平均每小时的费用 Master
TINYINT - 用户性别 last_visit_date DATETIME REPLACE 用户最后一次访问时间 cost BIGINT SUM 用户总消费 max_dwell_time INT MAX 用户最大停留时间 min_dwell_time INT MIN 用户最小停留时间 转换成建表语句
vim hive-site.xml 常见问题 当出现以下报错的时候,需要修改MRS集群的manager页面切换HDFS的主备。
vim hive-site.xml 常见问题 当出现以下报错的时候,需要修改MRS集群的manager页面切换HDFS的主备。
ClickHouse基于分布式表查询会转换成所有分片的本地表操作,再汇总结果。实际使用中,join和global join的执行逻辑差别很大,建议使用global join做分布式表查询。 【规则】合理使用数据表的分区字段和索引字段。
BE节点本地SSD盘不支持节点扩容、磁盘扩容与规格变更。 FE节点不支持本地SSD盘。 购买FE小规格后,不支持水平和磁盘扩容,支持规格扩容。 集群规格扩容后,不再赠送,按照扩容后的规格收费。