Doris冷热分离应用-华为云

表格存储服务 CLOUDTABLE-使用Doris冷热分离:开启冷热分离步骤

开启冷热分离步骤登录表格存储服务管理控制台。控制台左上角，选择区域。单击左侧“集群管理”，进入集群管理界面。单击集群管理界面右上角的“购买集群”。进入创建集群界面，在集群购买页面选择Doris数据库引擎并勾选是否开启冷热分离按钮，创建后的集群就开启了冷热分离特性。创建集群可以参考创建Doris集群。如果在创建集群的时候未开启冷热分离特性，可在集群详情页面或者集群列表的操作列开启冷热分离。注意使用Doris集群不要长时间处于高负载（高CPU、高内存、高磁盘使用率等）状态，否则影响冷热分离的速率。如果业务需要可进行集群扩容，请参见扩容集群。

表格存储服务 CLOUDTABLE Doris冷热分离应用

表格存储服务 CloudTable-典型场景说明:场景说明

场景说明假定用户开发一个网站系统，test_tbl用于实时用户访问网站的记录，记录数据如下表：表1 原始数据 timestamp type error_code error_msg op_id op_time 2024-03-26 10:36:00 1 404 Resource Not Found 998756 2024-03-26 11:36:00 2024-03-26 10:35:00 1 404 Resource Not Found 998756 2024-03-26 11:35:00 2024-03-26 10:33:00 1 404 Resource Not Found 998756 2024-03-26 11:33:00 2024-03-27 09:10:00 1 200 ok 998756 2024-03-27 10:10:00 2024-03-25 11:08:00 1 404 Resource Not Found 998756 2024-03-25 12:08:00 2024-03-12 22:35:00 1 404 Resource Not Found 998756 2024-03-12 23:35:00 2024-03-12 20:32:00 1 404 Resource Not Found 998756 2024-03-12 21:32:00 2024-03-21 14:39:00 1 404 Resource Not Found 998756 2024-03-21 15:39:00 2024-03-20 19:35:00 1 404 Resource Not Found 998756 2024-03-20 20:35:00

表格存储服务 CloudTable 开发Doris冷热分离应用

表格存储服务 CloudTable-Doris冷热分离命令简介

Doris冷热分离命令简介此章节主要介绍CloudTable Doris冷热分离的使用命令。Doris集群基本命令使用请参见Doris MySQL命令简介。创建数据迁移策略(STORAGE POLICY) CREATE STORAGE POLICY testPolicyPROPERTIES("storage_resource" = "hot_to_cold","cooldown_ttl" = "1d"); 参数说明： storage_resource：指定策略使用的storage resource名称，且值指定为hot_to_cold。 cooldown_ttl：热数据持续时间。从数据分片生成时开始计算，经过指定时间后转为冷数据。支持的格式： 1d：1天、 1h：1小时、 50000：50000秒、0：0秒，表示数据立即转为冷数据。注意：cooldown_ttl的值不得低于6h。 cooldown_datetime：热数据转为冷数据时间，不能与cooldown_ttl同时存在，如：2023-06-08 00:00:00。创建含数据迁移策略的Doris Table 创建数据库test_db。 CREATE DATABASE IF NOT EXISTS test_db; 创建test_tbl1。 CREATE TABLE IF NOT EXISTS test_db.test_tbl1( `timestamp` DATETIME NOT NULL COMMENT "日志时间", `type` INT NOT NULL COMMENT "日志类型", `error_code` INT COMMENT "错误码", `error_msg` VARCHAR(1024) COMMENT "错误详细信息", `op_id` BIGINT COMMENT "负责人id", `op_time` DATETIME COMMENT "处理时间")DISTRIBUTED BY HASH(`type`) BUCKETS 10PROPERTIES ("storage_policy" = "testPolicy","replication_num" = "3"); storage_policy：存储策略是使用冷热分离功能的入口，用户在建表或使用Doris过程中，给表或分区关联上Storage policy，即可以使用冷热分离功能。已存在的数据表关联迁移策略Storage policy。创建数据表test_tbl2。 CREATE TABLE IF NOT EXISTS test_db.test_tbl2( `timestamp` DATETIME NOT NULL COMMENT "日志时间", `type` INT NOT NULL COMMENT "日志类型", `error_code` INT COMMENT "错误码", `error_msg` VARCHAR(1024) COMMENT "错误详细信息", `op_id` BIGINT COMMENT "负责人id", `op_time` DATETIME COMMENT "处理时间")DISTRIBUTED BY HASH(`type`) BUCKETS 10PROPERTIES ("replication_num" = "3"); 数据表关联/修改迁移策略Storage policy。 ALTER TABLE test_db.test_tbl2 set ("storage_policy" = "testPolicy"); 向含数据迁移策略的数据表插入数据。 insert into test_db.test_tbl1 values ('2024-03-26 10:35:00', 1, 404, 'Resource Not Found', 998756, '2024-03-26 10:36:00'); 删除数据迁移策略(STORAGE POLICY) DROP STORAGE POLICY testPolicy; 删除数据迁移策略前，请检查关联该策略的所有表是否都已经删除，否则删除数据迁移策略会失败。删除含数据迁移策略的数据表后，为了保证数据的安全，冷数据在obs桶最多保留时间25小时，且数据保留期间会计费。父主题： Doris冷热分离应用

表格存储服务 CloudTable Doris冷热分离应用

云服务器内容精选

Doris冷热分离应用

7*24

备案

专业服务

退订

建议反馈

售前咨询热线