检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
开发Doris冷热分离应用 应用背景 典型场景说明 开发思路 样例代码 父主题: Doris应用开发指导
开发ClickHouse冷热分离应用 应用背景 典型场景说明 开发思路 样例代码 父主题: ClickHouse应用开发指导
准备开发环境 开发环境简介 准备运行环境 下载样例工程 配置并导入工程 父主题: HBase应用开发指导
设置告警规则 通过设置CloudTable的告警规则,用户可以自定义监控目标和通知策略,及时了解CloudTable运行状态,从而起到预警作用。 设置CloudTable的告警规则包括设置告警规则名称、监控对象、监控指标、告警阈值、监控周期和是否发送通知等参数。本节介绍了设置CloudTable规则的具体方法。
设置告警规则 通过设置CloudTable ClickHouse的告警规则,用户可以自定义监控目标和通知策略,及时了解ClickHouse运行状态,从而起到预警作用。设ClickHouse的告警规则包括设置告警规则名称、监控对象、监控指标、告警阈值、监控周期和是否发送通知等参数。本节介绍了设置告警规则的具体方法。
JDBC通过ssl方式连接doris(验证证书) 在应用层进行代码重试和负载均衡时,代码重试需要应用自己多个配置doris前端节点地址。比如发现一个连接异常退出,就自动在其他连接上进行重试。 前提条件:集群必须开启HTTPS。 下载证书请在集群详情页面下载。 在已安装mysql客
设置告警规则 通过设置 CloudTable Doris的告警规则,用户可以自定义监控目标和通知策略,及时了解Doris运行状态,从而起到预警作用。设置Doris的告警规则包括设置告警规则名称、监控对象、监控指标、告警阈值、监控周期和是否发送通知等参数。本节介绍了设置告警规则的具体方法。
在建表时,每个分区的Bucket数量统一指定。但是在动态增加分区时(ADD PARTITION),可以单独指定新分区的Bucket数量。可以利用这个功能方便的应对数据缩小或膨胀。 一个Partition的Bucket数量一旦指定,不可更改。所以在确定Bucket数量时,需要预先考虑集群扩容
curl --location-trusted -u user:passwd -H "two_phase_commit:true" -T test.txt http://fe_host:http_port/api/{db}/{table}/_stream_load { "TxnId":
Server,集群详情页面不显示此字段。 数据库引擎 HBase。 进入只读模式阈值 当集群存储达到某一阈值后,如果继续向存储写入数据,存储会写满,可能会导致性能以及其他功能问题。因此需要给集群设置阈值,当达到设置的阈值后,集群进入只读模式,并发出告警提示用户及时处理集群状态。阀值默认值是85%,取值范围70到90之间。
支持的关键操作审计日志 CloudTable使用云审计服务,可以记录与CloudTable服务相关的操作事件,便于日后的查询、审计和回溯。 CloudTable的以下关键操作事件将记录审计日志,详细内容如表1所示。 表1 云审计服务支持的CloudTable操作事件列表 操作名称
使用限制 使用CloudTable前,您需要认真阅读并了解以下使用限制。 CloudTable集群必须创建在VPC子网内。 建议使用支持的浏览器登录表格存储服务。 Chrome:36.0及更高版本 Mozilla FireFox:35.0及更高版本 Internet Explorer:9
dynamic_partition_enable true 否 boolean 未更改 - [true,false] true 是否开启Doris的动态分区功能。默认为false,即关闭。该参数只影响动态分区表的分区操作,不影响普通表。 query_detail_history_storage_life_time_in_days
Doris集群支持的监控指标 功能说明 监控是保持CloudTable服务可靠性、可用性和性能的重要部分,通过监控,用户可以观察CloudTable服务器的运行状态。本章节定义了表格存储服务上报云监控服务的监控指标的命名空间、监控指标列表和维度定义。 命名空间 SYS.CloudTable/Service
'mapred/hadoop.hadoop.com@HADOOP.COM' ); 创建后查询: select * from hive_catalog.DB.test_table; 元数据缓存设置 创建Catalog时可以采用参数file.meta.cache.ttl-second来设置Hive分区文
【强制】in中条件超过2000后,必须修改为子查询。 【强制】禁止使用REST API(Statement Execution Action)执行大量SQL查询,该接口仅仅用于集群维护。 【建议】一次insert into select数据超过1亿条后,建议拆分为多个insert into select语
单Region热点阈值,单位为每秒请求数。 hbase.hotspot.enable false -- [true,false] false 是否开启热点自愈功能,true为开启,false为关闭。开启后如有出现访问热点,会自动处理热点。 hbase.tries.cache.enabled false
ClickHouse集群支持的监控指标 功能说明 监控是保持CloudTable服务可靠性、可用性和性能的重要部分,通过监控,用户可以观察CloudTable服务器的运行状态。本章节定义了表格存储服务上报云监控服务的监控指标的命名空间、监控指标列表和维度定义。 命名空间 SYS.CloudTable
COLD_BOUNDARY, null); admin.modifyTable(tableName, descriptor); 为已经存在的表设置冷热分离功能,或者修改冷热分离分界线。 COLD_BOUNDARY设置冷热分离时间分界点,单位为秒, 示例表示1天之前的数据归档为冷数据。 HTableDescriptor
数据模型 Doris的数据模型主要分为3类: Aggregate模型。 Unique模型。 Duplicate。 Aggregate模型 以实际的例子来说明什么是聚合模型,以及如何正确的使用聚合模型。 示例1:导入数据聚合 假设业务有以下模式: 表1 参数说明 ColumnName