检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Doris组件使用规范 本章节介绍Doris组件使用规范。 建表规范 【强制】创建表指定分桶buckets时,每个桶的数据大小为应保持在100M-3G之间,单分区中最大分桶数据不超过5000。 【强制】表数据超过5亿条以上必须设置分区分桶策略。 【强制】分桶的列不要设置太多,一般
集群状态 集群状态信息。 集群版本 集群的内核版本。 集群访问地址 集群访问的地址,用户可以单击,将访问的链接地址复制到剪切板。 计费模式 显示集群的计费模式。 创建时间 显示集群创建的时间。 数据库引擎 用于存储、处理和保护数据的核心服务。 是否开启Broker进程 是否打开Broker进程,用于给客户做数据导入场景。
进入只读模式阈值 当集群存储达到某一阈值后,如果继续向存储写入数据,存储会写满,可能会导致性能以及其他功能问题。因此需要给集群设置阈值,当达到设置的阈值后,集群进入只读模式,并发出告警提示用户及时处理集群状态。阀值默认值是85%,取值范围70到90之间。 是否为只读模式 “是”代
创建时间 集群创建的时间。 计费模式 集群的计费模式,有按需和转包周期。 操作 查看监控信息:单击“查看监控信息”,进入“云服务监控 > 表格存储服务”的监控图表页面。 删除:单击删除,删除一个集群。 重启:单击重启,集群重启。 转包周期:集群的计费模式转为包年/包月。 节点扩容:计算节点扩容。
strict_mode Stream Load导入可以开启strict mode模式。开启方式为在HEADER中声明strict_mode=true 。默认的strict mode为关闭。 strict mode模式的意思是:对于导入过程中的列类型转换进行严格过滤。严格过滤的策略如下: 对于列类型转换来说,如果strict
当用户与企业项目的关联关系被删除后,该用户将无法管理该企业项目,如需再次使用,需要重新给该用户关联企业项目。 创建时间 集群创建的时间。 计费模式 集群的计费模式。 链接地址(内网) 内网链接地址。 操作 删除:单击“更多 > 删除”,删除集群(按需集群)。 重启:单击“更多 > 重启”,集群重启。
连接使用的HTTPS端口,值为8443。 CLICKHOUSE_SECURITY_ENABLED false ClickHouse安全模式开关,普通模式集群时该参数填写为false。 user default 表1中已准备好的开发用户。 password - 开发用户对应的密码。 clusterName
表2列出了CloudTable常用操作与系统权限的授权关系,您可以参照该表选择合适的系统权限。 表2 CloudTable操作与系统策略关系 模式 操作 cloudtable Administrator 集群模式 创建集群 √ 重启集群 √ 扩容集群 √ 删除集群 √ 参数配置 √ 查看CloudTable服务集群列表、集群详细信息
当用户与企业项目的关联关系被删除后,该用户将无法管理该企业项目,如需再次使用,需要重新给该用户关联企业项目。 创建时间 集群创建的时间。 计费模式 集群的计费模式。 ZK链接地址(内网) Zookeeper地址。 操作 查看监控信息:单击“查看监控信息”,进入“云服务监控 > 表格存储服务”的监控图表页面。
每天写入100亿行数据,查询并发QPS上万,99分位的查询延时150ms。 即席查询(Ad-hoc Query):面向分析师的自助分析,查询模式不固定,要求较高的吞吐。Doris构建了增长分析平台(Growing Analytics,GA),利用用户行为数据对业务进行增长分析,平均
进行收集,导入到云数据仓库ClickHouse中,构建用户特征分析大宽表。利用云ClickHouse的优异查询性能,分析系统进行多维度、多模式分析时,可以在亚秒级内响应,快速分析出用户行为特征和规律,为精准营销和会员转化等业务提供有效支持。 企业经营分析。 在企业经营分析中,把规
地址(内网)”。 “IAM统一身份认证”:设置为否。 “IAM统一身份认证”:表格存储服务已经不使用IAM认证功能,所以填“否”。 “运行模式”:保留默认值即可。 图2 连接参数配置 单击“保存”。 在CDM集群中,在“表/文件迁移”页面,新建一个作业。 有关新建“表/文件迁移”
集群访问的地址端口: Http端口:8123。 TCP端口:9000。 Https端口:8443。 安全TCP端口:9440。 计费模式 显示集群的计费模式。 按需计费。 包年包月。 创建时间 显示集群创建的时间。 企业项目 企业项目管理帮助您将相关的资源(如具有相同使用用途的资源)
使用CloudTable服务时需要关注什么? 在CloudTable服务控制台,检查集群状态和任务状态,如果存在集群状态为“创建失败”或“亚健康”,请及时提交工单联系技术工程师解决;如果任务状态存在失败任务,请及时提交工单联系技术工程师解决。 在CloudTable服务控制台,单
手动续费 包年/包月CloudTable服务器从购买到被自动删除之前,您可以随时在控制台为云服务器续费,以延长云服务器的使用时间。 按需计费模式 如需充值,请参见以下指导完成充值: 登录管理控制台。 单击界面右上角的“费用中心 > 续费管理”。 在左侧导航树单击“总览”,在总览页面单击“资金管理
由于冷热数据都在同一张表中,因此用户所有的查询操作都只需在一张表内进行。在查询时,建议通过配置TimeRange来指定查询的时间范围,系统将会根据指定的时间范围决定查询模式,即仅查询热存储、仅查询冷存储或同时查询冷存储和热存储。如果查询时未限定时间范围,则会导致查询冷数据。在这种情况下,查询吞吐量会受到冷存储的限制。
Doris参数配置 操作场景 创建完Doris集群后,用户可以在表格存储服务控制台中多次修改集群Doris配置参数,对集群的性能进行调优。 修改集群静态参数需要重启集群,可能会导致业务的中断。 集群无运行中的任务时,才能修改参数。 CloudTable Doris集群重启过程中,不允许修改集群参数。
KEY。三种模型中数据都是按KEY进行排序。 Aggregate模型。 Aggregate模型可以通过预聚合,极大地降低聚合查询时所需扫描的数据量和查询的计算量,非常适合有固定模式的报表类查询场景。但是该模型对count( * ) 查询很不友好。同时因为固定了Value列上的聚合方式,在进行其他类型的聚合查询时,需要考虑语意正确性。
API、参数、示例以及调用方法。 API文档 API概述 如何调用API CloudTable集群管理接口V2 05 开发指南 主要介绍了在CloudTable集群模式下如何调用HBase、Doris、ClickHouse。 HBase应用开发 开发HBase应用 Doris应用开发 开发Doris应用 ClickHouse应用开发
获取项目ID 从控制台获取项目ID 在调用接口的时候,部分URL中需要填入项目编号(project_id),所以需要获取到项目编号。项目编号获取步骤如下: 登录管理控制台。 单击用户名,在下拉列表中单击“我的凭证”。 在“API凭证”页面的项目列表中查看项目ID。 多项目时,展开