检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
典型场景说明 通过典型场景,我们可以快速学习和掌握Doris的开发过程,并且对冷热分离的应用场景有所了解。 场景说明 假定用户开发一个网站系统,test_tbl用于实时用户访问网站的记录,记录数据如下表: 表1 原始数据 timestamp type error_code error_msg
典型场景说明 通过典型场景,我们可以快速学习和掌握ClickHouse冷热分离的开发过程,并且对关键的接口函数有所了解。 场景说明 假定用户开发一个网站系统,test_tbl用于实时用户访问网站的记录,记录数据如下表: 表1 原始数据 timestamp type error_code
HBase安全通道加密 您可以通过创建集群开启加密通道,实现数据加密传输。此章节介绍如何开通HBase安全通道。 打开安全通道操作步骤 登录表格存储服务管理控制台。 单击管理控制台左上角的,选择区域。 单击右上角的购买集群按钮,进入“购买集群”页面。 完成其他配置后,查看安全通道加密按钮是否开启,默认开启。
登录CloudTable管理控制台。 单击集群管理,显示当前集群列表。 在集群列表中,选定集群的操作列,单击“更多 > 水平扩容”,进入扩容页面。 水平扩容操作也可以在集群详情页面单击“水平扩容”,跳转水平扩容页面。 按“+”增加扩容节点。 确定费用以及资源配额后,单击确定。 ClickHouse水平扩容状态
需要操作的集群,进入用户管理页面。 单击更多<修改密码,弹出修改密码页面。 修改密码后,单击确定。 不支持查看已有账户的密码,如果忘记密码可以通过重置密码功能设置新密码。 分配角色 登录表格存储服务管理控制台。 单击管理控制台左上角的,选择区域。 单击左侧集群管理,显示当前集群列
对于历史数据,如果数据量比较小我们可以创建历史分区(比如年分区,月分区),将所有历史数据放到对应分区里。 创建历史分区方式:FROM ("2000-01-01") TO ("2022-01-01") INTERVAL 1 YEAR。 【建议】1000w-2亿以内数据为了方便可以不设置分区,直接用
及时提交工单联系技术工程师解决。 在CloudTable服务控制台,单击“监控信息”进入云监控控制台,查看对应集群各项指标的监控信息,用户可以对关注的监控指标设定告警规则,如果存在告警,请及时提交工单联系技术工程师解决。如果集群CPU或内存使用率长时间超出阈值,那么用户需要扩容计算单元,均衡负载。
出现该问题的可能原因为: 网络访问不通。 由于CloudTable的链接地址是内网地址,不是公网地址,不能在公网环境直接连接CloudTable。您可以在客户端主机上ping一下CloudTable的ZK链接地址,如果无法ping通,说明网络不通。 处理方法 您需要申请一台弹性云服务器作为
表引擎在ClickHouse中的作用十分关键,不同的表引擎决定了: 数据存储和读取的位置。 支持哪些查询方式。 能否并发式访问数据。 能否使用索引。 是否可以执行多线程请求。 数据复制使用的参数。 其中MergeTree和Distributed是ClickHouse表引擎中最重要,也是最常使用的两个引擎,本文将重点进行介绍。
准备Windows运行环境 操作场景 CloudTable应用开发的运行环境可以部署在Windows环境下。按照如下操作完成运行环境准备。 操作步骤 确认CloudTable集群已经安装,并正常运行。 准备Windows弹性云服务器。 具体操作请参见准备弹性云服务器章节。 请在W
se集群客户端会进行身份验证,用户通过验证后才可对HBase集群进行操作。 背景 目前HBase客户端请求不进行身份验证,任何云服务用户都可以向HBase集群发送请求并执行操作,集群的安全无法保证。所以HBase开发用户认证功能,对发起请求的用户进行身份认证并授权,仅允许通过身份
按需转包年/包月 如果您需要长期使用当前按需购买的云数据库,可以将该云数据库转为包年/包月计费模式,以节省开支。按需计费变更为包年/包月会生成新的订单,用户支付订单后,包年/包月资源将立即生效。 假设用户于2023/04/18 15:29:16成功购买了一个按需计费的CloudT
典型场景说明 通过典型场景,我们可以快速学习和掌握HBase的开发过程,并且对关键的接口函数有所了解。 场景说明 假定用户开发一个应用程序,用于管理企业中的使用A业务的用户信息,如表1所示,A业务操作流程如下: 创建用户信息表。 在用户信息中新增用户的学历、职称等信息。 根据用户编号查询用户姓名和地址。
使用CopyTable工具导入数据 CopyTable是HBase提供的一个实用工具,可以将部分或全部表复制到同一个集群或另一个集群中。目标表必须预先存在。在CloudTable客户端工具中已经包含了CopyTable工具,用户部署客户端工具后,即可使用CopyTable工具导入数据到CloudTable集群。
Doris集群管理简介 CloudTable集群模式提供了基于Doris的分布式、可伸缩、全托管的实时数据仓库,它提供了亚秒级返回海量数据查询结果的能力,可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。 Doris集群管理下,用户申请专属集群,按需使用,专属集群是完全物理隔离且不受其他业务影响,方便用户管理。
s memtable写入磁盘的耗时 累计值通过斜率可以观测写入延迟 ≥0 us 60s SYS.CloudTable doris_be_memtable_flush_total memtable写入磁盘的个数 累计值通过斜率可以计算写入文件的频率 ≥0 60s SYS.CloudTable
较的时候。 【规则】不允许使用字符类型存放数值类型的数据,尤其是数值字段进行运算或者比较的时候。 【建议】不建议表使用Nullable列,可以考虑使用字符串“NA”。 Nullable类型的列在做查询条件判断时,会进一步做判空等处理,防止造成额外的计算开销。根据现网的历史经验,N
Cold(冷数据):不允许更新或更新频率比较低,访问频率比较低,对访问的响应时间要求不高的数据。 用户可以定义冷热管理表,将符合规则的冷数据切换至OBS上进行存储,可以按照分区自动进行冷热数据的判断和迁移。 原理介绍 创建表:创建含有冷热分离策略的数据表,其中存储策略值必须为hot_to_cold。
到ClickHouse集群中,后续可以在ClickHouse中进行数据分析。以下操作通过ClickHouse集群和RDS服务下的MySQL数据库实例对接进行举例说明。 前提条件 已提前准备好对接的RDS数据库实例及数据库用户名、密码。详细操作可以参考创建和连接RDS数据库实例。
Doris包周期计费操作 如果您需长期使用当前集群,为节省开支,可以将按需购买的集群转为包年/包月计费模式(也称为包周期计费模式)。按需转包年/包月的具体操作,请参见本章节内容。 按需转包年包月 前提条件:集群计费模式是“按需计费”。 按需转包年/包月操作步骤 登录CloudTable管理控制台。