检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
通过典型场景,我们可以快速学习和掌握ClickHouse冷热分离的开发过程,并且对关键的接口函数有所了解。 场景说明 假定用户开发一个网站系统,test_tbl用于实时用户访问网站的记录,记录数据如下表: 表1 原始数据 timestamp type error_code error_msg op_id op_time
装方法请参考使用HBase Shell访问集群 把SequenceFile文件目录上传到CloudTable的客户端所在服务器,假设存放目录为“/tmp/sequencefile”。 Import工具需要在客户端主机的操作系统的shell界面中执行。在客户端机器上进入HBase目
安全组用来实现安全组内和安全组间弹性云服务器的访问控制,加强弹性云服务器的安全保护。用户可以在安全组中定义各种访问规则,这些规则可以限定弹性云服务器的哪些端口或者协议可以访问,这些访问规则可以作用在进出虚拟机的网络访问上。当弹性云服务器加入该安全组后,即受到这些访问规则的保护。不属于该安全组的弹
使用CopyTable工具导入数据 准备Linux弹性云服务器作为客户端主机,并在客户端主机上部署CloudTable客户端工具。 具体操作请参见使用HBase Shell访问集群。 在部署客户端工具时,ZK链接地址请配置为源表所在的CloudTable集群的“ZK链接地址(内网)”。 (可选)如果要将表复制到另
执行扩容操作。 磁盘扩容操作步骤 登录CloudTable管理控制台。 单击集群管理,显示当前集群列表。 选择操作集群,单击操作列的“磁盘扩容”,进入扩容页面。 图1 磁盘扩容页面 磁盘操作也可以在集群详情页面单击“磁盘扩容”,跳转磁盘扩容页面。 图2 磁盘扩容 选择变配节点。 按“+”确定扩容磁盘后的磁盘容量。
按需计费模式 如需充值,请参见以下指导完成充值: 登录管理控制台。 单击界面右上角的“费用中心 > 续费管理”。 在左侧导航树单击“总览”,在总览页面单击“资金管理 > 充值”对账户进行充值。具体详情请参见费用中心账户充值章节。 费用中心续费 登录CloudTable管理控制台。 单击右上角的“费用
您可以将冷热数据分别存储在不同类型的存储介质中,以降低存储成本。 在海量大数据场景下,表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低,同时这部分历史数据体量非常大,比如订单数据或者监控数据,如果降低这部分数据的存储成本将会极大的节省企业的成本。 父主题: 开发HBase冷热分离应用
集群开启冷热分离高级特性,冷数据的存储容量。 是否开启安全通道 如果界面显示“否”,表示未开启安全通道;如果界面显示“是”,表示开启安全通道。 是否开启Thrift Server 如果界面显示“否”,表示未开启Thrift Server;如果界面显示“是”,表示开启Thrift Server,并且显示Thrift
查询效率数倍于传统数据仓库。 ClickHouse集群管理功能 集群创建:在CloudTable集群管理界面完成集群的创建。 集群查看:在CloudTable集群管理界面可以查看集群详情。 重启集群:因长时间不重启导致系统运行缓慢等情况下,用户需要重启集群。重启操作将有可能会导
load是单次导入中唯一的一种异步导入的方式,所以如果用户在导入大文件中,需要使用异步接入,也可以考虑使用Broker load。 数据量。 这里仅讨论单个BE的情况,如果用户集群有多个BE则下面标题中的数据量应该乘以BE个数来计算。比如:如果用户有3个BE,则3G以下(包含)则应该乘以3,也就是9G以下(包含)。
安全组用来实现安全组内和安全组间弹性云服务器的访问控制,加强弹性云服务器的安全保护。用户可以在安全组中定义各种访问规则,这些规则可以限定弹性云服务器的哪些端口或者协议可以访问,这些访问规则可以作用在进出虚拟机的网络访问上。当弹性云服务器加入该安全组后,即受到这些访问规则的保护。不属于该安全组的弹
在集群列表中,找到所需要集群,在对应的“操作”列中,单击“更多<查看监控信息”,系统将跳转到该集群的“云服务监控”页面。 待查看监控信息的集群,其状态必须为“服务中”。 图1 监控页面 单击“创建告警规则”,进入创建告警规则页面进行添加。 配置告警规则的“名称”和“描述”。 图2 名称配置 监控范围 图3 监控对象
所示。 图1 样例代码工程目录结构 Maven配置 样例工程中已经包含了hbase的客户端jar包,也可以替换成开源的HBase jar包访问表格存储服务,支持1.X.X版本以上的开源HBase API。如果需要在应用中引入表格存储服务的HBase jar包,可以在Maven中配置如下依赖。
在集群列表中,找到所需要集群,在对应的“操作”列中,单击“查看监控信息”,系统将跳转到该集群的“云服务监控”页面。 待查看监控信息的集群,其状态必须为“服务中”。 图1 监控页面 单击“创建告警规则”,进入创建告警规则页面进行添加。 配置告警规则的“名称”和“描述”。 图2 名称配置 监控范围 图3 监控对象
在集群列表中,找到所需要集群,在对应的“操作”列中,单击“更多 > 查看监控信息”,系统将跳转到该集群的“云服务监控”页面。 待查看监控信息的集群,其状态必须为“服务中”。 图1 监控页面 单击“创建告警规则”,进入创建告警规则页面进行添加。 配置告警规则的“名称”和“描述”。 图2 名称配置 监控范围 图3 监控对象
CloudTable服务是华为云提供的一项分布式、可扩展的KeyValue数据存储服务。CloudTable提供Web官网服务界面,CloudTable HBase集群管理的具体功能如下: 创建集群:在CloudTable服务界面完成集群的创建。可以选择计算存储分离架构和计算资源动态调整,尽可能为用户降低成本。 管理集群:对创建的集群进行管理。
单击集群管理,显示当前集群列表。 在集群列表中,选定集群的操作列,选择“更多 > 节点扩容”,进入扩容页面。 节点扩容操作也可以在集群详情页面单击“节点扩容”,跳转节点扩容页面。 选择变配节点为FE/BE。 按“+”增加扩容节点。 确定费用以及资源配额后,单击确定。 扩容状态 表1
应用。 集群管理功能 集群创建:在CloudTable集群管理界面完成集群的创建。支持用户创建Doris集群时选择Frontends\Backends的计算规格、存储规格。 集群查看:在CloudTable集群管理界面可以查看集群详情。 集群管理:对创建的集群进行管理。 集群监控
通过批量离线计算对用户访问日志中的用户行为进行关联,生成用户行为路径大宽表同步到ClickHouse,基于ClickHoue构建交互式访客来源探索分析可视化系统。 BI报表。 利用ClickHouse构建实时交互查询报表,实时分析订单、收入、用户数等核心业务指标。 用户分群统计。 构
单击左侧集群管理,显示当前集群列表。 选择需要操作的集群,单击“集群名称 > 用户管理”进入用户管理页面。 单击左上角的新建用户按钮,新建用户。 图1 新建用户 表1 参数说明 参数 说明 用户名 新建用户的名字。 IP地址 指定访问用户的IP网段或者具体IP地址。 密码 新建用户的密码。 说明: 设置密码规则: