检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
访问Windows弹性云服务器,建议使用MSTSC远程桌面连接的方式登录。 具体登录操作步骤请参见《弹性云服务器用户指南》中的登录Windows弹性云服务器。
首次使用CloudTable 如果您是首次使用CloudTable的用户,建议您学习并了解如下信息: 基础知识了解 通过CloudTable产品功能章节的内容,了解CloudTable相关的基础知识,包含CloudTable各组件的基本原理和场景介绍,以及CloudTable服务的特有概念和功能的详细介绍
原理介绍 CloudTable HBase支持对同一张表的数据进行冷热分离存储。用户在表上配置数据冷热时间分界点后,HBase会依赖用户写入数据的时间戳(毫秒)和时间分界点来判断数据的冷热。数据开始存储在热存储上,随着时间的推移慢慢往冷存储上迁移。
本文为您介绍Broker Load导入的基本原理、基本操作、系统配置以及最佳实践。 适用场景 源数据在Broker可以访问的存储系统中,如HDFS、OBS。 数据量在几十到百GB级别。
原理介绍 创建表:CloudTable Doris通过文件系统在本地数据目录创建目录。 写数据:调用文件系统相关功能,生成文件到本地数据目录下。 合并数据:定期读取数据文件rowset,判断数据时间戳和时间线。如果当前时间减去写入时间小于TTL设置的值,则文件不移动。
原理结构图 Kerberos原理架构图如下图所示,详细介绍请参见MRS服务的安全认证原理以及认证机制章节。 图1 原理架构图 表1 参数说明 参数 说明 Application Client 应用客户端,通常是需要提交任务(或者作业)的应用程序。
原理介绍 创建表:创建含有冷热分离策略的数据表,其中存储策略值必须为hot_to_cold。 写数据:新数据会按照信息导入到对应的数据表中。
连接访问类 如何访问CloudTable集群? 能直接通过ssh访问CloudTable的计算节点吗? 配置了ZK地址后无法连接上HBase? 为什么连接HBase报错:Will not attempt to authenticate using SASL (unknown error
设置回收站时间 回收站原理:删除的数据不会直接从磁盘上删除,而是先放入回收站,等待超时时间满足后,再从磁盘上直接删除。 设置回收站时间需要考虑的因素。 回收站时间过长,会累积垃圾文件,占用磁盘空间。
HBase的架构和详细原理介绍,请参见:https://hbase.apache.org/book.html 当前CloudTable HBase暂无安全认证机制,如果需使用认证鉴权机制的HBase服务,建议使用MapReduce服务。
续费 续费概述 手动续费 自动续费
计费样例 HBase计费样例 Doris计费样例 ClickHouse计费样例
基本原理 下图展示了Stream load的主要流程,省略了一些导入细节。 ^ + | | | | 1A.
建表 Doris数据表和数据模型 数据分区和分桶 数据分布 父主题: Doris应用开发指导
准备开发环境 开发环境简介 准备运行环境 下载样例工程 配置并导入工程 父主题: HBase应用开发指导
样例代码说明 配置参数 创建Configuration 创建Connection 创建表 删除表 修改表 插入数据 删除数据 使用Get读取数据 使用Scan读取数据 使用过滤器Filter 父主题: 开发HBase应用
数据导入 Doris集群导入数据频繁报错E-235
ClickHouse应用开发指导 ClickHouse组件使用规范 ClickHouse表引擎概述 SQL语法参考 数据迁移同步 开发程序 调测程序 开发ClickHouse冷热分离应用
批量数据导入 Broker Load Stream Load 父主题: 数据导入
通用类 CloudTable集群能够提供什么服务? 为什么要选择CloudTable服务? 创建CloudTable HBase集群要准备什么? 使用CloudTable服务时需要关注什么? CloudTable HBase集群支持哪些压缩算法? 能停止CloudTable服务吗?