-
使用catalog连接kerberos安全认证hive on obs - 表格存储服务 CloudTable
key,获取方式请参见对象存储服务的获取访问密钥(AK/SK)章节。 AWS_SECRET_KEY secret key,获取方式请参见对象存储服务的获取访问密钥(AK/SK)章节。 AWS_ENDPOINT obs地址,获取方式见请参见对象存储服务的获取终端节点章节。 AWS_REGION
-
准备开发和运行环境 - 表格存储服务 CloudTable
准备项 说明 操作系统 开发环境:Windows系统,支持Windows7以上版本。 运行环境:Linux系统。 如需在本地调测程序,运行环境需要和集群业务平面网络互通。 安装JDK 安装JDK,版本为1.8.0_272。 安装和配置IntelliJ IDEA 开发环境的基本配置,建议使用2019
-
INSERT INTO - 表格存储服务 CloudTable
SELECT ... 写入的列与SELECT的列的对应关系是使用位置来进行对应的,它们在SELECT表达式与INSERT中的名称可以是不同的。需要对它们进行对应的类型转换。 除了VALUES格式之外,其他格式中的数据都不允许出现诸如now(),1+2等表达式。VALUES格式允许您有
-
重启集群API入口 - 表格存储服务 CloudTable
缺省值:en-us。 表3 请求Body参数 参数 是否必选 参数类型 描述 restart 是 object 该请求参数内无其他内容,但是需要该参数作为重启集群入参,示例看下述所示。 响应参数 状态码: 200 表4 响应Body参数 参数 参数类型 描述 [数组元素] Array
-
返回结果 - 表格存储服务 CloudTable
对应请求消息头,响应同样也有消息头,如“Content-Type”。 对于获取用户Token接口,返回如图1所示的消息头,其中“x-subject-token”就是需要获取的用户Token。有了Token之后,您就可以使用Token认证调用其他API。 图1 获取用户Token响应消息头 响应消息体(可选)
-
创建索引 - 表格存储服务 CloudTable
add='idx2=>cf1' -Dindexspecs.covered.to.add='idx1=>cf1:[c3],[c4]' -Dindexspecs.coveredallcolumn.to.add='idx3=>true' -Dindexspecs.splitkeys.to.set='idx1=>[\x010
-
开发流程 - 表格存储服务 CloudTable
开发流程中各阶段的说明如图1和表1所示。 图1 应用程序开发流程 表1 应用开发的流程说明 阶段 说明 参考文档 了解基本概念 在开始开发应用前,需要了解HBase的基本概念,了解场景需求,设计表等。 HBase 准备开发环境 HBase应用程序当前推荐使用Java语言进行开发。可使用Eclipse工具。
-
冷热分离概述 - 表格存储服务 CloudTable
一般适用于以下需求场景: 数据存储周期长:面对历史数据的不断增加,存储成本也随之增加。 冷热数据访问频率及性能要求不同:热数据访问频率高且需要快速响应,而冷数据访问频率低且响应速度要求不高。 原理介绍 创建表:CloudTable Doris通过文件系统在本地数据目录创建目录。
-
查看ClickHouse集群的基本信息 - 表格存储服务 CloudTable
可进行单个删除和批量删除。 当用户与企业项目的关联关系被删除后,该用户将无法管理该企业项目,如需再次使用,需要重新给该用户关联企业项目。 数据库引擎 用于存储、处理和保护数据的核心服务。 通道状态 表示安全通道是否打开。 同时开启安全通道和非安全通道 如果安全通道开启,此按钮不显示,如果安全通道未开启,显示此按钮。
-
Stream Load - 表格存储服务 CloudTable
column_separator 用于指定导入文件中的列分隔符,默认为\t。如果是不可见字符,则需要加\x作为前缀,使用十六进制来表示分隔符。 如hive文件的分隔符\x01,需要指定为-H "column_separator:\x01"。 可以使用多个字符的组合作为列分隔符。
-
Doris集群回收站数据处理 - 表格存储服务 CloudTable
设置回收站时间 回收站原理:删除的数据不会直接从磁盘上删除,而是先放入回收站,等待超时时间满足后,再从磁盘上直接删除。 设置回收站时间需要考虑的因素。 回收站时间过长,会累积垃圾文件,占用磁盘空间。 回收站时间过长,调用admin clean trash;命令后,容易导致数据
-
查看Doris集群基本信息 - 表格存储服务 CloudTable
集群访问的地址,用户可以单击,将访问的链接地址复制到剪切板。 计费模式 显示集群的计费模式。 创建时间 显示集群创建的时间。 数据库引擎 用于存储、处理和保护数据的核心服务。 是否开启Broker进程 是否打开Broker进程,用于给客户做数据导入场景。 是否开启https “是”表示已经开启安全通道,可以下载证书。
-
Duplicate模型 - 表格存储服务 CloudTable
GATE KEY列(这里就是user_id 和 date),并且聚合后,才能得到语意正确的结果。当聚合列非常多时,count( * )查询需要扫描大量的数据。 因此,当业务上有频繁的count( * )查询时,我们建议用户通过增加一个值恒为1的,聚合类型为SUM的列来模拟coun
-
Doris MySQL命令简介 - 表格存储服务 CloudTable
"replication_allocation" = "tag.location.default: 1" ); 插入数据。 执行INSERT INTO命令往指定表插入数据,需要指定表名、列、插入的具体指。 INSERT INTO demo.example_tbl (user_id,date,city,age,sex
-
最佳实践 - 表格存储服务 CloudTable
量。可以利用这个功能方便的应对数据缩小或膨胀。 一个Partition的Bucket数量一旦指定,不可更改。所以在确定Bucket数量时,需要预先考虑集群扩容的情况。比如当前只有3台host,每台host有1块盘。如果Bucket的数量只设置为3或更小,那么后期即使再增加机器,也不能提高并发度。
-
查看HBase集群基本信息 - 表格存储服务 CloudTable
户与该企业项目的关联关系删除。 可进行单个删除和批量删除。 当用户与企业项目的关联关系被删除后,该用户将无法管理该企业项目,如需再次使用,需要重新给该用户关联企业项目。 ZK链接地址(内网) Zookeeper地址。 用户可以单击,将ZK链接地址复制到剪切板。 热存储已使用容量
-
错误码 - 表格存储服务 CloudTable
计算单元数量不满足要求。 计算单元数量至少为2个。 400 CloudTable.0127 NICs列表参数为空 NICs列表参数为空。 NICs列表需要包括net_id和safe_group_id两个参数。 400 CloudTable.0136 TSD单元数量不满足要求 TSD单元数量不满足要求。
-
查询集群配置 - 表格存储服务 CloudTable
配置值类型。 running_value String 集群当前运行的配置值。 unit String 单位。 reboot Boolean 是否需要重启生效。 value_range String 配置值取值范围。 description String 配置描述信息。 状态码: 400
-
访问ThriftServer操作表 - 表格存储服务 CloudTable
传入ThriftServer实例所在host和提供服务的port,根据认证凭据及配置文件新建Thrift客户端,访问ThriftServer,进行根据指定namespace获取tablename以及创建表、删除表的操作。 操作步骤 登录表格存储服务控制台。 在页面左上角选择区域。 单击“集群管理”,进入集群管理界面。
-
CREATE TABLE - 表格存储服务 CloudTable
ClickHouse集群名。 name1,name2 列名。 ENGINE = engine_name() 表引擎类型。 双副本版集群建表时,需要使用MergeTree系列引擎中支持数据复制的Replicated*引擎,否则副本之间不进行数据复制,导致数据查询结果不一致。使用该引擎建表时,参数填写方式如下。