检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
HStore表使用优秀实践 基本原理 在GaussDB(DWS)中,CU是列存表存储数据的最小单元。列存表每列默认存储60000行数据为一个CU,CU生成后数据固定不可更改。无论是向列存表中插入1条还是60000条数据,都只会生成一个CU,在多次插入少量数据时,由于不能有效利用列
jar,请替换驱动类名(将代码中的“org.postgresql”替换成“com.huawei.gauss200.jdbc”)与连接URL串前缀(将“jdbc:postgresql”替换为“jdbc:gaussdb”)。 //以下代码将获取数据库连接操作封装为一个接口,可通过给定用户名和密码来连接数据库。
性能总览 在9.1.0版本,我们实现了很多性能优化特性,提升整体开箱的SQL查询性能。以TPC-H、TPC-DS 1TB作为性能测试对比的基准,重点对比最新9.1.0版本与8.3.0版本的性能提升。集群规模为6节点,其中各节点的规格为16U 64G,累计96U 384G。从以下测试结果可以看到:
填写高级配置参数,单击“立即购买”,等待约15分钟,集群创建成功。 表3 高级配置 参数项 取值 标签 test01 主机名前缀 可不填写,用作集群中ECS机器或BMS机器主机名的前缀。 弹性伸缩 保持默认即可。 引导操作 保持默认即可,MRS 3.x版本暂时不支持该参数。 委托 保持默认即可。
remote log 'name':数据导入过程中的数据格式错误信息是否同时在GDS服务器上以文件方式保存。name为错误数据文件的文件名前缀。 关于容错性参数的更多信息请参考容错性参数。 使用gsql或Data Studio连接数据库后,根据前面步骤所收集和规划的信息参数,创建GDS外表。
填写高级配置参数如下表,单击“立即购买”,等待约15分钟,集群创建成功。 表4 高级配置 参数项 取值 标签 test01 主机名前缀 可不填写,用作集群中ECS机器或BMS机器主机名的前缀。 弹性伸缩 保持默认即可 引导操作 保持默认即可,MRS 3.x版本暂时不支持该参数。 委托 保持默认即可 数据盘加密
CREATE TABLE 功能描述 在当前数据库中创建一个新的空白表。 该表由命令执行者所有,但系统管理员在普通用户同名schema下创建的表,表的所有者为schema的同名用户(非系统管理员)。 注意事项 列存表支持的数据类型请参考列存表支持的数据类型。 创建列存和HDFS分区表的数量建议不超过1000个。
当HEADER取值为true时MAXROW需要大于1。该参数需要与FILEPREFIX同时指定。 FILEPREFIX 指定导出文件名的前缀。 取值范围:合法的字符串,且不能以/开始或结尾。 仅在COPY TO并且指定了有效SERVER参数时生效。该参数需要与MAXROW同时指定。
云容器引擎-成长地图 | 华为云 数据仓库服务 GaussDB(DWS) 数据仓库服务(Data Warehouse Service,简称DWS)是完全托管的企业级云上数据仓库服务,具备免运维、在线扩展、高效的多源数据加载能力,兼容PostgreSQL生态。助力企业经济高效地对海量数据进行在线分析,实现数据快速变现。
*”这种写法。一方面基于性能考虑,尽量减少查询输出列;另一方面避免增删字段对前端业务兼容性的影响。 【建议】在访问表对象时带上schema前缀,可以避免因schema切换导致访问到非预期的表。 【建议】超过3张表或视图进行关联(特别是full join)时,执行代价难以估算。建议使用WITH
PCK列越多,因在列存数据导入时需要对每一PCK列进行比较计算来划分CU,其过程将消耗越多的时间和资源,导入性能降低;而且在数据查询时,查询条件所涉及列的前缀需要是PCK列(如PCK列为a、b、c,则查询条件需要为a>? and b>? and c>?类似样式的组合),这样才能在CU过滤时达到很
TD compat_display_ref_table 设置视图中列的显示格式。 不设置该选项时默认带前缀,即tab.col的格式。 设置该选项时与原始定义一致,原始定义带前缀则显示,否则不显示。 SET behavior_compat_options='compat_display_ref_table';
超过64个字符的非空字符串。 在创建用户定义类型的时候,GaussDB(DWS)会自动创建一个与之关联的数组类型,其名字由该元素类型的名字前缀一个下划线组成。 示例 示例一:创建一种复合类型,建表并插入数据以及查询。 1 2 3 4 5 6 7 CREATE TYPE compfoo
过64个字符的非空字符串。 在创建用户定义类型的时候, GaussDB(DWS)会自动创建一个与之关联的数组类型,其名字由该元素类型的名字前缀一个下划线组成。 示例 示例一:创建一种复合类型,建表并插入数据以及查询。 1 2 3 4 5 6 7 CREATE TYPE compfoo
*”这种写法。一方面基于性能考虑,尽量减少查询输出列;另一方面避免增删字段对前端业务兼容性的影响。 【建议】在访问表对象时带上schema前缀,可以避免因schema切换导致访问到非预期的表。 【建议】超过8张表或视图进行关联(特别是full join)时,执行代价难以估算。建议使用WITH
CREATE MATERIALIZED VIEW 功能描述 创建一个新的物化视图。 注意事项 物化视图的基表可以是行存表、列存表、hstore表、分区表或者指定某个分区、外表、其他物化视图,不支持包含临时表(包括全局临时表、volatile临时表和普通临时表),支持冷热表(910
执行可选的数据操作:压缩、转换成UTF-8或者换行符的转换。 在数据前面增加一个随机字节组成的块,相当于使用了一个随机的初始值(IV)。 追加随机前缀和数据的SHA1哈希值到数据后面。 将所有内容使用会话密钥进行加密后放入数据包中。 支持的PGP加密函数: pgp_sym_encrypt()
快照参数配置 快照参数配置可以指定创建快照和快照恢复的参数信息,以便对快照功能进行优化调整。 该功能仅8.2.0及以上集群版本支持(对于8.2.0之前的集群版本,仅支持个别参数的配置)。 配置参数后该集群所有的快照、恢复都将以所配置的参数下发命令。 操作步骤 登录GaussDB(DWS)管理控制台。
CREATE TABLE 功能描述 在当前数据库中创建一个新的空白HStore表,该表由命令执行者所有。 实时数仓提供创建HStore表DDL语句。创建HStore表DDL需要指定enable_hstore为true,同时需要将orientation属性设置为column。 如需
当HEADER取值为true时MAXROW需要大于1。该参数需要与FILEPREFIX同时指定。 FILEPREFIX 指定导出文件名的前缀。 取值范围:合法的字符串,且不能以/开始或结尾。 仅在COPY TO并且指定了有效SERVER参数时生效。该参数需要与MAXROW同时指定。