检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据仓库类型 产品类型概述 标准数仓(DWS 2.0):面向数据分析场景,为用户提供高性能、高扩展、高可靠、高安全、易运维的企业级数仓服务,支持2048节点、20PB级超大规模数据分析能力,适用于“库、仓、市、湖”一体化的融合分析业务。 标准数仓(DWS 3.0):采用存算分离云
gs_table_distribution('public','dbgen_version'); 查询结果如下: 显示该表在DN上所占磁盘空间确实存在数据倾斜现象,数据集中在dn_6005_6006上。 父主题: 系统视图
gs_table_distribution('public','dbgen_version'); 查询结果如下: 显示该表在DN上所占磁盘空间确实存在数据倾斜现象,数据集中在dn_6005_6006上。 父主题: 系统视图
使用Python第三方库PyGreSQL连接集群 用户在创建好数据仓库集群后使用PyGreSQL第三方库连接到集群,则可以使用Python访问GaussDB(DWS),并进行数据表的各类操作。 连接集群前的准备 GaussDB(DWS)集群已绑定弹性IP。 已获取GaussDB(
创建GaussDB(DWS)存算分离3.0集群 DWS 3.0采用存算分离云原生架构,极致性价比,支持冷热数据分析,存储、计算弹性伸缩,无限算力、无限容量,并按需、按量计价,适用OLAP分析场景。 本章节介绍如何在GaussDB(DWS)管理控制台创建一个DWS 3.0数据仓库集群。
GaussDB(DWS)是否有高效的删除表数据的方法? 有。删除大批量的日志数据时,使用delete语法需要花费更大的时间,此时可以通过TRUNCATE语法进行大批量删除操作,它的删除速度比delete快得多。 详情请参见TRUNCATE。 功能描述 清理表数据,TRUNCATE
GaussDB(DWS)集群状态异常操作 解除只读 当集群进入只读状态时,无法进行数据库写入相关操作,用户可以在管理控制台解除集群的只读状态。触发只读状态可能是由于磁盘使用率过高,因此需要对集群数据进行清理,详情请参见磁盘使用率高&集群只读处理方案章节。 解除只读支持1.7.2及以上版本。
处理结果集 设置结果集类型 不同类型的结果集有各自的应用场景,应用程序需要根据实际情况选择相应的结果集类型。在执行SQL语句过程中,都需要先创建相应的语句对象,而部分创建语句对象的方法提供了设置结果集类型的功能。具体的参数设置如表1所示。涉及的Connection的方法如下: 1
起内存分配不足。 max_stack_depth 参数说明:设置GaussDB(DWS)执行堆栈的最大安全深度。需要这个安全界限是因为在服务器里,并非所有程序都检查了堆栈深度,只是在可能递规的过程,比如表达式计算这样的过程里面才进行检查。 参数类型:SUSET 设置原则: 此参数
GDS导入/导出类问题 GDS导入/导出容易遇到字符集的问题,特别是不同类型的数据库或者不同编码类型的数据库进行迁移的过程中,往往会导致数据入不了库,严重阻塞数据迁移场景相关业务。 区域支持 区域支持指的是应用遵守文化偏好的问题,包括字母表、排序、数字格式等。区域是在使用init
基准生成的标准性能测试数据。 TPC-DS是数据库决策支持测试基准。通过使用TPC-DS的测试数据以及测试案例,用户可以模拟真实场景下大数据集的统计、报表生成、联机查询、数据挖掘等复杂场景,从而了解数据库应用的功能和性能。 当前TPC-DS样例数据仅支持在“北京一”区域导入,其他区域暂不支持。
基准生成的标准性能测试数据。 TPC-DS是数据库决策支持测试基准。通过使用TPC-DS的测试数据以及测试案例,用户可以模拟真实场景下大数据集的统计、报表生成、联机查询、数据挖掘等复杂场景,从而了解数据库应用的功能和性能。 当前TPC-DS样例数据仅支持在“北京一”区域导入,其他区域暂不支持。
基本概念 GaussDB(DWS)的管理概念 集群 表示由多个节点组成的服务器群组。GaussDB(DWS)以集群为单位进行组织,一个GaussDB(DWS)集群由多个在相同子网中的相同规格的节点组成,共同提供服务。 节点 每个GaussDB(DWS)集群部署节点取值范围为3~2
GAUSS-01411 -- GAUSS-01420 GAUSS-01411: "cross-database references are not implemented: '%s.%s.%s'" SQLSTATE: 0A000 错误原因:SET CONSTRAINT语句,在当
应用场景 数据仓库迁移 数据仓库是企业的重要数据分析系统,随着业务量的增长,自建数仓性能逐渐不能满足实际要求,同时扩展性差、成本高,也使扩容极为困难。GaussDB(DWS)作为云上企业级数据仓库,具备高性能、低成本、易扩展等特性,满足大数据时代企业数据仓库业务诉求。 图1 数据仓库迁移
exceeded" SQLSTATE: 54001 错误原因:栈的深度超限。超过了max_stack_depth_bytes(默认是100*1024)的值。 解决办法:请检查递归调用函数使用情况,有否出现递归深度太深情况。若有,考虑优化或者扩展max_stack_depth_bytes。
最新动态 本文介绍了数据仓库服务GaussDB(DWS)各特性版本的功能发布和对应的文档动态,新特性将在各个区域(Region)陆续发布,欢迎体验。 2021年7月 序号 功能名称 功能描述 阶段 相关文档 1 管理CN节点 支持CN个数由5调整为20,并支持在管理控制台进行增删CN操作。
约束与限制 目前仅支持单机集群。 目前仅支持按需计费模式。 操作步骤 登录GaussDB(DWS)控制台。 在左侧导航栏选择“数据 > 数据集成 > 实例管理”,进入实例管理页面。 单击页面右上角“购买GDS-Kafka实例”,进入购买页面配置集群参数。 表1 参数说明 参数名 参数解释
通过CDM将MySQL数据导入GaussDB(DWS)时出现字段超长,数据同步失败 问题现象 MySQL 5.x版本字段长度varchar(n),用CDM同步数据到GaussDB(DWS),同样设置长度为varchar(n) ,但是会出现字段超长,数据同步失败的问题。 原因分析 MySQL5
示例:应用端加工RoaringBitmap结果集并入库GaussDB(DWS) GaussDB(DWS) 自8.1.3版本后支持位图功能(RoaringBitmap),在使用JAVA语言基于GaussDB(DWS)进行二次开发时,可以使用CopyManager接口,实现小批量Ro