检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
方案建议: 高资源消耗型SQL的主要特征: 大量UNION ALL 大量AGG(COUNT DISTINCT、MAX等) 大量表JOIN 大量STREAM算子(计划维度) 针对上述SQL需进行压力测试和并发管控,如果超出资源能力,则必须进行业务优化后再重新评估上线。
举例说明: 打开一个连接Session A,使用普通用户u1连接GaussDB(DWS)数据库,在u1的同名SCHEMA u1下创建测试表u1.test,并插入数据。
SQLSTATE: XX000 错误原因:测试代码,不需要暴露给用户。 解决办法:请联系技术支持工程师提供技术支持。
1 CREATE USER u2 with SYSADMIN NODE GROUP "lc2" password "Password@123"; 以u1登录数据库,创建表t1和t2,并插入测试数据。
默认值:off replication_test 参数说明:此参数用于数据复制的内部功能测试。 参数类型:USERSET 取值范围:布尔型 on表示启用功能测试。 off表示关闭功能测试。
图6 ADB信息 单击“测试”,测试连通后,单击“保存”。 配置CDM的目标端连接。 参见同样方法,选择“作业管理 > 连接管理 > 新建连接”。 选择“数据仓库服务(DWS)”,单击“下一步”。 同理,填写DWS的数据库信息。
MS Access里的过滤表单生成的查询使用expr = NULL来测试空值。打开这个选项,可以使用该接口来访问数据库。 参数类型:USERSET 取值范围:布尔型 on表示控制表达式expr = NULL(或NULL = expr)当做expr IS NULL处理。
1 CREATE USER u1 WITH INDEPENDENT IDENTIFIED BY 'password'; 切换到u1用户,创建测试表test,并插入数据。
因此join-condition实质上是一个不等式,这种不等值的join操作必须走nestloop,对应执行计划如下: 优化后 测试发现由于两表结果集过大,导致nestloop耗时过长,超过一小时未返回结果,因此性能优化的关键是消除nestloop,让join走更高效的hashjoin
新建数据库连接时,可在对应界面单击“测试”按钮,验证连接参数是否配置OK。配置好需要搬迁的表和表字段对应的SQL后,可以单击“预览”按钮查看需要搬迁的预览数据。 添加“DWS表输出”节点,并配置好数据库连接、目标表、目标表字段与数据源字段对应关系及其它参数。
因此join-condition实质上是一个不等式,这种不等值的join操作必须走nestloop,对应执行计划如下: 优化后 测试发现由于两表结果集过大,导致nestloop耗时过长,超过一小时未返回结果,因此性能优化的关键是消除nestloop,让join走更高效的hashjoin
表1 存算一体1:8云盘规格 规格名称 CPU架构 vCPU 内存(GB) 单节点存储容量 默认存储 步长(GB) 建议存储 DN数量 使用场景 dwsx2.xlarge.m7 X86 4 32 20GB ~ 2000GB 100 10 800 1 DWS的入门规格,一般用于测试、
测试数据源配置 单击Test进行测试。 如果显示如下,则表明配置正确,连接成功。 如果显示ERROR信息,则表明配置错误。请检查上述配置是否正确。
可通过几个表测试,监控资源利用率,根据结果提高或减少并发量。常用资源监控命令有:内存和CPU监控top命令,IO监控命令iostat,网络监控命令sar等。相关案例请参见多线程导入。 在资源许可的情况下,多台GDS服务器并发导入会很大程度上提高数据导入效率。
2 ALTER TEXT SEARCH CONFIGURATION ts_conf DROP MAPPING FOR email, url, url_path, sfloat, float; 使用文本检索调测函数ts_debug()对所创建的词典配置ts_conf进行测试
建议依据此原则进行不同压缩下的测试和对比,以选择符合自身业务情况的最优压缩比。压缩比通过COMPRESSION参数指定,其支持的取值如下: 列存表为:YES/NO/LOW/MIDDLE/HIGH,默认值为LOW。 行存表为:YES/NO,默认值为NO。
建议依据此原则进行不同压缩下的测试和对比,以选择符合自身业务情况的最优压缩比。压缩比通过COMPRESSION参数指定,其支持的取值如下: 列存表为:YES/NO/LOW/MIDDLE/HIGH,默认值为LOW。 行存表为:YES/NO,默认值为NO。
以下性能测试的观测项和结果有助于了解Data Studio的各方面性能: 可配置的推荐最大内存(当前版本) 1.4 GB 性能(数据库中存在大小为150 KB的表和视图,各包含3列,使用最大内存配置): > 刷新对象浏览器中的命名空间所需时间 15s > 初始加载和扩展对象浏览器中所有表
函数lower_inf(anyrange)和upper_inf(anyrange)分别测试一个范围的无限上下界。
2 ALTER TEXT SEARCH CONFIGURATION ts_conf DROP MAPPING FOR email, url, url_path, sfloat, float; 使用文本检索调测函数ts_debug()对所创建的词典配置ts_conf进行测试