检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Hudi(发音Hoodie)表示Hadoop Upserts Deletes and Incrementals。用来管理Hadoop大数据体系下存储在DFS上大型分析数据集。 Hudi不是单纯的数据格式,而是一套数据访问方法(类似GaussDB(DWS)存储的access层),在Apache Hudi 0
句的特点是2~3张表left join,然后通过SELECT查询结果,执行计划如下: 原因分析 优化器在选择执行计划时,对结果集评估较小,导致执行计划走了NestLoop,性能下降。 分析过程 排查当前的I/O、内存、CPU使用情况,没有发现资源占用高的情况。 查看慢SQL的线程等待状态。
not open directory %s: %m. 解决方案:打开目录失败的原因可能包括目录不可用、权限不正确或目录损坏。请根据错误提示分析原因,如果目录不存在,请创建目录。如果权限不正确,请修改权限。如果目录损坏,请恢复文件系统或磁盘。 level: ERROR GS_154110704
执行语句过程中报错:无权限操作 问题现象 执行语句后提示 1 ERROR: permission denied for xxx 原因分析 该用户无对应的权限,无法对表或schema进行操作或访问。 处理方法 使用GRANT语法对表/schema进行赋权,示例: 假设当前有两个
查询容灾恢复进度详情 功能介绍 该接口用于查询容灾进度详情信息操作(本接口指标值仅供参考,实际值需要结合业务运行情况分析)。 调用方法 请参见如何调用API。 URI GET /v1/{project_id}/disaster-recovery/{disaster_recovery_id}/show-progress
格式层次清晰,计划包含了plan node id,性能分析简单直接。 summary:是在pretty的基础上增加了对打印信息的分析。 run:在summary的基础上,将统计的信息输出到csv格式的文件中,以便于进一步分析。 默认值:pretty join_num_distinct
跳过此步骤),可在快照列表中查看,确认无误后需手动删除快照。 经典变更规格过程中,集群只读会影响智能运维中相关运维任务的功能使用。建议在经典变更规格前,将智能运维任务暂停,或错开智能运维与经典变更规格的时间窗。 前提条件 请确定需要调整的集群处于“可用”、"只读"或“非均衡”任意一种状态。
实时交互分析 针对即时的分析需求,分析人员可实时从大数据平台上获取信息。 弹性伸缩 增加节点,即可扩展系统的数据存储能力和查询分析的性能,可支持PB级数据的存储和计算。 增强型ETL和实时BI分析 数据仓库在整个BI系统中起到了支柱的角色,更是海量数据收集、存储、分析的核心。为
要支持ORC文件格式。用户利用HIVE将数据导出存储为ORC文件格式,使用GaussDB(DWS)通过只读外表对ORC文件内的数据进行查询分析,因此,需要在ORC文件格式支持的数据类型与GaussDB(DWS)自身支持数据类型间进行匹配,匹配状况如表1所示。同理,GaussDB(
policy预置角色的用户具有创建脱敏策略的权限。 仅支持在普通表和非EXTERNAL SCHEMA的外表(OBS、HDFS、GDS、协调分析外表)创建数据脱敏策略,不支持为系统表、EXTERNAL SCHEMA的外表、临时表、UNLOGGED表以及视图和函数对象创建脱敏策略。
Service,简称LTS)实现。LTS用于收集来自主机和云服务的日志数据,通过海量日志数据的分析与处理,可以将云服务和应用程序的可用性和性能最大化,为您提供实时、高效、安全的日志处理能力,帮助您快速高效地进行实时决策分析、设备运维管理、用户业务趋势分析等。 当前GaussDB(DWS)的CN节点、DN节点、操作
TPC-H由国际事务处理性能委员会(Transaction Processing Performance Council)制定发布,用于评测数据库的分析查询能力。TPC-H查询包含8张数据表和22条复杂SQL查询,大多数查询包含多表Join、子查询和Group By等。 包含Q1~Q22共
IN (0,1,2) GROUP BY STTIME ) ) ; 执行计划如图1所示。 图1 增加JOIN列非空条件(一) 优化后 分析执行计划图1可知,在顺序扫描阶段耗时较多。 多表JOIN中,由于表PS.SDR_WEB_BSCRNC_1DAY的JOIN列“BSCRNC_ID”存在大量空值,JOIN性能差。
GaussDB(DWS)子查询表达式 子查询允许在一个查询中嵌套另一个查询,从而实现更复杂的数据查询和分析。 子查询表达式 EXISTS/NOT EXISTS 首先执行子查询,然后根据子查询的结果是否满足条件来决定是否继续执行主查询。如果子查询至少返回一行,则EXISTS结果就为“真”。如果子查询没有返回任何行,
is not enough.”。 原因分析 用户数据库的comm_max_datanode参数为默认值1024,在正常批量业务运行时查到DN之间stream数量大约为600~700,当批量任务运行时如果有临时查询,就会超过上限,导致上述报错。 分析过程 GUC参数comm_max_s
多AZ集群节点数量必须满足3的倍数。 多AZ集群只支持单节点DN数量<=2的规格。 存储空间 对于SSD云盘,如果您想提高存储空间扩容上限,请联系客服申请。 SSD本地盘存储空间范围与所选数据仓库规格有关。 SSD云盘:高性价比的云硬盘,适合中等性能诉求的企业应用。 SSD本地盘:SSD本地盘不支持磁盘扩容。
IN (0,1,2) GROUP BY STTIME ) ) ; 执行计划如图1所示。 图1 增加JOIN列非空条件(一) 优化后 分析执行计划图1可知,在顺序扫描阶段耗时较多。 多表JOIN中,由于表PS.SDR_WEB_BSCRNC_1DAY的JOIN列“BSCRNC_ID”存在大量空值,JOIN性能差。
GaussDB(DWS)子查询表达式 子查询允许在一个查询中嵌套另一个查询,从而实现更复杂的数据查询和分析。 子查询表达式 EXISTS/NOT EXISTS 首先执行子查询,然后根据子查询的结果是否满足条件来决定是否继续执行主查询。如果子查询至少返回一行,则EXISTS结果就为“真”。如果子查询没有返回任何行,
TPC-H由国际事务处理性能委员会(Transaction Processing Performance Council)制定发布,用于评测数据库的分析查询能力。TPC-H查询包含8张数据表和22条复杂SQL查询,大多数查询包含多表Join、子查询和Group By等。 TPC-DS TP
username/password,login denied. 问题分析:用户名或密码配置错误。 处理方法:检查用户名密码是否为数据库用户名和密码,将其修改为正确的数据库用户名和密码。 No suitable driver found for XXXX 问题分析:通过JDBC建连时URL格式错误。 处理方法:将URL格式修改为正确的格式。