检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
试。 请检查OBS是否可正常使用,如OBS正常请联系技术支持人员检查进程间网络及进程是否存在异常。 DWS.13006 agent上报创建节点信息失败,请检查dms网络。 请联系技术支持人员检查进程间网络状态及进程状态是否存在异常。 DWS.13007 存在创建中的任务,取消本次任务。
试。 请检查OBS是否可正常使用,如OBS正常请联系技术支持人员检查进程间网络及进程是否存在异常。 DWS.13006 agent上报创建节点信息失败,请检查dms网络。 请联系技术支持人员检查进程间网络状态及进程状态是否存在异常。 DWS.13007 存在创建中的任务,取消本次任务。
解决办法:检测操作系统内核函数是否大于Linux 2.6.23,确认操作系统安装了libaio库。 GAUSS-04474: "FileAsyncWrite, file access failed %d" SQLSTATE: XX000 错误原因:异步IO写数据文件前检测到文件状态异常。
错误原因:创建HDFS外表时,检测有多余一个的foldername路径。 解决办法:foldername的option数量。 GAUSS-04738: "The path '%s' must be an absolute path." SQLSTATE: 42P17 错误原因:检测filenam
单独对索引表进行检测时,无需使用CASCADE模式。 不支持HDFS表(内表和外表),不支持临时表和unlog表。 对于主表的检测会同步检测主表的内部表,例如toast表、cudesc表等。 当提示索引表损坏时,建议使用reindex命令进行重建索引操作。 检测表分区的数据文件 1
单独对索引表进行检测时,无需使用CASCADE模式。 不支持HDFS表(内表和外表),不支持临时表和unlog表。 对于主表的检测会同步检测主表的内部表,例如toast表、cudesc表等。 当提示索引表损坏时,建议使用reindex命令进行重建索引操作。 检测表分区的数据文件 1
EST数据为例。 网络互通说明:本实践的Oracle数据库在云下,通过云数据迁移服务CDM连接Oracle和DWS。其中CDM通过公网IP与Oracle连通;CDM与DWS默认在同一个区域、虚拟私有云下,网络互通。实际迁移过程请确保网络互通,本章节不详细介绍网络如何打通。 本实践
enable_delayed_unlinks 参数说明:设置是否开启检查点延迟删除特性。该参数仅9.1.0及以上集群版本支持。 参数类型:SIGHUP 取值范围:布尔型 on表示开启检查点延迟删除特性。 off表示关闭检查点延迟删除特性。 默认值:on 当开启检查点延迟删除后,主DN创建checkpoint时,
在GaussDB(DWS)上,创建外表tpcds.customer_address_ext用于接收数据服务器上的数据。 假设OBS数据服务器与集群网络连接正常,OBS数据服务器IP为xxx.xxx.x.xx,数据源文件格式为CSV,规划的并行导入与示例保持一致。 其中设置的导入信息如下所示:
端访问或读取MRS数据源。 视频介绍 准备环境 已创建DWS集群,需确保MRS和DWS集群在同一个区域、可用区、同一VPC子网内,确保集群网络互通。 基本流程 本实践预计时长:1小时,基本流程如下: 创建MRS分析集群(选择Hive、Spark、Tez组件)。 通过将本地txt数
可以简化网络配置,帮助您统一配置和运维多个账号下的资源,有助于提升资源的管控效率,降低运维成本。更多信息请参见共享VPC。 约束与限制 所有者和使用者的子网在同一个VPC内,子网默认网络互通。但是由于使用者和所有者位于共享子网内的资源关联不同的安全组内,因此资源之间网络隔离,如果
GDS实践指南 安装GDS前必须确认GDS所在服务器环境的系统参数是否和数据库集群的系统参数一致。 GDS与GaussDB(DWS)通信要求物理网络畅通,尽量使用万兆网。因为千兆网无法承载高速的数据传输压力,极易出现断连,使用千兆网时GaussDB(DWS)无法提供通信保障。满足万兆网
导致双方性能同时劣化。 方案建议: GDS服务单独使用服务器部署在DWS集群外。 GDS所在服务器的磁盘能力、GDS服务器与DWS集群间网络带宽都要按需规划。 规则4.2 避免同时对多个协同分析外表进行跨集群并发访问 原理说明:在A集群通过协同分析访问B集群数据时,A集群所有DN会与B集群CN建立连接和活跃会话。
导致双方性能同时劣化。 方案建议: GDS服务单独使用服务器部署在DWS集群外。 GDS所在服务器的磁盘能力、GDS服务器与DWS集群间网络带宽都要按需规划。 规则4.2 避免同时对多个协同分析外表进行跨集群并发访问 原理说明:在A集群通过协同分析访问B集群数据时,A集群所有DN会与B集群CN建立连接和活跃会话。
连接集群时建议连接ELB地址。 表3 网络 参数 参数说明 区域 集群的工作区域。 可用分区 显示创建集群时所选择的可用分区信息。 虚拟私有云 VPC信息,创建集群时所选。 VPC即虚拟私有云,是通过逻辑方式进行网络隔离,提供安全、隔离的网络环境。 GaussDB(DWS)集群创
并保证巡检检查通过,通过后可进行下一步变更操作,详情请参见查看巡检。 单击“下一步:确认”,会进行缩容前集群状态检测,若检测不通过会弹出提示检测失败的项目。 检测通过后,单击确认,返回集群列表,集群显示“缩容中”,请耐心等待一段时间。 (包周期计费模式)集群在缩容结束后,系统会
客户端内存占用过多解决 此示例主要使用setFetchSize来调整客户端内存使用,它的原理是通过数据库游标来分批获取服务器端数据,但它会加大网络交互,可能会损失部分性能。 由于游标事务内有效,故需要先关闭自动提交。 1 2 3 4 5 6 7 8 9 10 11 12
能劣化的问题。 网络带宽资源 为了实现查询并行执行,会新增并行线程间的数据交换算子。对于Local类Stream算子,所需要进行数据交换的线程在同一个DN内,通过内存交换,不会增加网络负担。而非Local类算子,需要通过网络进行数据交换,因此会加重网络负担。当网络资源成为瓶颈的情况下,并行可能会导致一定程度的劣化。
常处理规则如表1所示。 8.2.1及以上集群版本支持降级异常规则,所有异常规则都支持降级行为,降级后仅网络资源抢占降至低优先级,即在正常查询无网络请求时,才会调度降级查询的网络请求。 关联、解绑异常规则仅8.2.0及以上集群版本支持。 表1 异常规则参数 参数项 描述 取值范围(0表示不约束)
表2 磁盘检查 检查项 警告 磁盘空间使用率 大于等于70%且小于90% inode使用率 大于等于70%且小于90% 表3 网络检查 检查项 报错 检查网络连通性 包100%丢失 检查网卡多队列 开启网卡多队列且绑定不同CPU,支持fix修改 语法 检查命令 gds_check -t