检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
导入数据 从OBS并行导入数据 使用GDS从远端服务器导入数据 从MRS导入数据到集群 从GaussDB(DWS)集群导入数据到新集群 基于GDS的跨集群互联互通 使用开源Kettle导入数据 使用gsql元命令\COPY导入数据 使用COPY FROM STDIN导入数据
SCHEMA.FOREIGN_TABLE表示OBS外表命名,带schema。 LATEST_COMMIT表示已同步的Hudi数据时间截点。
GS_OBS_WRITE_TRAFFIC GS_INSTR_UNIQUE_SQL GS_NODE_STAT_RESET_TIME GS_OBS_LATENCY GS_QUERY_MONITOR GS_QUERY_RESOURCE_INFO GS_REL_IOSTAT GS_RESPOOL_RUNTIME_INFO
实时数仓(单机部署)中,原有指定分布列语法将被忽略,此外不支持job定时任务、SEQUENCE类型、HDFS/OBS外表导入导出(其中OBS外表导入导出8.2.0及以上版本支持)、多温存储、自增分区表等功能。 DWS 3.0集群仅9.0.2及以上集群版本支持快照功能。
解决办法:请检查使用中的gds、hdfs外表以及roach、obs设置是否正确。
请检查OBS是否可正常使用,如OBS正常请联系技术支持人员检查dms-agent进程是否异常。 DWS.13009 OBS存储空间不足。 请检查OBS存储空间是否充足。 DWS.0107 正在执行DN REDO,请稍后重试。 等待REDO做完之后重试主备恢复。
请检查OBS是否可正常使用,如OBS正常请联系技术支持人员检查dms-agent进程是否异常。 DWS.13009 OBS存储空间不足。 请检查OBS存储空间是否充足。 DWS.0107 正在执行DN REDO,请稍后重试。 等待REDO做完之后重试主备恢复。
补交费用为包年/包月节点本次磁盘扩容需要补交的价格。配置费用即该集群的按需节点在磁盘扩容后的每小时的收费价格。 父主题: GaussDB(DWS)集群规格变更
数据迁移 GaussDB(DWS)的OBS外表与GDS外表支持的数据格式有什么区别? 数据如何存储到GaussDB(DWS)? GaussDB(DWS)可以存储多少业务数据? 如何使用GaussDB(DWS)的\copy导入导出?
"type": "OBS", "connect_info": "gaussdb", "user_name": "DWSAccessOBS", "configure_status": "300",
primary_obs_bucket 否 String 主集群obs桶。 standby_obs_bucket 否 String 备集群obs桶。
表1 区域和OBS桶名 区域 OBS桶名 华北-北京一 dws-demo-cn-north-1 华北-北京二 dws-demo-cn-north-2 华北-北京四 dws-demo-cn-north-4 华北-乌兰察布一 dws-demo-cn-north-9 华东-上海一 dws-demo-cn-east
数据迁移 OBS导入导出数据时,不支持中文路径。 OBS导入导出数据时,暂不支持跨Region进行OBS数据导入导出,必须确保OBS和DWS集群在同一个Region中。 故障切换 容灾创建后,生产集群快照功能正常使用,但是灾备集群禁用快照功能,同时生产、灾备集群均禁用恢复功能。
导入导出 导入数据最佳实践 GDS实践指南 迁移OBS桶数据至GaussDB(DWS)集群 使用GDS从远端服务器上导入表数据到GaussDB(DWS)集群 从MRS Hive导入表数据到GaussDB(DWS)集群 使用EXTERNAL SCHEMA跨集群访问HiveMetaStore
请求参数 表2 请求Body参数 参数 是否必选 参数类型 描述 redis_mode 是 String 重分布模式,其中包括: online:在线模式 offline:离线模式 parallel_jobs 是 Integer 重分布并发数。取值范围1~32。
入参: obs_server:text类型,obs server名称 file_path:text类型,obs文件路径 返回值类型:record 示例: --创建obs server CREATE SERVER obs_server FOREIGN DATA WRAPPER DFS_FDW
入参: obs_server:text类型,obs server名称 file_path:text类型,obs文件路径 返回值类型:record 示例: --创建obs server CREATE SERVER obs_server FOREIGN DATA WRAPPER DFS_FDW
表5 外表定义相关SQL 功能 相关SQL 创建GDS外表 CREATE FOREIGN TABLE (GDS导入导出) 创建HDFS或OBS外表(需手动创建Server) CREATE FOREIGN TABLE (SQL on OBS or Hadoop) 创建OBS外表(默认
FROM导入时报错“invalid byte sequence for encoding "UTF8": 0x00” GDS导入/导出类问题 创建GDS外表失败,提示不支持ROUNDROBIN 通过CDM将MySQL数据导入GaussDB(DWS)时出现字段超长,数据同步失败 执行创建OBS
重置密码后再次登录仍提示用户被锁 将Schema中的表的查询权限赋给其他用户,赋权后仍无法查询Schema中的表 某张表执行过grant select on table t1 to public,如何针对某用户回收权限 普通用户创建或删除GDS/OBS外表语句时报错,提示没有权限或权限不足