检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
意在变更时间窗内尽量避免业务语句写入。 Region内容灾在生产集群与容灾集群,原生产集群所在的EIP和内网域名,连接IP地址不会自动切换,业务系统中如果有使用EIP、域名或者IP方式连接,需要切换到新集群。 父主题: GaussDB(DWS)集群容灾管理
r创建外表,支持TXT、CSV格式的数据,参见从OBS导入CSV、TXT数据。 方式二:需用户创建server,使用该server创建外表,支持ORC、CARBONDATA、TXT、CSV、PARQUET以及JSON格式的数据,参见从OBS导入ORC、CARBONDATA数据。 OBS导入导出数据时,不支持中文路径。
py”命令启动GDS,请使用以下命令停止GDS。 cd /opt/bin/dws/gds/bin python3 gds_ctl.py stop 父主题: 使用GDS从远端服务器导入数据
MRS集群上的数据准备 从MRS导入数据到GaussDB(DWS)集群之前,假设您已经完成了以下准备工作: 已创建MRS集群。 在MRS集群上创建了Hive/Spark ORC表,且表数据已经存储到该表对应的HDFS路径上。 如果您已经完成上述准备,则可以跳过本章节。 为方便起见,以在MRS集群上创建Hive
hdfscfgpath=/MRS/8f79ada0-d998-4026-9020-80d6de2692ca,type=hdfs} (1 row) 父主题: 从MRS导入数据到集群
将数据源文件上传至上一步所创建的目录中。 GDS并行导入支持CSV、TEXT格式的数据导入。请确保数据源文件符合格式要求。 父主题: 使用GDS从远端服务器导入数据
'', EOL '0x0a' ,file_type 'pipe',auto_create_pipe 'false'); 父主题: 使用GDS从远端服务器导入数据
SELECT ..”命令从外表导入数据到目标表。 示例: 1 INSERT INTO product_info SELECT * FROM foreign_product_info; 若出现以下类似信息,说明数据导入成功。 INSERT 0 20 执行SELECT命令,查看从MRS导入到GaussDB(DWS)中的数据。
使用GDS从远端服务器上导入表数据到GaussDB(DWS)集群 教程指引 本教程旨在演示使用GDS(General Data Service)工具将远端服务器上的数据导入GaussDB(DWS)中的过程,帮助您学习如何通过GDS进行数据导入的方法。 GaussDB(DWS)支持
unique constraint "reg_id_pk" 非格式错误 唯一约束。 删除数据源文件中重复的行。 通过设置关键字“DISTINCT”,从SELECT结果集中删除重复的行,保证导入的每一行都是唯一的。 1 INSERT INTO reasons SELECT DISTINCT *
在数据导入完成后,再重新创建索引。 1 CREATE INDEX reasons_idx ON reasons(r_reasons_id); 父主题: 使用GDS从远端服务器导入数据
适用于小数据量的导入。对于大数据量的导入,GaussDB(DWS)支持使用GDS工具通过外表并行导入数据到集群。 当前版本的GDS已经支持从管道文件导入数据库,该功能使GDS的导入更加灵活多变。 当GDS用户的本地磁盘空间不足时,可直接将hdfs上的数据写入到管道文件而不需要占用额外的磁盘空间。
0.90:5000/*', FORMAT 'FIXED', ENCODING 'utf8',FIX '119'); 父主题: 使用GDS从远端服务器导入数据
数据库版本的查看办法为:连接数据库后,执行如下SQL命令查看。 1 SELECT version(); 操作步骤 在使用GDS导入/导出数据前,请先参考教程:使用GDS从远端服务器导入数据中的步骤:“准备ECS作为GDS服务器”、“下载GDS工具包”。 以root用户登录待安装GDS的数据服务器,创建存放GDS工具包的目录。
请使用正确的任务ID后重试。 DWS.5213 创建公网域名前,请绑定公网IP。 请为集群绑定公网IP后在再尝试创建公网域名。 DWS.5238 所选规格不支持弹性存储! 请尝试更换集群规格重试。 DWS.5239 公网域名已存在! 请更改公网域名名称后重试。 DWS.21001 连接配置名称不合法。
请使用正确的任务ID后重试。 DWS.5213 创建公网域名前,请绑定公网IP。 请为集群绑定公网IP后再尝试创建公网域名。 DWS.5238 所选规格不支持弹性存储! 请尝试更换集群规格重试。 DWS.5239 公网域名已存在! 请更改公网域名名称后重试。 DWS.21001 连接配置名称不合法。
√ x 设置可维护时间段 √ x √ x 绑定EIP x x √ x 解绑EIP x x √ x 创建DNS域名 √ x √ x 释放DNS域名 √ x √ x 修改DNS域名 √ x √ x 创建MRS连接 √ x √ x 更新MRS连接 √ x √ x 删除MRS连接 √ x √
列所在网段,确保网络互通。 为确保DLI到DWS的连接链路稳定,请创建完DWS集群后为集群绑定ELB服务。 准备工作 已注册华为账号并开通华为云,具体请参见注册华为账号并开通华为云,且在使用GaussDB(DWS) 前检查账号状态,账号不能处于欠费或冻结状态。 已创建虚拟私有云和子网,参见创建虚拟私有云和子网。
接。 -p 8000 -h “集群地址”如果通过公网地址连接,请指定为集群“公网访问地址”或“公网访问域名”,如果通过内网地址连接,请指定为集群“内网访问地址”或“内网访问域名”。 -h 10.10.10.100 -t 或者--tablespaces-only,只转储表空间,不转储数据库或角色。
户仅连接一个CN节点地址,通过该CN节点内网IP或弹性公网IP连接时,只能连接到固定的CN节点上,存在CN单点问题。如果通过内网域名或公网域名连接,域名解析服务会对每个客户端随机选择一个内网/公网IP地址,其解析机制并不能保证负载均衡,同样也存在CN单点问题。因此引入了弹性负载均衡服务(Elastic