检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用GDS从远端服务器导入数据 关于GDS并行导入 准备源数据 安装配置和启动GDS 创建GDS外表 执行导入数据 处理导入错误 停止GDS GDS导入示例 父主题： 导入数据
rows) 对同一张外表重复导出会覆盖之前的文件，因此不要对同一个外表重复导出。 若不确定文件是否为标准的csv格式，推荐将quote参数设置为0x07，0x08或0x1b等不可见字符来进行GDS导入导出，避免文件格式问题导致任务失败。 1 2 3 4 5 CREATE FOREIGN
停止GDS 操作场景 待导入数据成功后，停止GDS。 操作步骤 以gds_user用户登录安装GDS的数据服务器。 请根据启动GDS的方式，选择停止GDS的方式。 若用户使用“gds”命令启动GDS，请使用以下方式停止GDS。 执行如下命令，查询GDS进程号。 ps -ef|grep
ptions中的参数值。 address 指定HDFS集群的主备节点所在的IP地址以及端口。 hdfscfgpath 指定HDFS集群配置文件路径。该参数仅支持type为HDFS时设置。只能设置一个路径。 type 取值为'hdfs'，表示HDFS_FDW连接的是HDFS。 查看外部服务器：
如何使用GaussDB(DWS)的\copy导入导出？ 由于云上GaussDB(DWS)是全托管服务，用户无法登录后台，无法使用copy进行导入导出文件，所以云上将copy语法禁掉。云上推荐将数据文件放到obs上，使用obs外表进行入库，如果需要使用copy导入导出数据，可以参考如下方法： 将数据文件放到客户端的机器上。
gaussdb -h <DWS的内网IP> -U dbadmin -p 8000 -r -W <用户dbadmin密码>; 父主题： GDS方式导入
gs_restore具备如下两种功能。 导入至数据库 如果指定了数据库，则数据将被导入到指定的数据库中。其中，并行导入必须指定连接数据库的密码。 导入至脚本文件 如果未指定导入数据库，则创建包含重建数据库所需的SQL语句脚本，并将其写入至文件或者标准输出。该脚本文件等效于gs_dump导出的纯文本格式文件。 gs
GaussDB(DWS)导入性能都和哪些因素有关联？ dws的导入性能受多方面因素影响，主要有以下几点： 集群规格：磁盘io、网络吞吐、内存、cpu规格等。 业务规划：表字段的类型、是否压缩、行存还是列存。 数据存储：集群本地、OBS等。 数据导入的方式选择等。 父主题： 数据迁移
partition %s" SQLSTATE: XX000 错误原因：分区表导入过程中下盘缓存文件创建失败。 解决办法：检查是否当前系统的文件数达到了最大值，检查当前系统是否有足够的存储空间用以创建分区表导入时的临时文件。 GAUSS-04752: "error write temp file
参数为normal，表示导入或者导出的文件类型为普通文件。 参数为pipe，表示导入或者导出的文件类型为命名管道文件。 file_sequence 用于多任务GDS外表并行导入，提升单个文件的导入性能。该参数仅供数据导入使用。 格式为file_sequence '文件被拆分的总数-当前分片'
auto_create_pipe设置为true，执行导入导出时，若未指定管道文件，会打开“数据库名_模式名_外表名.pipe”文件；若该文件为普通文件类型，则导入导出任务报错。若为管道文件会自动删除该文件，并重新创建该命名管道文件。 管道文件导出时location参数可以指定导出的管道文件，如：location‘gsfs://127
在实际导入导出数据时，location参数使用建议如下： 导入时“location”建议指定到具体文件名。如果仅指定到OBS桶或目录，则会导入其中的所有文本文件。当数据格式不正确时，则会报错。如果设置了容错，则容错表可能导入大量数据。 支持OBS单桶多文件导入，根据文件名前缀进行匹配，匹配到的文件都会被导入。
域为例。 新建文件夹。 具体请参见《对象存储服务用户指南》中的新建文件夹章节。 例如： 在已创建的OBS桶“mybucket”中新建一个文件夹“input_data”。 在已创建的OBS桶“mybucket02”中新建一个文件夹“input_data”。 上传文件。 具体请参见《对象存储服务快速入门》的上传对象章节。
如何实现GaussDB(DWS)不同编码库之间数据容错导入 要实现从数据库A（UTF8编码）至数据库B（GBK编码）的数据导入，常规方法导入数据时会出现字符集编码不匹配的错误，导致数据无法导入。 针对小批量数据导入的场景，可以通过\COPY命令来完成，具体方法如下： 创建数据库A
返回MRS集群页面，单击集群名称进入集群详情界面。 单击“文件管理 > HDFS文件列表”，在user/hive/warehouse/product_info_orc路径下查看导出的ORC格式文件。 GaussDB(DWS)导出ORC数据的文件格式规则如下： 导出至MRS（HDFS）：从DN
步骤三：连接GaussDB(DWS)集群并导入数据进行分析 使用SQL编辑器连接GaussDB(DWS)数据库，并创建OBS外表，通过OBS外表将OBS桶数据导入GaussDB(DWS)集群，并进行简单SQL查询。 准备工作 已注册账号并实名认证，且在使用GaussDB(DWS) 前检查账号状态，账号不能处于欠费或冻结状态。
有什么区别？ OBS与GDS外表支持格式文件区别如下： OBS导入支持ORC、TEXT、JSON、CSV、CARBONDATA、PARQUET文件格式，导出支持ORC、CSV、TEXT文件格式，缺省值为TEXT。 GDS导入导出支持的文件格式：TEXT、CSV和FIXED，缺省值为TEXT。
Hive对接HDFS场景：将product_info.txt文件导入到HDFS路径/user/hive/warehouse/demo.db/product_info/，有关导入数据到MRS集群的操作，请参见《MapReduce服务用户指南》中的管理数据文件章节。 创建ORC表，并将数据导入ORC表。 执行以下SQL语句创建ORC表。
本实践预计时长40分钟，基本流程如下： 准备工作 创建ECS 创建集群并下载工具包 使用GDS导入数据源 通过外表导入远端DWS数据 准备工作 已注册华为账号并开通华为云，具体请参见注册华为账号并开通华为云，账号不能处于欠费或冻结状态。 创建ECS 参见自定义购买弹性云服务器购买。购买后，参见登录Linux弹性云服务器进行登录。
node %s." SQLSTATE: XX000 错误原因：打开表失败，原因可能有文件损坏或丢失。 解决办法：通过函数gs_switch_relfilenode交换两张表的文件时，待交换的表无法正常打开，请检查文件是否损坏或已异常丢失。请联系技术支持工程师提供技术支持。 GAUSS-04626:
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
