检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
关于并行导出 使用GDS工具将数据从数据库导出到普通文件系统中,适用于高并发、大量数据导出的场景。使用外表做并行导出时,需要开启steam算子后才能够使用GDS工具导出。 概述 通过外表导出数据:通过外表设置的导出模式、导出数据格式等信息来指定待导出的数据文件,利用多DN并行的方
通过几个表测试,监控资源利用率,根据结果提高或减少并发量。常用资源监控命令有:内存和CPU监控top命令,IO监控命令iostat,网络监控命令sar等。 仅支持单个内表导出,不支持多表Join联合导出,不支持单表的聚集、排序、子查询、limit等操作结果导出。 本版本中GDS导出已经支持CN
规划导出数据 操作场景 使用GDS从集群导出到数据之前,要提前准备需要导出的数据,并规划导出的路径。 规划导出路径 Remote模式 (可选)创建用户及所属的用户组。此用户为启动GDS的用户,该用户需要拥有导出数据文件存放目录的写权限。 groupadd gdsgrp useradd
使用外表并行导出 关于并行导出 规划导出数据 安装配置和启动GDS 创建GDS外表 执行导出数据 停止GDS 示例 父主题: 导出数据
kill -9 128954 示例:多线程导出 规划数据服务器与集群处于同一内网,数据服务器IP为192.168.0.90,导出的数据文件格式为CSV,同时导出2个目标表,所以规划使用Remote模式进行多线程导出。 Remote模式多线程导出数据操作示例如下所示: 登录GDS数据服务器,创建数据库用户及所属的用户组。
停止GDS GDS是GaussDB提供的数据服务工具,通过和外表机制的配合,实现数据的高速导出。 详细内容请参见停止GDS。 父主题: 使用外表并行导出
根据前面步骤确定的参数,创建GDS外表。外表的创建语法以及详细使用,请参考CREATE FOREIGN TABLE (导入导出)。 示例 示例1:创建GDS导出外表foreign_tpcds_reasons,待导出数据格式为CSV,用于接收数据服务器上的数据。 其中设置的导出模式信息如下所示:
GDS是GaussDB提供的数据服务工具,通过和外表机制的配合,实现数据的高速导出。根据导出作业的相关负载,检查GDS所在服务器与GaussDB集群的各物理集群相连通,并且上有充足的内存、句柄、磁盘空间等系统资源。详细内容请参见安装配置和启动GDS。 父主题: 使用外表并行导出
导出GaussDB实例列表 操作场景 您可以导出实例列表,查看并分析实例信息。 使用限制 单租户最多支持同时导出3000个实例,具体导出耗时与实例数量有关。 导出所有实例 登录管理控制台。 单击管理控制台左上角的,选择区域和项目。 在页面左上角单击,选择“数据库 > 云数据库 GaussDB”,进入云数据库
导出数据 使用外表并行导出
lta表功能。该参数开启时,数据导入列存表,会根据表定义时指定的DELTAROW_THRESHOLD决定数据进入delta表存储还是主表CU存储,当数据量小于DELTAROW_THRESHOLD时,数据进入delta表。 该参数属于POSTMASTER类型参数,请参考表1中对应设置方法进行设置。
数选择是否开启支持列存delta表功能。该参数开启时,数据导入列存表,会根据表定义时指定的《开发指南》中“SQL参考 > SQL语法 > CREATE TABLE”章节中的DELTAROW_THRESHOLD内容决定数据进入delta表存储还是主表CU存储,当数据量小于DELTA
在左侧导航栏中选择“参数管理”,在“参数”页签单击“导出”。 图1 导出参数 导出到文件。将该实例对应的参数模板信息(参数名称、值、描述)导出到CSV表中,方便用户查看并分析。 在弹出框中,填写文件名称,单击“确定”。 文件名称在4位到81位之间,必须以字母开头,可以包含字母、数字、中划线或下划线,不能包含其他特殊字符。
”错误。 该参数属于SUSET类型参数,请参考表1中对应设置方法进行设置。 取值范围:布尔型 on表示导入时区分“导入文件记录数为空”和“导入文件不存在”。 off表示导入时不区分“导入文件记录数为空”和“导入文件不存在”。 默认值:off safe_data_path 参数说明
时,对数据文件中不满足编码信息的数据进行容错处理,不报错,并直接按照原编码插入表中。 per_byte 使用COPY导出文本格式的数据文件时,对文件编码为GBK或ZHS16GBK文件的处理方式。 设置per_byte后,在导出数据时一次导出一个字节数据,否则一次导出两个字节数据(GBK编码下,一个字符占两个字节)。
时,对数据文件中不满足编码信息的数据进行容错处理,不报错,并直接按照原编码插入表中。 per_byte 使用COPY导出文本格式的数据文件时,对文件编码为GBK或ZHS16GBK文件的处理方式。 设置per_byte后,在导出数据时一次导出一个字节数据,否则一次导出两个字节数据(GBK编码下,一个字符占两个字节)。
FOREIGN TABLE (导入导出) 创建GDS外表。 功能描述 在当前数据库创建一个GDS外表,用于数据并行导入导出。GDS外表分为只读外表和只写外表,分别用于数据并行导入和并行导出,缺省为只读外表。 注意事项 外表由命令执行者所有; GDS外表不需要显式指定分布方式,默认支持ROUNDROBIN分布方式;
导出”,导出备份信息。 只可导出当前页面的备份,不可跨页面导出。 您也可以在“实例管理”页面,单击实例名称,进入“基本信息”页面,在左侧导航栏,单击“备份恢复”,勾选需要导出的备份,单击“导出”,导出备份信息。 导出的备份信息列表为csv文件,您可以对其进行分析,以满足业务需求。
模式级导出(参见导出模式)。 导出模式的全量信息。 仅导出模式中数据。 仅导出对象的定义,包含表定义、存储过程定义和索引定义等。 表级导出(参见导出表)。 导出表的全量信息。 仅导出表中数据。 仅导出表的定义。 导出所有数据库 数据库级导出(参见导出所有数据库)。 导出全量信息。
如何防止任意源连接GaussDB数据库 数据库开放EIP后,如果公网上的恶意人员获取到您的EIP DNS和数据库端口,那么便可尝试破解您的数据库并进行进一步破坏。因此,强烈建议您保护好EIP DNS、数据库端口、数据库账号和密码等信息,并通过云数据库GaussDB实例的安全组限定源IP,保障只允许可信源连接数据库。