检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
用户可以定义冷热管理表,将符合规则的冷数据切换至OBS上进行存储,可以按照分区自动进行冷热数据的判断和迁移。 图1 冷热数据管理 GaussDB(DWS)列存数据写入时,数据首先进入热分区进行存储,分区数据较多后,可通过手动或自动的方式,将符合冷数据规则的数据切换至OBS上进行存储。在数据切换至OBS上后,其元数据
SQL on Anywhere SQL on hudi OBS / HDFS / DLI
导出数据 导出数据到OBS 导出ORC数据到MRS 使用GDS导出数据到远端服务器
(GDS导入导出),ALTER FOREIGN TABLE (For HDFS or OBS),CREATE FOREIGN TABLE (GDS导入导出),CREATE FOREIGN TABLE (SQL on OBS or Hadoop) 父主题: DDL语法
成本敏感客户:每个DN主备各挂载最小200G(每块盘带宽160MB/s)。 OBS配置 OBS要求3AZ部署并支持并行文件系统。 OBS性能: 如需调整OBS性能指标,请联系技术支持。公有云场景,6个DN及以下节点集群,OBS指标一般不需要调整。 CPU配置 建议生产环境每个节点16U起步,4U/8U仅用于体验。
外表的外部服务器名称,这个server必须存在。外表通过设置外部服务器连接OBS/HDFS读取数据。 此处应参考创建外部服务器中创建的外部服务器名称填写。 OPTIONS参数 用于指定外表数据的各类参数,关键参数如下所示。 “format”:表示导出的数据文件格式,支持“orc”格式。 “foldernam
(GDS导入导出),ALTER FOREIGN TABLE (For HDFS or OBS),CREATE FOREIGN TABLE (GDS导入导出),CREATE FOREIGN TABLE (SQL on OBS or Hadoop) 父主题: DDL语法
TEMPLATE = synonym, SYNONYMS = my_synonyms, FILEPATH = 'obs://bucket01/obs.example.com accesskey=xxxxx secretkey=xxxxx region=cn-north-1'
TEMPLATE = synonym, SYNONYMS = pg_dict, FILEPATH = 'obs://bucket01/obs.example.com accesskey=xxxxx secretkey=xxxxx region=cn-north-1'
快照介质如表4所示。 表4 快照介质 快照介质 说明 OBS 策略中配置备份设备为:OBS,则创建出的快照为OBS快照,备份数据保存在OBS服务器上。 NFS 策略中配置备份设备为:NFS,则创建出的快照为NFS快照,备份数据保存在NFS服务器上。 快照级别如表5所示。 表5 快照级别 快照级别
行计费,计费详情参见OBS价格详情。 快照服务依赖及部署说明: 快照管理功能依赖于OBS、NFS的备份介质。 备份设备为NFS的备份介质时,使用挂载盘的方式,依赖云上SFS-Tubor服务。具体配置步骤请参见11.1.3.2-自动快照策略配置备份介质。 当前快照恢复到新集群时仅支持OBS介质。
PG_FOREIGN_TABLE PG_INDEX PG_INHERITS PG_JOBS PG_LANGUAGE PG_LARGEOBJECT PG_LARGEOBJECT_METADATA PG_NAMESPACE PG_OBJECT PG_OBSSCANINFO PG_OPCLASS PG_OPERATOR
脚本名称:设置脚本名称,仅支持输入中文、英文、数字、下划线的组合。 OBS桶:存储脚本文件的OBS桶名称。如果没有可选择的OBS桶,可以单击“创建OBS桶”进入OBS管理控制台创建新的OBS桶,具体操作请参见《对象存储服务控制台指南》中的创建桶章节。 路径:在OBS中存储脚本文件的自定义目录。多级目录可用“
据源等功能。 存算一体(单机部署)中,原有指定分布列语法将被忽略,此外不支持job定时任务、SEQUENCE类型、HDFS/OBS外表导入导出(其中OBS外表导入导出8.2.0及以上版本支持)、多温存储、自增分区表等功能。 存算分离集群仅9.0.2及以上集群版本支持快照功能。
变更计费模式概述 在创建GaussDB(DWS)后,如果发现当前计费模式无法满足业务需求,您可以变更计费模式。支持变更计费模式的GaussDB(DWS)计费项如下所示: 表1 支持变更计费模式的GaussDB(DWS)计费项 计费项 变更说明 相关文档 数据仓库节点 变更节点规格的计费模式:
PROCEDURE append_example IS clobSrc CLOB ; clobDest CLOB ; BEGIN SELECT clobData INTO clobSrc FROM
数据迁移 GaussDB(DWS)的OBS外表与GDS外表支持的数据格式有什么区别? 数据如何存储到GaussDB(DWS)? GaussDB(DWS)可以存储多少业务数据? 如何使用GaussDB(DWS)的\copy导入导出? 如何实现GaussDB(DWS)不同编码库之间数据容错导入
TEMPLATE = synonym, SYNONYMS = my_synonyms, FILEPATH = 'obs://bucket01/obs.example.com accesskey=xxxxx secretkey=xxxxx region=cn-north-1'
42704 错误原因:初始化Foreign data wrapper出现问题。 解决办法:请检查使用中的gds、hdfs外表以及roach、obs设置是否正确。若不正确,请联系技术支持工程师提供技术支持。 GAUSS-03936: "foreign-data wrapper handler
需付费提供更大的折扣,对于长期使用者,推荐该计费模式。 • 折扣套餐:按月或按年预先支付OBS热数据存储费用,相比按需计费提供大额折扣,适合计划长期使用DWS 3.0场景的客户。 发布区域:全部 按需付费购买 包年/包月计费操作 计费说明 周边工具 GaussDB(DWS)支持一