检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
是否对数据进行加密,该参数仅支持在type为OBS时设置。默认值为off。 取值范围: on表示对数据进行加密。 off表示不对数据进行加密。 access_key OBS访问协议对应的AK值(OBS云服务界面由用户获取),创建外表时AK值会加密保存到数据库的元数据表中。该参数仅支持type为OBS时设置。 secret_access_key
ltarow_threshold控制进入delta表的阈值。 冷热表仅支持列存分区表,依赖于可用的OBS服务。 冷热表仅支持默认表空间为default_obs_tbs,如需新增obs表空间可联系技术支持。 不建议创建普通表时指定自定义TABLESPACE。 创建行存表时应避免指定COMPRESS压缩属性。
TABLE obs_from_store_sales_001; DROP FOREIGN TABLE obs_from_date_dim_001; DROP FOREIGN TABLE obs_from_store_001; DROP FOREIGN TABLE obs_from_item_001;
FilePath = 'obs://bucket01/obs.example.com accesskey=xxxxx secretkey=xxxxx region=cn-north-1' ); 其中,词典文件全名为nn_no.dict和nn_no.affix,所在目录为 'obs://bucket01/obs
3.0表及外表生效。 obs_io_req_count bigint OBS IO请求的总数量。该字段仅对3.0表及外表生效。 obs_io_req_retry_count bigint OBS IO请求重试的总次数。该字段仅对3.0表及外表生效。 obs_io_req_rate_limit_count
TABLE (OBS导入导出) OBS读写性能监控 新增视图GS_OBS_LATENCY,记录OBS的平均延迟信息。 开发指南>系统表和系统视图>系统视图>GS_OBS_LATENCY OBS读写带宽视图 新增读写带宽视图GS_OBS_READ_TRAFFIC和GS_OBS_WRIT
FOREIGN TABLE (GDS导入导出) CREATE FOREIGN TABLE (SQL on OBS or Hadoop) CREATE FOREIGN TABLE (OBS导入导出) CREATE FUNCTION CREATE GROUP CREATE INDEX CREATE
示例数据存储在OBS存储桶中,该存储桶向所有经过身份验证的云用户提供了读取权限。 注意,以下语句中的<obs_bucket_name>代表OBS桶名,仅支持部分区域,当前支持的区域和对应的OBS桶名请参见支持区域。GaussDB(DWS) 集群不支持跨区域访问OBS桶数据。 运行
境。 图1 数据迁移示意图 CDM、OBS、MRS、DLI为云服务。 GDS、DSC、gs_restore、gs_dump为内部工具。 表1 数据导入方式说明 数据导入方式 数据源 说明 优势 从OBS并行导入数据 OBS 支持将存储在OBS上的TXT、CSV、ORC及CARBO
FilePath = 'obs://bucket01/obs.example.com accesskey=xxxxx secretkey=xxxxx region=cn-north-1' ); 其中,词典文件全名为nn_no.dict和nn_no.affix,所在目录为 'obs://bucket01/obs
本实践演示通过数据湖探索服务DLI Flink作业将分布式消息服务Kafka的消费数据实时同步至DWS数据仓库,实现Kafka实时入库到DWS的过程。 本实践预计时长90分钟,实践用到的云服务包括虚拟私有云VPC及子网、弹性负载均衡ELB、弹性云服务器ECS、对象存储服务OBS、分布式消息服
0表及外表生效。 obs_io_req_count bigint OBS IO请求的总数量。该字段仅对存算分离3.0表及外表生效。 obs_io_req_retry_count bigint OBS IO请求重试的总次数。该字段仅对存算分离3.0表及外表生效。 obs_io_req_rate_limit_count
查询hudi外表属性(hoodie.properties) 查询OBS上hudi数据的hoodie.properties: 1 SELECT * FROM hudi_get_options('SCHEMA.FOREIGN_TABLE'); 示例:查询当前schema下的OBS外表rtd_mfdt_int_unit_ft的hudi属性:
0表及外表生效。 obs_io_req_count bigint OBS IO请求的总数量。该字段仅对存算分离3.0表及外表生效。 obs_io_req_retry_count bigint OBS IO请求重试的总次数。该字段仅对存算分离3.0表及外表生效。 obs_io_req_rate_limit_count
0表及外表生效。 obs_io_req_count bigint OBS IO请求的总数量。该字段仅对存算分离3.0表及外表生效。 obs_io_req_retry_count bigint OBS IO请求重试的总次数。该字段仅对存算分离3.0表及外表生效。 obs_io_req_rate_limit_count
FOREIGN TABLE (GDS导入导出) CREATE FOREIGN TABLE (SQL on OBS or Hadoop) CREATE FOREIGN TABLE (OBS导入导出) CREATE FUNCTION CREATE GROUP CREATE INDEX CREATE
regrid函数。 9.1.0.100版本(2024年8月12日) 【弹性架构】 架构升级:基于华为云对象存储服务OBS,推出存算分离架构3.0,计算、存储分层弹性,存储按需收费,降本增效;计算支持多VW(Virtual Warehouse,逻辑集群,以下简称VW)部署,业务隔离性更好,解决业务间的资源争抢问题。
'yyyyyyyyyyyyy' ); ADDRESS是OBS的终端节点(Endpoint)。DLI_ADDRESS是DLI的终端节点(Endpoint),请根据实际替换。 ACCESS_KEY和SECRET_ACCESS_KEY 是云账号体系访问OBS服务的密钥。请根据实际替换。 DLI_ACC
0表及外表生效。 obs_io_req_count bigint OBS IO请求的总数量。该字段仅对存算分离3.0表及外表生效。 obs_io_req_retry_count bigint OBS IO请求重试的总次数。该字段仅对存算分离3.0表及外表生效。 obs_io_req_rate_limit_count
快速入门 一键式创建GaussDB(DWS)集群,上传csv本地数据到云存储OBS桶,通过创建OBS外表实现数据导入并简单分析。 1h 零售业经营多维度分析 环境已预置样例数据在OBS桶,通过创建OBS外表导入样例数据,再使用聚合函数、group by、order by、视图进行多维度分析。