-
使用场景 - 数据仓库服务 GaussDB(DWS)
使用场景 背景 目前在互联网、教育、游戏等行业都有实时精准营销的需求。通过系统生成用户画像,在营销时通过条件组合筛选用户,快速提取目标群体。例如: 在电商行业中,商家在进行营销活动前,需要根据活动的目的,圈选一批满足特定特征的目标用户群体进行广告推送。 在教育行业中,需要根据学生
-
概述 - 数据仓库服务 GaussDB(DWS)
概述 背景信息 在SQL语言中,每个数据都与一个决定其行为和用法的数据类型相关。GaussDB(DWS)提供一个可扩展的数据类型系统,该系统比其它SQL实现更具通用性和灵活性。因而,GaussDB(DWS)中大多数类型转换是由通用规则来管理的,这种做法允许使用混合类型的表达式。
-
如何使用VPC共享来处理GaussDB(DWS)资源? - 数据仓库服务 GaussDB(DWS)
如何使用VPC共享来处理GaussDB(DWS)资源? 背景信息 共享VPC功能支持多个账号在一个集中管理、共享的VPC内创建云资源,比如GaussDB(DWS)、ELB、ECS等。VPC的所有者可以将VPC内的子网共享给一个或者多个账号使用。通过共享VPC功能,可以简化网络配置
-
概述 - 数据仓库服务 GaussDB(DWS)
概述 背景信息 在SQL语言中,每个数据都与一个决定其行为和用法的数据类型相关。GaussDB(DWS)提供一个可扩展的数据类型系统,该系统比其它SQL实现更具通用性和灵活性。因而,GaussDB(DWS)中大多数类型转换是由通用规则来管理的,这种做法允许使用混合类型的表达式。
-
DDL - 数据仓库服务 GaussDB(DWS)
ERROR GS_213110096 错误码: split point doesn't match partition key. 解决方案:分割点与分区键不匹配,分隔点的数量应该等于分区键的数量。 level: ERROR GS_213110100 错误码: the number of
-
基于GDS的跨集群互联互通 - 数据仓库服务 GaussDB(DWS)
统管理员。 password为连接远端集群使用的用户名的密码。 syncsrv为GDS Server的IP地址和端口,如果有多个地址使用|分割,与GDS外表的location类似。 GaussDB(DWS)会对syncsrv所设置的GDS地址进行网络连接测试: 只能判断本地执行集
-
gds - 数据仓库服务 GaussDB(DWS)
gds_ctl 背景信息 gds_ctl是一个批量控制GDS启停的脚本工具,一次执行可以在多个节点上启动/停止相同端口的GDS服务进程,并在启动时为每一个进程设置看护程序,用于看护GDS进程。 注意事项 执行脚本前需切换到GDS用户,必须在普通用户下执行脚本gds_ctl。 脚本需要在python
-
CREATE FOREIGN TABLE (OBS导入导出) - 数据仓库服务 GaussDB(DWS)
在DN中每个OBS读取线程的缓存大小,可指定范围8~512,默认大小为64,单位为MB。 location 外表的数据源位置,目前支持URL描述。多个URL使用‘|’分割。 对于只读外表(默认为只读)的URL末尾可以指定到对象路径的前缀或直接指定到对象全路径。指定方式为obs://bucket/prefix
-
gds - 数据仓库服务 GaussDB(DWS)
gds 背景信息 gds可以为GaussDB(DWS)提供导入导出数据的功能。更多详细内容可参考《开发指南》的“导入数据”和“导出数据”章节。 语法 gds [ OPTION ] -d DIRECTORY 其中,-d、-H是必选参数,option项是可选参数。gds将DIRECT
-
查看数据倾斜状态 - 数据仓库服务 GaussDB(DWS)
数据倾斜会造成查询表性能下降。对于记录数超过千万条的表,建议在执行全量数据导入前,先导入部分数据,以进行数据倾斜检查和调整分布列,避免导入大量数据后发现数据倾斜,调整成本高。 背景信息 GaussDB(DWS)是采用Shared-nothing架构的MPP(Massive Parallel Processor,大规模
-
实现数据列的加解密 - 数据仓库服务 GaussDB(DWS)
密后到DWS解密。Oracle、Teradata和MySQL与DWS加解密有区别,需要非加密数据迁移到DWS后在DWS侧进行加解密。 技术背景 哈希函数 哈希函数又称为摘要算法,对于数据data,Hash函数会生成固定长度的数据,即Hash(data)=result。这个过程是不
-
CREATE FOREIGN TABLE (OBS导入导出) - 数据仓库服务 GaussDB(DWS)
在DN中每个OBS读取线程的缓存大小,可指定范围8~512,默认大小为64,单位为MB。 location 外表的数据源位置,目前支持URL描述。多个URL使用‘|’分割。 对于只读外表(默认为只读)的URL末尾可以指定到对象路径的前缀或直接指定到对象全路径。指定方式为obs://bucket/prefix
-
安全和认证(postgresql.conf) - 数据仓库服务 GaussDB(DWS)
ssl_ciphers 参数说明:指定SSL支持的加密算法列表。 参数类型:POSTMASTER 取值范围:字符串,如果指定多个加密算法,加密算法之间需要以分号分割。 默认值:ALL 配置参数ssl_ciphers的默认值为ALL,表示支持下列所有加密算法。如果对加密算法没有特殊要求,建议用户使用该默认值。
-
安全和认证(postgresql.conf) - 数据仓库服务 GaussDB(DWS)
ssl_ciphers 参数说明:指定SSL支持的加密算法列表。 参数类型:POSTMASTER 取值范围:字符串,如果指定多个加密算法,加密算法之间需要以分号分割。 默认值:ALL 配置参数ssl_ciphers的默认值为ALL,表示支持下列所有加密算法。如果对加密算法没有特殊要求,建议用户使用该默认值。
-
安装配置和启动GDS - 数据仓库服务 GaussDB(DWS)
上安装配置、启动GDS后,各服务器上的数据可以并行入库。GDS在各台数据服务器上的安装配置和启动方法相同,本节以一台服务器为例进行说明。 背景信息 GDS的版本需与集群版本保持一致(如:GDS V100R008C00版本与DWS 1.3.X版本配套),否则可能会出现导入导出失败或
-
安装配置和启动GDS - 数据仓库服务 GaussDB(DWS)
上安装配置、启动GDS后,各服务器上的数据可以并行入库。GDS在各台数据服务器上的安装配置和启动方法相同,本节以一台服务器为例进行说明。 背景信息 GDS的版本需与集群版本保持一致(如:GDS V100R008C00版本与DWS 1.3.X版本配套),否则可能会出现导入导出失败或
-
查看巡检 - 数据仓库服务 GaussDB(DWS)
查看巡检 背景信息 GaussDB(DWS)支持在变更操作前(扩/缩容、经典规格变更、升级)进行集群巡检,即在对应变更页面单击“立即巡检”按钮后会巡检当前集群的健康状态和集群指标是否满足变更要求,检查通过后可开始变更。如果巡检不通过,可打开巡检详情,查看不通过的巡检项,根据详情说
-
gs - 数据仓库服务 GaussDB(DWS)
gs_dumpall 背景信息 gs_dumpall是GaussDB(DWS)用于导出所有数据库相关信息工具,它可以导出集群数据库的所有数据,包括默认数据库postgres的数据、自定义数据库的数据、以及集群所有数据库公共的全局对象。 gs_dumpall工具在进行数据导出时,其他用户可以访问集群数据库(读或写)。
-
CREATE FOREIGN TABLE (SQL on OBS or Hadoop) - 数据仓库服务 GaussDB(DWS)
缺省值为双引号。当与quote值相同时,会被替换为'\0'。 location OBS外表参数,指定存储在OBS上的文件路径,多个桶的数据源数据之间使用分隔符‘|’进行分割,例如:LOCATION 'obs://bucket1/folder/ | obs://bucket2/',数据库将会扫描指定路径文件夹下面的所有对象。
-
CREATE FOREIGN TABLE (SQL on OBS or Hadoop) - 数据仓库服务 GaussDB(DWS)
缺省值为双引号。当与quote值相同时,会被替换为'\0'。 location OBS外表参数,指定存储在OBS上的文件路径,多个桶的数据源数据之间使用分隔符‘|’进行分割,例如:LOCATION 'obs://bucket1/folder/ | obs://bucket2/',数据库将会扫描指定路径文件夹下面的所有对象。