检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建MRS数据源连接 操作场景 GaussDB(DWS)从MRS的HDFS读取数据前,需要先创建一个MRS数据源连接,作为GaussDB(DWS)集群与MRS集群的数据通道。 对系统的影响 一个GaussDB(DWS)集群在创建MRS数据源连接时,不能同时创建两个连接。 创建MR
并确保该用户是新所有者角色的成员。 修改数据库默认表空间,该用户必须是该数据库的所有者或系统管理员且拥有新表空间的CREATE权限。该语法从物理上将一个数据库原来缺省表空间上的表和索引移至新的表空间。注意不在缺省表空间的表和索引不受此影响。 修改某个按数据库设置的相关参数,只有数
pg_stat_get_tuples_deleted(oid) 描述:从表中删除行的数量。 返回值类型:bigint pg_stat_get_local_tuples_deleted(oid) 描述:当前节点上从表中删除行的数量,该函数仅8.1.2及以上版本支持。 返回值类型:bigint
考虑到本实践的目的,首次创建表时,没有设置存储方式、分布键、分布方式和压缩方式。 执行CREATE TABLE命令创建图3中的11张表。限于篇幅,这里仅附store_sales的创建语法。请从附录创建初始表中拷贝所有建表语法进行创建。 1 2 3 4 5 6 7 8 9 10 11
DB(DWS)数仓也提供数据加密功能,包括透明加密和使用SQL函数加密。本章节主要讨论SQL函数加密。 GaussDB(DWS)目前不支持从Oracle、Teradata和MySQL加密后到DWS解密。Oracle、Teradata和MySQL与DWS加解密有区别,需要非加密数据迁移到DWS后在DWS侧进行加解密。
参数类型:USERSET 取值范围:布尔型 on表示使用。 off表示不使用。 默认值:新安装集群的场景下是on,如果集群是从R8C10版本升级上来的,则保持前向兼容。如果是从R7C10或者更早的版本升级上来,则默认值是off。 enable_seqscan 参数说明:控制优化器对顺序扫描
如果创建的是BMS集群,可联系技术支持人员开启了跨规格扩容的白名单,开启后扩容界面会显示“资源规格”,可以进行跨规格扩容。 如果原子网IP不够,可以跨子网扩容。 图1 扩容集群 当用户在包年/包月计费模式下,界面将显示计费模式的“剩余时间”和“到期时间”。 在“增加节点数”选择一个扩容后的节点数。 扩容
基本信息页面。 单击“文件管理”,选择“HDFS文件列表”。 进入您要导入到GaussDB(DWS)集群的数据的存储目录,并记录其路径。 图1 在MRS上查看数据存储路径 获取MRS数据源连接的外部服务器信息 使用创建外部服务器的用户去连接其对应的数据库。 是否使用普通用户在自定
到Portal上,事务结束场景LightProxy对象未释放造成内存堆积。 表现为CN的pv_session_memory_detail视图中查询到大量CachedPlanQuery内存上下文。 8.2.0.103 count distinct和union all场景下,实际使用内存大量超过估算内存。
赋予对应column的一个有效表达式或值: 向表中字段插入单引号时需要使用单引号自身进行转义。 如果插入行的表达式不是正确的数据类型,系统试图进行类型转换,若转换不成功,则插入数据失败,系统返回错误信息。 示例: 1 2 3 4 5 6 7 8 9 10 11 12
从MRS Hive导入表数据到GaussDB(DWS)集群 本教程通过建立HDFS外表实现GaussDB(DWS)远端访问或读取MRS数据源。 视频介绍 准备环境 已创建DWS集群,需确保MRS和DWS集群在同一个区域、可用区、同一VPC子网内,确保集群网络互通。 基本流程 本实践预计时长:1小时,基本流程如下:
MATERIALIZED VIEW是否能创建物化视图。 参数类型:SIGHUP 取值范围:布尔型 on表示CREATE MATERIALIZED VIEW可以创建物化视图。 off表示CREATE MATERIALIZED VIEW不可以创建物化视图。 默认值:off 父主题: 版本和平台兼容性
建议参数work_mem依据查询特点和并发来确定,一旦work_mem限定的物理内存不够,算子运算数据将写入临时表空间,带来5-10倍的性能下降,查询响应时间从秒级下降到分钟级。 对于串行无并发的复杂查询场景,平均每个查询有5-10关联操作,建议work_mem=50%内存/10。 对于串行无并发的
建议参数work_mem依据查询特点和并发来确定,一旦work_mem限定的物理内存不够,算子运算数据将写入临时表空间,带来5-10倍的性能下降,查询响应时间从秒级下降到分钟级。 对于串行无并发的复杂查询场景,平均每个查询有5-10关联操作,建议work_mem=50%内存/10。 对于串行无并发的
赋予对应column的一个有效表达式或值: 向表中字段插入单引号时需要使用单引号自身进行转义。 如果插入行的表达式不是正确的数据类型,系统试图进行类型转换,若转换不成功,则插入数据失败,系统返回错误信息。 示例: 1 2 3 4 5 6 7 8 9 10 11 12
双击安装包“Win64OpenSSL_Light-3.4.0.exe”安装到C盘默认路径即可,选择复制DLLs文件到OpenSSL目录下,如下图,剩余步骤默认单击下一步直到安装成功。 安装环境变量。单击本地PC左下角“开始”,右击“此电脑”,选择“更多 > 属性 > 高级系统设置”,切换到“高级”,单击“环境变量”。
参数类型:USERSET 取值范围:布尔型 on表示使用。 off表示不使用。 默认值:新安装集群的场景下是on,如果集群是从R8C10版本升级上来的,则保持前向兼容。如果是从R7C10或者更早的版本升级上来,则默认值是off。 left_join_estimation_enhancement
其索引为自研。建表时,选择合适的存储方式、分布列、分区键、索引,能够使SQL在执行时快速命中数据,减少IO消耗。下图是一个SQL从发起到获取数据的执行流程,通过下图,可以理解每个技术手段的作用,用于指导性能调优。 SQL执行时,分区表会通过Partition Column分区裁剪,定位到所在分区。
对于默认与Java的简单类型进行映射转换的那些GaussDB(DWS)数据类型,是无法处理NULL值的,如果希望在Java方法里能够获得并处理从GaussDB(DWS)中传入的NULL值,可以使用Java的封装类,并通过以下方式在AS子句中指定该Java封装类: CREATE FUNCTION
对于默认与Java的简单类型进行映射转换的那些GaussDB(DWS)数据类型,是无法处理NULL值的,如果希望在Java方法里能够获得并处理从GaussDB(DWS)中传入的NULL值,可以使用Java的封装类,并通过以下方式在AS子句中指定该Java封装类: CREATE FUNCTION