检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
图解数据仓库服务
使用GaussDB(DWS)视图重建功能实现视图解耦以提升开发效率 为了解决因存在视图和表依赖而无法单独修改表对象的问题,GaussDB(DWS)实现了视图的解耦与重建功能。本文重点介绍视图自动重建功能的使用场景与使用方法。 场景介绍 GaussDB(DWS)使用对象标识符(oi
能降低电商和物联网行业数据分区维护成本 场景介绍 对于分区列为时间的分区表,分区自动管理功能可以自动创建新分区和删除过期分区,降低分区表的维护成本,改善查询性能。为了便于查询和维护数据,用户通常使用分区列为时间的分区表来存储时间相关的数据,例如电商的订单信息、 物联网采集的实时数
Processing,简称MPP,也可称为无共享架构),是指在GaussDB(DWS)集群的每个节点中,都有独立的内存计算和磁盘存储系统,GaussDB(DWS)根据数据库模型和应用特点,将业务数据划分到不同节点上,通过节点间的网络彼此连接协同计算,使集群作为整体提供数据库服务以满足业务需要。 无共享架构 无共享架构(Shared
处理、分析和传输。数据湖能帮助企业快速完成异构数据源的联邦分析、挖掘和探索数据价值。 数据湖的本质,是由“数据存储架构+数据处理工具”组成的解决方案。 数据存储架构:要有足够的扩展性和可靠性,可以存储海量的任意类型的数据,包括结构化、半结构化和非结构化数据。 数据处理工具,则分为两大类:
使用GaussDB(DWS)冷热数据切换功能降低业务成本 使用GaussDB(DWS)分区自动管理功能降低电商和物联网行业数据分区维护成本 使用GaussDB(DWS)视图重建功能实现视图解耦以提升开发效率 HStore表使用优秀实践 GIN索引使用实践 实现数据列的加解密 通过视图管控数据权限
存算一体架构的EVS规格。集群版本在8.1.1.300及以后版本支持。 具体操作参见弹性变更规格。 图4 弹性变更规格 集群扩容 集群扩容是分布式MPPDB架构横向扩展的典型场景,通过添加对等同构的节点到当前集群来完成集群规模横向扩展的能力。DWS 2.0属于存算一体架构,因此集群扩容同时扩容了计算能力和存储能力。
置集群参数。 表1 参数说明 参数名 参数解释 样例值 CPU架构 CPU架构有: X86 鲲鹏 说明: X86和鲲鹏只是底层架构不一致,应用层不感知,sql语法一致,如果创建集群时提示X86资源不足,可以选择鲲鹏架构。 x86 规格 请根据业务需求合理选择节点规格。 - 存储 单个节点可用存储容量。
DWS的集成能力,降低用户数据源迁移和集成的复杂性,是一种高效易用的数据集成服务。目前数据源支持从Kafka、MySQL、Oracle和IoT源端迁移至GaussDB(DWS)目的端。 该特性仅8.2.0及以上集群版本支持。 源端数据源不支持DWS,即不支持从DWS迁移到DWS。
地理位置发生自然灾害,或者集群内部出现了故障从而导致生产集群无法正常对外提供读写服务,那么灾备集群可以切换为生产集群,从而保障业务连续性。架构图如下所示: Region内容灾特性仅8.1.1及以上集群版本支持。 存算一体(单机部署)不支持容灾功能。 存算分离集群和多AZ集群暂不支持容灾功能。
读文件的总时长,单位为微秒。 writetim bigint 写文件的总时长,单位为微秒。 avgiotim bigint 读写文件的平均时长,单位为微秒。 lstiotim bigint 最后一次读文件时长,单位为微秒。 miniotim bigint 读写文件的最小时长,单位为微秒。 maxiowtm bigint
集群分别设置为“6,3”和“3,6”。 命令行传入参数值 备集群 view_independent 视图解耦功能。 布尔型: on表示开启视图解耦功能。 off表示不开启视图解耦功能。 on 命令示例 主备集群准备工作。 python3 $GPHOME/script/DisasterFineGrained
读文件的总时长,单位微秒。 writetim bigint 写文件的总时长,单位微秒。 avgiotim bigint 读写文件的平均时长,单位微秒。 lstiotim bigint 最后一次读文件时长,单位微秒。 miniotim bigint 读写文件的最小时长,单位微秒。 maxiowtm bigint
为什么在互联网环境连接GaussDB(DWS)后,解绑了EIP不会立即返回失败消息? 这是因为解绑了EIP后,会导致网络断开。但是此过程中,TCP协议层因keepalive等的设置,无法及时识别物理连接已经故障,导致gsql,ODBC和JDBC等客户端无法及时识别网络故障。 客户
phyblkwrt bigint 物理写块数。 writetim bigint 物理写消耗时间。 avgiotim bigint 平均每次写入时间。 lstiotim bigint 上一次写入时间。 miniotim bigint 最小写入时间。 maxiowtm bigint 最大写入时间。 父主题:
所有节点物理写块数之和。 writetim bigint 所有节点物理写消耗时间之和。 avgiotim bigint 所有节点平均的重做写入时间。 lstiotim bigint 所有节点上一次写入时间之和。 miniotim bigint 所有节点最小写入时间之和。 maxiowtm bigint
所有节点物理写块数之和。 writetim bigint 所有节点物理写消耗时间之和。 avgiotim bigint 所有节点平均的重做写入时间。 lstiotim bigint 所有节点上一次写入时间之和。 miniotim bigint 所有节点最小写入时间之和。 maxiowtm bigint
phyblkwrt bigint 物理写块数。 writetim bigint 物理写消耗时间。 avgiotim bigint 平均每次写入时间。 lstiotim bigint 上一次写入时间。 miniotim bigint 最小写入时间。 maxiowtm bigint 最大写入时间。 父主题:
phyblkwrt bigint 物理写块数。 writetim bigint 物理写消耗时间。 avgiotim bigint 平均每次写入时间。 lstiotim bigint 上一次写入时间。 miniotim bigint 最小写入时间。 maxiowtm bigint 最大写入时间。 父主题:
phyblkwrt bigint 物理写块数。 writetim bigint 物理写消耗时间。 avgiotim bigint 平均每次写入时间。 lstiotim bigint 上一次写入时间。 miniotim bigint 最小写入时间。 maxiowtm bigint 最大写入时间。 父主题: