检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
集群的功能。 弹性规格变更 弹性规格变更仅支持ECS+EVS云盘的存算一体及存算分离集群,ECS本地盘的集群不支持。 弹性变更规格需要停止虚拟机,仅支持离线变更,变更时间大约需要5~10分钟。 包年/包月计费模式集群可进行弹性变更规格升配操作,默认按照包年包月计费,不支持直接降配操作,用户需转按需后再进行降配操作。
表1 集群规格 机器型号 dws.d2.xlarge VM CPU 4*CPU E5-2680 v2 @ 2.80GHZ 内存 32GB 网络 1GB 磁盘 1.63TB 节点数目 8 请使用下面的基准表来记录结果。 表2 记录结果 基准 优化前 优化后 加载时间(11张表) 341584
别查询视图。普通用户仅支持登录到集群的某个CN查询以gs为前缀的视图。 查询此类实时视图时,因需要获取作业运行实时资源使用情况,会有一定的网络延时。 实例故障时,实时TopSQL视图有可能记录不全。 实时TopSQL中能够记录的SQL语句的规格是: 不记录特殊数据定义语句,如:SET、RESET、SHOW、ALTER
集群中每一个DN实例上都有一份全量表数据。 小表、维度表。 Replication优点是每个DN上都有此表的全量数据,在join操作中可以避免数据重分布操作,从而减小网络开销,同时减少了plan segment(每个plan segment都会起对应的线程) Replication缺点是每个DN都保留了表的
以上所有参数必须配置在-vmargs参数之前。 -startup和--launcher.library参数必须分别配置为第一和第二个参数。 -vmargs 虚拟机参数的起始位置。 说明: -vmargs参数必须配置于配置文件的末尾。 不适用 不适用 -vm <file name (javaw.exe)
的将集群配置降低,做到最大程度的节约成本。支持的变更规格列表请参照表支持变更的规格列表。 基于ECS弹性云服务器底层基础能力,升降目标集群虚拟机节点的CPU、内存这两种资源配置,如下图所示: 弹性变更规格整个流程需要停止集群,所以需要用户合理安排变更时间窗口,防止集群停止影响业务。
CN只负责任务的规划及下发,把数据导入的工作交给了DN,释放了CN的资源,使其有能力处理其他外部请求。 所有DN都参与数据导入,这样可以充分利用各设备的计算能力及网络带宽,提升导入效率。 外表灵活的OPTION设置,有利于在数据入库前对数据做预处理,例如非法字符替换、容错处理等。 图1 数据并行导入示意图
以瞬间得到响应,作业之间没有任何CPU资源的争抢;但假如10个CPU上运行20个作业,因为作业不会一直占用CPU,在某些时间可能等待IO、网络等,因此CPU使用率可能并不高,此时CPU资源看似空闲,但是在某个时刻可能出现2~N作业同时请求一个CPU的情况出现,即会导致CPU资源争抢,影响作业性能。
如规格售罄,可选择其他可用区或规格。 节点数量 3 集群名称 dws-demo 管理员用户 dbadmin 管理员密码 - 确认密码 - 数据库端口 8000 虚拟私有云 vpc-default 子网 subnet-default(192.168.0.0/24) 安全组 自动创建安全组 公网访问 现在购买
如规格售罄,可选择其他可用区或规格。 节点数量 3 集群名称 dws-demo 管理员用户 dbadmin 管理员密码 - 确认密码 - 数据库端口 8000 虚拟私有云 vpc-default 子网 subnet-default(192.168.0.0/24) 安全组 自动创建安全组 公网访问 现在购买
集群中每一个DN实例上都有一份全量表数据。 小表、维度表。 Replication优点是每个DN上都有此表的全量数据,在join操作中可以避免数据重分布操作,从而减小网络开销,同时减少了plan segment(每个plan segment都会起对应的线程) Replication缺点是每个DN都保留了表的
集群中每一个DN实例上都有一份全量表数据。 小表、维度表。 Replication优点是每个DN上都有此表的全量数据,在join操作中可以避免数据重分布操作,从而减小网络开销,同时减少了plan segment(每个plan segment都会起对应的线程)。 Replication缺点是每个DN都保留了表
购买后,请参见登录Linux弹性云服务器进行登录。 ECS操作系统必须是GDS工具包所支持的操作系统。 ECS与DWS处于同一区域、同一虚拟私有云和子网。 ECS安全组规则需放通DWS集群的访问,即安全组入规则: 协议:TCP 端口范围:5000 源地址:选择“IP地址”,输入GaussDB(DWS)
如果可使用的节点配额不足,用户可以单击“申请扩大配额”,以提工单的形式申请更多节点配额。 扩容增加的节点规格,默认与集群当前各节点的规格相同。 扩容后的集群与原集群的虚拟私有云和安全组也相同。 多AZ集群仅支持扩容个数为3的倍数。 设置高级配置。 选择“默认配置”:“在线扩容”默认关闭,“自动重分布”默认开启,“重分布模式”默认为离线模式。
internal-privateIp -- WRITE_PARTITION_POLICY=DN时如果客户端程序和dws集群网络不在同一网络(内部通信网络),通过此参数配置网络ip映射格式为:内部IP:外部IP多个使用;分割。 - TIMEOUT_TASK dws.client.timeout
结果管理 查询结果 设置结果获取量:获取所有结果或指定数量的记录。 设置列宽。 内容长度:根据列的内容长度设置列的宽度。 自定义长度:根据网络模式下的取值长度设置列的最小宽度,单位为像素。 设置高级复制结果:复制所选内容和列标题或行号。 设置查询结果是否包含结果数据编码。如果设置
致。 说明: 不支持此模式。 将客户端所在主机的IP网段加入GaussDB(DWS)的安全组规则,确保客户端主机与GaussDB(DWS)网络互通。 测试数据源配置 单击Test进行测试。 如果显示如下,则表明配置正确,连接成功。 如果显示ERROR信息,则表明配置错误。请检查上述配置是否正确。
录中的log日志中显示hash表的统计信息,包括hash表大小,hash链长,hash冲突情况。 STREAM_DATA_CHECK表示对网络传输前后的数据进行CRC校验。 默认值:off(ALL),不开启任何定位功能。 resource_track_log 参数说明:控制自诊断
致。 说明: 不支持此模式。 将客户端所在主机的IP网段加入GaussDB(DWS)的安全组规则,确保客户端主机与GaussDB(DWS)网络互通。 测试数据源配置 单击Test进行测试。 如果显示如下,则表明配置正确,连接成功。 如果显示ERROR信息,则表明配置错误。请检查上述配置是否正确。
该参数会降低集群间的网络带宽,但是会增加集群的CPU负载,用户可以根据实际情况选择是否开启该参数。 为了实现GDS互联互通外表迁移数据时,数据在网络层压缩传输,GDS外表必须支持该参数,用户不仅可以使用互联互通外表进行数据压缩迁移,也可以手动使用GDS外表实现数据在网络层压缩迁移,由于