检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
资源管理计划操作 资源管理计划简介 资源管理计划功能是GaussDB(DWS)为客户提供的资源管理高级特性,客户可以通过创建资源管理计划,向计划中添加多个时间阶段,并为每个阶段配置不同的资源配比。当启动计划时,计划就会按照配置在不同的时间段自动切换资源配置。如果客户在不同的时间段
Cloud Server,ECS)负责其计费。 弹性负载均衡 ELB(可选) 按需计费集群搭配“使用已有”的弹性负载均衡时,负载均衡的计费模式同为按需计费,由弹性负载均衡服务( Elastic Load Balance,ELB)负责其计费。 数据库加密密钥(可选) 按需计费集群
开启云服务日志 功能介绍 该接口用于开启集群LTS云日志服务。 调用方法 请参见如何调用API。 URI POST /v1/{project_id}/clusters/{cluster_id}/lts-logs/enable 表1 路径参数 参数 是否必选 参数类型 描述 project_id
OBS上的数据准备 操作场景 使用SQL on OBS功能查询OBS数据之前: 已将ORC数据存储在OBS上。 例如,在使用Hive或Spark等组件时创建了ORC表,其表数据已经存储在OBS上的场景。 假设有2个ORC数据文件“product_info.0”和“product_info
已创建MRS集群,并将数据导入Hive/Spark数据库中的ORC表。 请参见MRS集群上的数据准备。 GaussDB(DWS)集群已创建MRS数据源连接。 具体操作请参见《数据仓库服务管理指南》的创建MRS数据源连接。 获取MRS数据源的HDFS路径 有两种方法可以查看: 方法一: 对于Hive数据,
分布暂停 ELB_BINDING:弹性负载均衡绑定中 ELB_BIND_FAILED:弹性负载均衡绑定失败 ELB_UNBINDING:弹性负载均衡解绑中 ELB_UNBIND_FAILED:弹性负载均衡解绑失败 ELB_SWITCHING:弹性负载均衡切换中 ELB_SWITC
pg_residualfiles/archive/pgscrf_archive_20231027145050896440 | 1 | 40960 dn_6007_6008 | dn_6008 | pg_residualfiles/archive/pgscrf_archive_20231027145051018138
通过只写外表将数据导出存储为ORC文件格式,使用HIVE读取ORC文件内容,相互之间也需要类型匹配,匹配状况如表2所示: 表1 ORC格式的只读外表与HIVE数据类型匹配关系 类型名称 GaussDB(DWS)外表支持类型 HIVE建表类型 1字节整数 TINYINT(不推荐) TINYINT
“暂不使用”:暂不使用ELB。如DWS使用于生产环境,需绑定ELB,如果选择不使用弹性IP,通过绑定ELB后,可从ELB页面进行弹性IP绑定。 “使用已有”:为集群绑定指定的ELB。如果下拉框中没有可用的ELB,可以单击“创建弹性负载均衡”进入弹性负载均衡页面创建一个满足需要的ELB。 警告:
分布暂停 ELB_BINDING:弹性负载均衡绑定中 ELB_BIND_FAILED:弹性负载均衡绑定失败 ELB_UNBINDING:弹性负载均衡解绑中 ELB_UNBIND_FAILED:弹性负载均衡解绑失败 ELB_SWITCHING:弹性负载均衡切换中 ELB_SWITC
云硬盘、网络、CPU、内存等。 表2 集群高可用高可靠风险和建议 集群配置 推荐措施 缺失配置的风险 配置负载均衡 使用ELB负载均衡方式接入业务。参见为GaussDB(DWS)集群绑定和解绑弹性负载均衡。 CN故障情况下您的业务中断,无法提供服务。 配置数据备份 使用备份功能,上下游数据冗余等方式对数据进行备份。
如何查看GaussDB(DWS)外部表信息? 如果需要查询OBS、GDS等外表信息(如OBS路径),可以执行以下语句查询。 1 SELECT * FROM pg_get_tabledef('外表名称') 例如,表名为traffic_data.GCJL_OBS,查询如下: 1 SELECT
磁盘扩容失败 表示集群磁盘扩容失败。 弹性负载均衡绑定中 表示集群正在绑定弹性负载均衡。 弹性负载均衡绑定失败 表示集群绑定弹性负载均衡失败。 弹性负载均衡解绑中 表示集群正在解绑弹性负载均衡。 弹性负载均衡解绑失败 表示集群解绑弹性负载均衡失败。 缩容检测中 表示集群正在检测是否满足缩容条件。
为两种作业绑定不同资源池以实现GaussDB(DWS)资源负载能力 本实践将演示GaussDB(DWS)的资源管理功能,帮助企业客户解决数据分析过程中,多用户查询作业遇到的性能瓶颈,最终实现多用户执行SQL作业互不影响,节省资源消耗。 本实践预计时长60分钟,基本流程如下: 步骤一:创建集群
MRS服务的详细信息,请参考《MapReduce服务用户指南》。 用户可以将海量业务数据,存储在MRS的分析集群,即使用Hive/Spark组件保存。Hive/Spark的数据文件则保存在HDFS中。GaussDB(DWS) 支持在相同网络中,配置一个GaussDB(DWS) 集
网/公网IP地址,其解析机制并不能保证负载均衡,同样也存在CN单点问题。因此引入了弹性负载均衡服务(Elastic Load Balance,下称ELB)解决集群访问的单点问题。详情请参见为GaussDB(DWS)集群绑定和解绑弹性负载均衡。 EIP 弹性公网IP(Elastic
0Mbit/s~5Mbit/s(含):均为一个统一的单价 大于5Mbit/s:按每Mbit/s计费 弹性负载均衡 ELB(可选) 按照您实际使用时长收取费用,详情请参见弹性负载均衡价格详情: LCU费用:根据独享型实例每小时使用的性能容量单位 (Loadbalancer Capacity
Cloud Server,ECS)负责其计费。 弹性负载均衡 ELB(可选) 包年/包月集群搭配“使用已有”的弹性负载均衡时,负载均衡的计费模式同为包年/包月,由弹性负载均衡服务( Elastic Load Balance,ELB)负责其计费。 数据库加密密钥(可选) 包年/包月
创建集群时默认自动创建的数据库。当用户第一次连接集群时,需要连接到该默认数据库。 弹性负载均衡地址 为实现集群高可用,解决CN单点问题,集群创建后需手动绑定弹性负载均衡(ELB),连接集群时建议连接ELB地址。 表3 网络 参数 参数说明 区域 集群的工作区域。 可用分区 显示创建集群时所选择的可用分区信息。
消费组名称输入“kafka01”,单击“确定”。 步骤二:创建绑定ELB的DWS集群和目标表 创建独享型弹性负载均衡服务ELB,网络类型选择IPv4私网即可,区域、VPC选择与Kafka实例保持一致,本实践为“华北-北京四”。 创建集群,为GaussDB(DWS)绑定弹性负载均衡 ELB,同时为确保网络连通,Gaus