检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
EVS存储内容:行存、列存元数据(min/max)、 索引、Delta、WAL、OBS数据缓存、计算中的临时下盘文件(sort/hash),购买DWS集群时可指定大小。 EVS存储总大小购买计算公式: ( 2副本 *(行存表大小 + 索引大小 + Delta表大小) + OBS热数据缓存大小) / 0.8(预留)
子网 subnet-default(192.168.0.0/24) 安全组 自动创建安全组 公网访问 现在购买 宽带 1Mbit/s 高级配置 默认配置 信息核对无误,单击“立即购买”,单击“提交”。 等待约6分钟,待集群创建成功后,单击集群名称前面的,弹出集群信息,记录下“公网访问地址”,例如dws-demov
XX后冻结 包周期集群购买时长到期,未续费时会进入宽限期。宽限期包周期集群正常使用,可进行续费操作,不可进行转按需、退订操作。 已冻结, XX后删除 包周期集群宽限期结束,进入保留期。可进行续费操作,不可进行转按需、退订操作。 XX后转按需 包周期集群购买时长到期后转成按需集群。
冷分区数据存储容量单价*冷分区数据存储容量*节点数量 *数据副本数量*计费时长 冷分区数据采用OBS存储,性价比高,按需或包周期集群均使用按需计费,无需提前购买。 公网带宽(可选) 按固定带宽值采用阶梯计费: 0Mbit/s~5Mbit/s(含):均为一个统一的单价 大于5Mbit/s:按每Mbit/s计费
创建外表。 通过外表导入DWS本地表。 创建MRS分析集群 登录华为云控制台,选择“大数据 > MapReduce服务”,单击“购买集群”,选择“自定义购买”,填写软件配置参数,单击“下一步”。 表1 软件配置 参数项 取值 区域 华北-北京四 集群名称 mrs_01 版本类型 普通版
GaussDB(DWS)服务即开即用 相比以前动辄长达数月的数据仓库选型采购过程,在云上开通使用数据仓库服务只需要数分钟时间,简化了企业用户的购买过程,使用数据仓库的方式,降低使用数据仓库的代价和门槛,让数据仓库实实在在地走进千万家大中小企业, 让数据为企业的发展和决策提供其应有的价值。
当变更规格时,租户下剩余的CPU资源不足,不能变更到对应规格。 选择规格列表中CPU数较少的规格,或购买CPU资源。 DWS.8905 当变更规格时,租户下剩余的内存资源不足,不能变更到对应规格。 选择规格列表中内存较少的规格,或购买内存资源。 DWS.8906 当变更规格时,关闭集群监控失败。 请联系技术支持人员或稍后重试。
当变更规格时,租户下剩余的CPU资源不足,不能变更到对应规格。 选择规格列表中CPU数较少的规格,或购买CPU资源。 DWS.8905 当变更规格时,租户下剩余的内存资源不足,不能变更到对应规格。 选择规格列表中内存较少的规格,或购买内存资源。 DWS.8906 当变更规格时,关闭集群监控失败。 请联系技术支持人员或稍后重试。
SCHEMA对Hive表进行导入或者读取操作。 创建MRS集群 登录华为云控制台,选择“大数据 > MapReduce服务”。 单击“购买集群”,选择“自定义购买”。 填写软件配置参数,单击“下一步”。 表2 软件配置 参数项 取值 区域 华北-北京四 集群名称 mrs_01 版本类型 普通版
WS)集群备份,用于还原创建快照时的集群数据。快照会一直保存,直到用户使用管理控制台将此快照删除(自动快照不支持手动删除)。快照会占用用户购买使用的OBS配额。 Project Project用于将OpenStack的资源(计算资源、存储资源和网络资源)进行分组和隔离。Proje
本分配。 通过企业项目进行成本分配 在进行成本分配之前,建议开通企业项目并做好企业项目的规划,可以根据企业的组织架构或者业务项目来划分。在购买云资源时选择指定企业项目,新购云资源将按此企业项目进行成本分配。详细介绍请参见通过企业项目维度查看成本分配。 图2 为云服务器选择企业项目
请更多节点配额。 集群创建成功后,“产品类型”不能再进行更改,请参考数据仓库类型了解不同产品类型功能上的具体差异。 推荐使用包年/包月方式购买集群,包月时长到期之后,集群会自动释放。 连接集群 用户需要在与集群相同的虚拟私有云子网中使用客户端连接GaussDB(DWS)集群。 数
前检查账号状态,账号不能处于欠费或冻结状态。 获取此账号的“AK/SK”,参见访问密钥。 已创建VPC和子网。 步骤一:创建GaussDB(DWS)集群 登录管理控制台,进入购买GaussDB(DWS)界面。 参见表2进行基础配置。 表2 基础配置 参数 示例 说明 区域 选择“华北-北京四”。 说明: 本指导以“
3842,very good 在MRS集群上创建Hive ORC表 创建了MRS集群。 具体操作请参见《MapReduce服务管理指南》的购买自定义集群。 下载客户端。 在MRS集群页面,单击集群名称进入“概览”,单击“前往Manager”,如果提示绑定公网IP,请先绑定公网IP。
重新迁移。 表的数据量太大,可以切片迁移。 整库迁移作业一次只能迁移一个数据库,如果迁移多个数据库需要配置多个迁移作业。 迁移前准备 已经购买了GaussDB(DWS)和CDM集群,参见CDM使用指南。 需确保源Hologres集群、目标GaussDB(DWS)集群与CDM网络互
VALUES LESS THAN('1999-01-01 00:00:00') ); 步骤三:安装并启动GDS服务器 参见弹性云服务的购买弹性云服务器创建弹性云服务器,注意ECS与DWS创建在同一个区域、VPC内,本例ECS镜像选择CentOS 7.6版本。 下载GDS工具包。
参数 是否必选 参数类型 描述 public_bind_type 否 String 弹性IP绑定类型,取值如下: auto_assign:现在购买 not_use:暂未使用 bind_existing :使用已有 eip_id 否 String 弹性IP的ID。 表5 Volume 参数
connectionMaxIdleMs 连接最大空闲时间(毫秒)。 60000 metadataCacheSeconds 元数据缓存时间(秒),为提升性能,会对理论上不怎么变更的数据,例如表结构,该参数用于设置缓存过期时间。 180 retryBaseTime 重试时sleep时间 = retryBaseTime
置多个迁移作业。 在目标端DWS需要创建待同步的数据库和schema。 ADB的库层级对应的是DWS的schema层级。 迁移前准备 已经购买了GaussDB(DWS)和CDM集群,参见CDM使用指南。 需确保源ADB集群、目标GaussDB(DWS)集群与CDM网络互通。本例G
参数 是否必选 参数类型 描述 public_bind_type 是 String 弹性IP绑定类型,取值如下: auto_assign:现在购买 not_use:暂不使用 bind_existing :使用已有 eip_id 否 String 弹性IP的ID。 表5 Tags 参数