检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建外表。 通过外表导入DWS本地表。 创建MRS分析集群 登录华为云控制台,选择“大数据 > MapReduce服务”,单击“购买集群”,选择“自定义购买”,填写软件配置参数,单击“下一步”。 表1 软件配置 参数项 取值 区域 华北-北京四 集群名称 mrs_01 版本类型 普通版
GaussDB(DWS)服务即开即用 相比以前动辄长达数月的数据仓库选型采购过程,在云上开通使用数据仓库服务只需要数分钟时间,简化了企业用户的购买过程,使用数据仓库的方式,降低使用数据仓库的代价和门槛,让数据仓库实实在在地走进千万家大中小企业, 让数据为企业的发展和决策提供其应有的价值。
子网 subnet-default(192.168.0.0/24) 安全组 自动创建安全组 公网访问 现在购买 宽带 1Mbit/s 高级配置 默认配置 信息核对无误,单击“立即购买”,单击“提交”。 等待约6分钟,待集群创建成功后,单击集群名称前面的,弹出集群信息,记录下“公网访问地址”,例如dws-demov
当变更规格时,租户下剩余的CPU资源不足,不能变更到对应规格。 选择规格列表中CPU数较少的规格,或购买CPU资源。 DWS.8905 当变更规格时,租户下剩余的内存资源不足,不能变更到对应规格。 选择规格列表中内存较少的规格,或购买内存资源。 DWS.8906 当变更规格时,关闭集群监控失败。 请联系技术支持人员或稍后重试。
当变更规格时,租户下剩余的CPU资源不足,不能变更到对应规格。 选择规格列表中CPU数较少的规格,或购买CPU资源。 DWS.8905 当变更规格时,租户下剩余的内存资源不足,不能变更到对应规格。 选择规格列表中内存较少的规格,或购买内存资源。 DWS.8906 当变更规格时,关闭集群监控失败。 请联系技术支持人员或稍后重试。
冷分区数据存储容量单价*冷分区数据存储容量*节点数量 *数据副本数量*计费时长 冷分区数据采用OBS存储,性价比高,按需或包周期集群均使用按需计费,无需提前购买。 公网带宽(可选) 按固定带宽值采用阶梯计费: 0Mbit/s~5Mbit/s(含):均为一个统一的单价 大于5Mbit/s:按每Mbit/s计费
登录华为云控制台,服务列表选择“应用中间件 > 分布式消息服务Kafka版”,进入Kafka管理控制台。 左侧导航栏选择“Kafka实例”,单击右上角的“购买kafka实例”。 关键参数如下表说明,其他参数项如表中未说明,默认即可: 表2 kafka实例参数 参数项 参数值 计费模式 按需计费 区域
本分配。 通过企业项目进行成本分配 在进行成本分配之前,建议开通企业项目并做好企业项目的规划,可以根据企业的组织架构或者业务项目来划分。在购买云资源时选择指定企业项目,新购云资源将按此企业项目进行成本分配。详细介绍请参见通过企业项目维度查看成本分配。 图2 为云服务器选择企业项目
WS)集群备份,用于还原创建快照时的集群数据。快照会一直保存,直到用户使用管理控制台将此快照删除(自动快照不支持手动删除)。快照会占用用户购买使用的OBS配额。 Project Project用于将OpenStack的资源(计算资源、存储资源和网络资源)进行分组和隔离。Proje
SCHEMA对Hive表进行导入或者读取操作。 创建MRS集群 登录华为云控制台,选择“大数据 > MapReduce服务”。 单击“购买集群”,选择“自定义购买”。 填写软件配置参数,单击“下一步”。 表2 软件配置 参数项 取值 区域 华北-北京四 集群名称 mrs_01 版本类型 普通版
n任务,达到并发迁移多张表的目的。 步骤五:优化迁移作业:通过调整Kettle内存大小和Job的任务数量,提高迁移效率。 迁移前准备 已经购买了GaussDB(DWS)集群,并已绑定弹性公网IP,并已规划创建好目标数据库dws_vd。 已获取Kettle工具包,下载地址(本文以9
前检查账号状态,账号不能处于欠费或冻结状态。 获取此账号的“AK/SK”,参见访问密钥。 已创建VPC和子网。 步骤一:创建GaussDB(DWS)集群 登录管理控制台,进入购买GaussDB(DWS)界面。 参见表2进行基础配置。 表2 基础配置 参数 示例 说明 区域 选择“华北-北京四”。 说明: 本指导以“
3842,very good 在MRS集群上创建Hive ORC表 创建了MRS集群。 具体操作请参见《MapReduce服务管理指南》的购买自定义集群。 下载客户端。 在MRS集群页面,单击集群名称进入“概览”,单击“前往Manager”,如果提示绑定公网IP,请先绑定公网IP。
参数 是否必选 参数类型 描述 public_bind_type 否 String 弹性IP绑定类型,取值如下: auto_assign:现在购买 not_use:暂未使用 bind_existing :使用已有 eip_id 否 String 弹性IP的ID。 表5 Volume 参数
VALUES LESS THAN('1999-01-01 00:00:00') ); 步骤三:安装并启动GDS服务器 参见弹性云服务的购买弹性云服务器创建弹性云服务器,注意ECS与DWS创建在同一个区域、VPC内,本例ECS镜像选择CentOS 7.6版本。 下载GDS工具包。
置多个迁移作业。 在目标端DWS需要创建待同步的数据库和schema。 ADB的库层级对应的是DWS的schema层级。 迁移前准备 已经购买了GaussDB(DWS)和CDM集群,参见CDM使用指南。 需确保源ADB集群、目标GaussDB(DWS)集群与CDM网络互通。本例G
参数 是否必选 参数类型 描述 public_bind_type 否 String 弹性IP绑定类型,取值如下: auto_assign:现在购买。 not_use:暂不使用。 bind_existing :使用已有。 eip_id 否 String 弹性IP的ID。 表5 Tags
PublicIp 参数 参数类型 描述 public_bind_type String 弹性IP绑定类型,取值如下: auto_assign:现在购买 not_use:暂不使用 bind_existing :使用已有 eip_id String 弹性IP的ID。 表8 PublicEndpoints
如果用户需要在云上环境中使用数据仓库服务,首先应创建一个GaussDB(DWS)集群。用户可根据业务需求选择相应的产品规格和节点规格快速创建集群。您也可以先购买包年/包月,然后再创建集群。 管理快照 快照是GaussDB(DWS)集群在某一时间点的完整备份,记录了这一时刻指定集群的所有配置数据和业
PublicIp 参数 参数类型 描述 public_bind_type String 弹性IP绑定类型,取值如下: auto_assign:现在购买 not_use:暂未使用 bind_existing :使用已有 eip_id String 弹性IP的id。 表8 PublicEndpoints