检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
云存储类型可选择“云硬盘EVS”或“文件存储SFS”,若没有云存储可单击“创建存储卷声明”创建。 如选择“云硬盘EVS”类型,要求EVS的可用区与节点可用区一致。 图2 添加云存储 给Jenkins容器添加权限,让Jenkins容器中可以执行相关命令。
资源和成本规划 表1 基础资源清单 云服务 规格 数量 计费模式 可选/必选 参考价格(基础配置) 虚拟私有云 VPC 包含两个子网的虚拟公有云,其中一个私有子网 1 按需 必选 0.00 弹性公网IP EIP 带宽费用: 独享 | 静态BGP | 按流量计费 | 100Mbps
00.00 DGC 初级版 | 4核 8 GB | 作业并发数 20 | 数据作业节点调度次数/天 5000次/天 1 2,000.00 OBS 标准存储单AZ存储包 | 5TB 1 456.00 DLI 队列 | x86 | 16CUs 2 4,800.00 CDM cdm.large
您需要提前配置好连接器,具体操作请参考对接OBS云对象存储实例。 如何使用连接器图元 在“连接器 > 存储”中,拖拽OBS图元到画布中。 选择OBS图元,单击,设置基本信息。 表1 基本信息参数说明 参数名 参数说明 标签 图元的标签,用于在页面显示。
华为云产品和在云商店购买的联营商品、华为商品,可开具华为云发票,具体操作请参见如何开具华为云发票。申请开票时,发票介质请选中“电子发票”。 在云商店购买的通用商品,由该商品的服务商开票。是否支持线上申请电子票,由云商店服务商设置。
选择生产存储平面需要绑定的网卡,按“Enter”。
须知: 迁移完成后,您需要手动清理该路径下生成的文件夹,以释放存储空间。 表7 Hudi(有元数据)连接参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称为“Hudi-有元数据-4位随机数(字母和数字)”,也可以自定义名称。
租户信息 管理员可查看/编辑企业消息,还可解散企业。 1.在“设置”下拉菜单下单击“租户信息”。单击右上角的“编辑”,可编辑企业基本信息。 企业标识和企业ID不可编辑,由系统自动分配。 解散企业后,将在60天内清除企业所有数据。 2.在高级设置里,单击“解散租户”,可注销企业(解散后
如果两个VPC之间的子网网段有重叠或者完全相同,那么建立的对等连接将无效,无法相互通信。 支持。 VPC终端节点完全不受两个VPC子网网段重叠或者完全相同的影响,均可以正常通信。 通信方向 建立对等连接的两个VPC之间支持双向通信。
按需计费资源 对于按需计费模式的资源,例如按需计费的存储容量和用户数等,若您不再使用这些资源且需停止计费,请退订相应资源。
url String 对应资源存储位置。 properties map[string]Property 属性字典。根据业务自定义,例如文件大小,图片tag标签,其他业务属性等。 父主题: 数据结构
资源扩展:提供存储资源扩展和下载流量资源扩展。购买资源扩展前,须购买制品仓库服务套餐或CodeArts基础版及以上规格套餐。 父主题: 计费模式
数据销毁机制 考虑到残留数据导致的信息泄露问题,华为云根据客户等级设定了不同的保留期时长,保留期到期仍未续订或充值,存储在云服务中的数据将被删除,云服务资源将被释放。EdgeSec对云服务自动感知并在保留期到期后释放资源。
使用BulkLoad工具向HBase迁移数据 HBase的数据都是存储在HDFS中的,数据导入即是加载存放在HDFS中的数据到HBase表中。Apache HBase提供了“Import”和“ImportTsv”工具用于批量导入HBase数据。
删除云硬盘快照一致性组 操作场景 当不再使用快照或快照数量超过配额时,可以删除部分快照一致性组以释放存储空间。 删除一致性组的时候,一致性组里的快照也会被删除,请谨慎操作。 操作步骤 登录管理控制台。 单击页面左上角“”,选择“存储 > 云硬盘”。 进入云硬盘页面。
Kafka以分区为粒度管理消息,分区多导致生产、存储、消费都碎片化,影响性能稳定性。在使用过程中,当Topic的总分区数达到上限后,用户就无法继续创建Topic。 不同规格配置的Topic总分区数不同,如下表所示。
tablelocation Hudi表的存储路径。
配置Spark读写Doris数据 Spark Doris Connector可以支持通过Spark读取Doris中存储的数据,也支持通过Spark写入数据到Doris中。 支持从Doris中读取数据 支持Spark DataFrame批量/流式写入Doris。
删除手动快照 用户需要删除状态为“不可用”的快照,或者需要释放快照所占用的存储空间时,可以在“快照管理”中删除不再使用的快照。 成功删除的快照无法恢复,请谨慎操作。 操作步骤 登录GaussDB(DWS)管理控制台。
DBA_IND_PARTITIONS DBA_IND_PARTITIONS视图存储数据库中所有索引分区的信息。数据库中每个分区表的每个索引分区(如果存在的话)在DBA_IND_PARTITIONS里都会有一行记录。需要有系统管理员权限才可以访问。