检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
DataX对接OBS 概述 DataX是一个数据同步框架,实现了包括MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS等各种异构数据源之间高效的数据同步功能。OBS在大数据场景中可以替代Hadoop系统中的HDF
通过CDN加速访问OBS OBS可以作为其他云服务的存储资源池,例如关系型数据库(Relational Database Service,RDS),镜像服务(Image Management Service,IMS),云审计服务(Cloud Trace Service,CTS)等。 OBS可以作为
管理桶 获取桶元数据 判断桶是否存在 删除桶 管理桶访问权限 管理桶策略 获取桶区域位置 获取桶存量信息 桶配额 桶存储类型
Browser管理对象时,在任务列表中无相关任务显示 问题 为什么使用OBS Browser对对象进行上传、下载、删除等管理操作时,在任务列表中无相关任务显示。 回答 使用OBS Browser对对象进行上传、下载、删除等管理操作时,需要调用OBS Browser内置数据库,数据库在运行时产生的二
账号ID 桶的拥有者全局唯一标识,与“我的凭证”页面的“账号ID”相同。 创建时间 桶的创建时间。 “存储用量”和“对象数量”非实时数据,系统更新存在至少15分钟的延迟。 父主题: 桶管理
OBS是否支持断点续传功能? OBS管理工具断点续传功能的支持情况: 表1 OBS管理工具断点续传功能 OBS管理工具 断点续传功能 管理控制台 不支持 OBS Browser+ 支持 obsutil 支持 参考文档:利用obsutil进行断点续传 SDK 支持 使用SDK的断点
例。 配置须知 本案例预置的“公共读”模板允许所有账号(所有互联网用户)对整个桶及桶内所有对象执行以下权限: HeadBucket:判断桶是否存在、获取桶元数据 GetBucketLocation:获取桶位置 GetObject:获取对象内容、获取对象元数据 RestoreObject:恢复归档存储对象
购买了回源流量包是否还需要购买公网流出流量包? 回源流量包用于抵扣使用OBS作为华为云CDN加速域名源站时,CDN向源站OBS获取文件产生的回源流量费用。 公网流出流量包用于抵扣通过互联网从OBS下载数据到本地所产生的公网流出流量费用。 不同场景产生的流量类型如下: 用户在控制台
如果桶内已存在同名对象,如何判定覆盖上传成功?(Java SDK) 上传完成后,您可以调用ObsClient.getObjectMetadata接口获取目标对象大小和最后修改时间,再与数据源进行比较: 如果两者大小一致且目标对象的最后修改时间晚于数据源的最后修改时间则表明上传成功,否则上传失败。
完成桶创建、对象上传下载以及更多桶和对象的进阶操作。 API文档 API 概览 Header中携带签名 URL中携带签名 基于浏览器上传的表单中携带签名 PUT上传对象 POST上传对象 07 工具 对象存储服务提供客户端、命令行等多种工具,满足您不同场景下的数据存储诉求。 OBS
请求消息参数 表1 请求消息参数 名称 是否必选 参数类型 说明 约束 graph_name 是 String 工作流名称。 名称必须以字母或数字开头,只能由字母、数字、下划线和中划线组成,长度小于等于64个字符。 请求消息头 该请求使用公共消息头,具体参见表3。 请求消息元素 表2 请求参数元素
SDK是否支持批量上传、下载或复制对象?(Java SDK) 不支持。 目前SDK暂未提供此类接口,您需要自己封装批量上传、下载或复制对象的业务代码。步骤如下: 列举出所有待上传、下载或者复制的对象。可参考列举对象章节,列举待下载的对象。 对列举出的对象调用单个对象的上传(上传对
SDK是否支持批量上传、下载或复制对象? 不支持。 目前SDK暂未提供此类接口,您需要自己封装批量上传、下载或复制对象的业务代码。步骤如下: 调用listObjects列举所有待上传、下载或复制的对象,具体代码示例请参见列举对象。 对列举出的对象调用单个对象的上传(上传对象)、下载(下载对象)或复制(复制对象)接口。
请求消息参数 该请求消息中不带消息参数。 请求消息头 该请求使用公共消息头,具体参见表3。 如果想要获取CORS配置信息,则需要使用的消息头如下表1所示。 表1 获取CORS配置的请求消息头 消息头名称 消息头类型 是否必选 描述 Origin String 是 参数解释: 预请求指定的跨域请求Origin(通常为域名)。
并段请求体Body体内容是否合理,以及Etag值的一致性。 排查请求段列表中是否包含了不存在的段信息,例如:对象A分为a、b、c三个段上传,但是段列表中,多出了一个不存在的段d。此时您需要删除多余段的相关信息,此场景符合原因1。 排查过程中段ETag值是否和服务端返回的ETag值
资源包是否支持退订或修改? 资源包不支持退订或修改。当前资源包按区域、存储类别等划分,为了能够使用资源包进行费用抵扣,请您确保桶所在的区域及类别与资源包对应,否则将产生按需计费。 由于桶创建完成后不支持修改数据冗余策略(单/多AZ),因此请您在购买和创建桶时根据业务需要严格匹配。
产品优势 OBS与自建存储服务器对比 在信息时代,企业数据直线增长,自建存储服务器存在诸多劣势,已无法满足企业日益强烈的存储需求。表1向您详细展示了OBS与自建存储服务器的优劣势对比。 表1 OBS与自建存储服务器对比 对比项 OBS 自建存储服务器 数据存储量 提供海量的存储服
的数字代码,状态码表示了请求响应的状态。 完整的状态码列表请参见状态码。 默认取值: 无 responseHeaders Map<String, Object> 参数解释: 响应消息头列表,由多个元组构成。元组中String代表响应消息头的名称,Object代表响应消息头的值。 默认取值:
本”,则可根据如下步骤手动更新OBS Browser。 登录OBS Browser。 在右上方区域单击,选择“检查更新”。 根据界面提示进行版本更新。 更新后的OBS Browser,单击右上角的,选择“检查更新”,出现“已经是最新版本”的提示,说明更新成功。 父主题: 相关操作
调函数依次包含异常信息和SDK公共结果对象两个参数。如果回调函数中异常信息参数不为空,则表明接口调用异常;反之,则表明接口调用完成,此时应从SDK公共结果对象中获取HTTP状态码,判断操作是否成功。代码示例如下: // 引入obs库 // 使用npm安装 const ObsClient