检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
下载datax源码,以发布版本datax_v202308为例:下载地址。 修改编译datax。 升级hdfsreader和hdfswriter模块依赖的hadoop版本,以升级到2.8.3版本为例。 修改datax\hdfswriter\pom.xml和datax\hdfsreader\pom
为资源包进行手动续费,以延长资源包的使用时间。 更多手动续费详情请参见手动续费。 前提条件 只有通过实名认证的客户,才可以执行续费操作。 已购买至少一个OBS资源包。购买方法请参见资源包购买。 账户余额充足。 在OBS控制台续费 登录管理控制台。 单击左侧导航栏的图标,选择“存储
txt 基于以上桶内对象和本地文件夹的格式,不同场景下同步下载的示例如下: 同步bucket-test的src1文件夹中的所有文件和文件夹至本地已存在的src1文件夹中,同步命令如下: ./obsutil sync obs://bucket-test/src1 /src1 同步下载成
last_modify_time 否 String 最近修改时间。 function_template 是 String 函数的URN。 inputs 否 Array of Input 可修改参数定义列表。 dynamic_source_definition 是 Map 可修改参数引用。 need_policy
SDK) 列举并行文件系统(Harmony SDK) 列举并行文件系统内对象(Harmony SDK) 重命名对象(Harmony SDK) 修改写对象(Harmony SDK) 截断对象(Harmony SDK)
SDK向OBS发起请求,您需要初始化一个ObsClient实例,并根据需要修改ObsConfig的默认配置项。 直接使用服务地址创建OBS客户端(ObsClient),所有配置均为默认值,且后续不支持修改。 永久访问密钥(accessKey/secretKey)创建OBS客户端的代码如下
SDK向OBS发起请求,您需要初始化一个ObsClient实例,并根据需要修改ObsConfiguration的默认配置项。 直接使用服务地址创建OBS客户端(ObsClient),所有配置均为默认值,且后续不支持修改。示例代码如下: 永久访问密钥(AK/SK)创建OBS客户端的代码如下:
If-Modified-Since 如果对象在指定的时间后有修改,则返回对象内容,否则返回错误。 GetObjectRequest.setIfModifiedSince If-Unmodified-Since 如果对象在指定的时间后没有修改,则返回对象内容,否则返回错误。 GetObjectRequest
IfModifiedSince 如果对象在指定的时间后有修改,则返回对象内容,否则返回错误。 符合http://www.ietf.org/rfc/rfc2616.txt规定格式的HTTP时间字符串。 IfUnmodifiedSince 如果对象在指定的时间后没有修改,则返回对象内容,否则返回错误。 符合http://www
If-Modified-Since 如果对象在指定的时间后有修改,则返回对象内容,否则返回错误。 GetObjectRequest.IfModifiedSince If-Unmodified-Since 如果对象在指定的时间后没有修改,则返回对象内容,否则返回错误。 GetObjectRequest
创建的对象为Appendable对象,通过PutObject创建的对象是Normal对象。 全部 × √ 自定义元数据 您可以添加、修改或删除桶中已上传对象的元数据。 全部 √ √ 桶配额 您可以设置桶空间配额,用以限制单个桶可存储的最大数据量,最大可设置为263-1,单位Byte(字节)。新创建的桶默认不限制配额。
无 expires int 可选 参数解释: 表示对象的过期时间(从对象最后修改时间开始计算),过期之后对象会被自动删除。 约束限制: 此字段对于每个对象仅支持上传时配置,不支持后期通过修改元数据接口修改。 取值范围: 大于等于0的整型数,单位:天。 默认取值: 无 表3 HeadPermission
无 expires int 可选 参数解释: 表示对象的过期时间(从对象最后修改时间开始计算),过期之后对象会被自动删除。 约束限制: 此字段对于每个对象仅支持上传时配置,不支持后期通过修改元数据接口修改。 取值范围: 大于等于0的整型数,单位:天。 默认取值: 无 extensionGrants
expires int 可选 参数解释: 表示对象的过期时间(从对象最后修改时间开始计算)。过期之后对象会被自动删除。 约束限制: 此字段对于每个对象支持上传时配置,也支持后期通过修改元数据接口附带头域x-obs-expires修改。 取值范围: 大于0的整型数,单位:天。 默认取值: 无 progressListener
由于对象存储在存档设备中,您必须先使用对象恢复,然后才能下载该归档存储或深度归档存储对象。对象处于不同的恢复状态时,给出不同响应:如果对象已恢复,下载对象成功时需要返回x-obs-restore头域指示恢复失效时间。对未恢复或正在恢复的归档存储或深度归档存储对象发送下载请求时,会返回错误403
并行文件系统约束限制 操作限制 不支持将已有的OBS桶修改为并行文件系统,创建并行文件系统方法请参见创建并行文件系统。 不支持控制台设置并行文件系统的自定义域名,API设置方法参见设置自定义域名。 功能限制 暂不支持通过图片处理特性对存放在并行文件系统中的图片进行瘦身、缩放、添加水印等操作。
AllUsers 所有用户。 AUTHENTICATED_USERS AuthenticatedUsers 授权用户,已废弃。 LOG_DELIVERY LogDelivery 日志投递组,已废弃。 表9 PermissionType 常量名 原始值 说明 READ READ 如果有桶的读权限,
AllUsers 所有用户。 AUTHENTICATED_USERS AuthenticatedUsers 授权用户,已废弃。 LOG_DELIVERY LogDelivery 日志投递组,已废弃。 表8 PermissionType 常量名 原始值 说明 READ READ 如果有桶的读权限,
SDK对应方法 ifModifiedSince 如果对象在指定的时间后有修改,则返回对象内容,否则返回错误。 request.ifModifiedSince ifUnmodifiedSince 如果对象在指定的时间后没有修改,则返回对象内容,否则返回错误。 request.ifUnmodifiedSince
自动将某些不再频繁访问的对象转换归档存储或者是低频访问存储,可以减少您的租赁费用。此处的“转换”表示在不复制原对象的情况下修改对象的存储类别。您可以在对象页面手动修改对象的存储类别,详情请参见上传对象的相关操作,也可以通过配置生命周期规则转换对象的存储类别。 生命周期管理规则通常包含两个关键要素: