检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
同一用户多次创建同名桶不会报错，创建的桶属性以第一次请求为准。 更多创建桶的信息，请参见创建桶。 创建桶时，如果使用的终端节点归属于默认区域华北-北京一（cn-north-1），则可以不指定区域；如果使用的终端节点归属于其他区域，则必须指定区域，且指定的区域必须与终端节点归属的区域一致。当前有效的区域名称可从这里查询。
大数据场景下使用OBS实现存算分离方案概述 应用场景 随着大数据技术的飞速发展，对数据价值的认识逐渐加深，大数据已经融入到了各行各业。根据相关调查报告数据显示，超过39.6%的企业正在应用大数据并从中获益；超过89.6%的企业已经成立或计划成立相关的大数据分析部门；超过六成的企业在扩
Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS等各种异构数据源之间高效的数据同步功能。OBS在大数据场景中可以替代Hadoop系统中的HDFS服务，本文介绍DataX如何对接OBS。 对接步骤 下载datax源码，以发布版本datax_v202308为例：下载地址。
并行文件系统是否支持资源包？ 当前如下资源包同时支持并行文件系统及对象桶： 标准存储资源包：包括单AZ及多AZ 归档存储资源包 公网流出流量包 由于并行文件系统暂时不支持跨区域复制和回源功能，所以无法使用对应的跨区域复制流量包和回源流量包。 父主题： 计费相关
约束与限制 需要使用IAM增加Tenant Administrator权限后才能设置、获取、删除DIS通知策略。使用DIS消息通知需要使用IAM创建对OBS云服务的委托，委托赋予的权限需为数据接入服务DIS的DIS User权限。 一个桶中最多同时配置10条DIS通知规则。 新创建的DIS通知将在5分钟之内生效。
户端跨区域复制的相关配置信息，具体可参考更新配置文件。 复制时源桶对应的配置信息为配置文件中的：akCrr/skCrr/tokenCrr/endpointCrr，目标桶对应的配置信息为配置文件中的：ak/sk/token/endpoint； 对于同一账号下不同区域的桶，也可以按照
Turbo后，可直接在ModelArts的Notebook开发及训练环境中挂载SFS Turbo共享文件系统，并访问其中的数据。 登录ModelArts管理控制台，创建网络并打通创建资源中创建的创建虚拟私有云和子网，详细步骤参见ModelArts网络。 单击1中创建生成的资源池“网络”所在行的“更多”，选择“关联sfsturbo”。
Turbo文件系统的Checkpoint模型文件会自动以异步方式导出到关联的OBS桶中进行长期保存，无需手工导出，异步导出方式不会占用上层训练任务时间。 SFS Turbo的自动导出功能当前处于受限使用状态，请提交工单联系技术支持人员进行配置。 文件导出速度受OBS服务的写入带宽上限
使用临时安全凭证直传OBS 方案架构 使用的方式，可以将应用客户端的数据直传至OBS，或者将存储在OBS里的数据进行下载。具体流程如图1。 OBS支持使用临时安全凭证（临时AK/SK和securitytoken）进行授权访问，同时支持为临时安全凭证配置权限策略来指定使用该临时安全
本章节，不影响您使用OBS服务的其它功能。 本章节为您介绍对用户授权的方法，操作流程如图1所示。 前提条件 给用户组授权之前，请您了解用户组可以添加的OBS权限，并结合实际需求进行选择，OBS支持的系统权限，请参见：OBS系统权限。如果您需要对除OBS之外的其它服务授权，IAM支持服务的所有权限请参见系统权限。
通过obsutil命令行工具快速使用OBS obsutil是一款命令行工具，对于熟悉命令行的用户，obsutil能在执行批量处理、自动化任务的场景中为您带来更优体验。 本章节以Linux操作系统为例，以上传一个文件至“bucket-test”桶为例，帮助您快速通过obsutil使用OBS的基础功能，包
OBS针对不同场景提供了多种数据上云方案，您可根据数据量、耗时、费用等需求选择适合的方案上传数据至OBS，更多内容请参考数据上云方案。 将数据从OBS预热到SFS Turbo中 SFS Turbo HPC型文件系统绑定OBS桶后，可以使用数据预热功能，以减少后续训练首次访问数据耗时。 训练任务开始前
挂载并行文件系统失败 本文根据在挂载并行文件系统时遇到的不同现象，总结了常见挂载并行文件系统失败的可能原因及解决办法。 现象一：挂载并行文件系统时出现“The specified bucket does not exist”类似错误 问题定位： 待挂载并行文件系统不存在。 解决办法：
SDK) 本节介绍在完成SDK的下载和安装后，如何快速上手使用OBS的基础功能，完成创建桶、上传下载对象、列举对象和删除对象。 入门准备 使用SDK管理OBS资源，您需要先完成以下几项准备工作： 使用前须知(Java SDK)：了解并选择合适的SDK版本。 使用前准备(Java SDK)：完成服务环境和开发环境准备。
通过控制台快速使用OBS 控制台是网页形式的操作平台，提供更直观的界面操作，简单易上手。 本章节以上传对象至“test-example-bucket”桶为例，帮助您通过控制台快速使用OBS的基础功能，包括创建桶、上传对象、下载对象、分享对象。 准备工作 使用OBS之前，您需要拥有
将日志存放到不同的桶中。当日志存储桶为开启日志功能的桶本身时，OBS将为写入该存储桶的日志创建额外的日志，这将增加您的存储账单费用，且由于额外日志的存在，将使您在寻找需要的日志时更加困难。 桶日志上传会产生相应的PUT请求费用，PUT请求费用的具体说明请参考OBS计费说明。 当日
Request BadDigest 客户端指定的对象内容的MD5值与系统接收到的内容MD5值不一致。 检查头域中携带的MD5与消息体计算出来的MD5是否一致。 400 Bad Request BadDomainName 域名不合法。 使用合法的域名。 400 Bad Request BadRequest
删除桶的自定义域名(Go SDK) 功能介绍 调用删除桶的自定义域名接口，您可以删除指定桶的自定义域名信息。 接口约束 您必须是桶拥有者或拥有删除桶的自定义域名的权限，才能删除桶的自定义域名。建议使用IAM或桶策略进行授权，如果使用IAM则需授予obs:bucket:Delete
获取桶的自定义域名(Go SDK) 功能介绍 调用获取桶的自定义域名配置接口，您可以获取指定桶的自定义域名配置信息。 接口约束 您必须是桶拥有者或拥有获取桶的自定义域名配置的权限，才能获取桶的自定义域名配置。建议使用IAM或桶策略进行授权，如果使用IAM则需授予obs:bucke
使用备份软件实现本地数据备份至OBS 使用场景 传统的备份与恢复方案需要将备份数据写入磁带等存储设备，然后再运输至数据中心。在此过程中数据的安全及完整性依赖很多因素，比如硬件、人员等等。无论是从前期搭建数据中心还是后期的维护，都使得传统的备份与恢复方案面临着管理复杂、投入成本高的难题。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
