检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
华为云MRS对接OBS 对接步骤 配置存算分离集群。 详细操作，请参见使用委托方式配置存算分离集群。 使用存算分离集群。 详细操作，请参见使用存算分离集群。 父主题： 对接大数据平台
使用obsutil下载文件到99%后失败 出现该问题的主要原因： 网络波动导致下载失败。 磁盘IO卡顿导致缓存文件到目标文件夹失败。 解决方法： 重新执行下载命令。 obsutil在下载的时候默认开启断点续传，此时只要重新执行之前的下载命令就可以将之前下载失败的对象采用续传的方式重新下载到本地。
下载一个对象名较长的对象到本地后，对象名称改变 问题： 使用OBS管理控制台下载一个对象名较长的对象到本地后，为什么对象名称发生了改变？ 原因： Windows操作系统下允许的文件名长度最大为255字符，包括文件名和扩展名在内。 当对象名称长度超过255字符时，将该对象下载到本地
为什么通过自定义域名访问桶，提示NoSuchBucket，而通过OBS访问域名可以访问？ 您在配置OBS桶的自定义域名后没有完成CNAME解析。 配置OBS桶的自定义域名分为两步： 配置自定义域名：实现OBS桶域名和自定义域名绑定。 配置解析CNAME：实现OBS桶域名和自定义域名的映射。
使用OBS SDK上传超过5GB的大文件失败 OBS服务端上传对象接口有规格限制，单次可上传的最大文件为5GB，如果需要上传超过5GB的大文件，需要通过OBS服务端提供的分段上传接口实现。具体步骤为： 调用OBS服务端初始化上传段任务接口，生成分段上传ID（Upload ID）。
为什么我运行了百万级别的任务后，感觉任务执行较慢？ 这是因为： OBS Browser+中任务数量达到了百万级别及以上，系统会处于海量查找的状态中，对您机器的性能要求比较高。 建议您： 为了提升您的体验，建议清理历史任务数据。 清理方法是在任务管理窗口，选中已完成任务然后删除，如图1所示。
Windows操作系统下，下载对象时发现本地和云上对象数量不一致 如果发现下载后本地文件和文件夹数量之和小于云上对象数量（OBS不区分文件或文件夹，统称为对象），并且当前操作系统是Windows，这个是因为Windows文件系统将文件和目录名称视为不区分大小写，FOO.txt和foo
配置SFS Turbo数据淘汰策略 SFS Turbo HPC型文件系统绑定OBS后端之后，建议配置缓存数据淘汰功能。SFS Turbo会自动释放设定时间内没有访问过的文件数据内容，仅保留文件元数据，数据内容释放后不占用SFS Turbo文件系统上的存储空间，再次访问该文件时，将重新从OBS中加载文件数据内容。
obsutil cp命令如何开启增量上传、下载和复制？ 在执行obsutil cp命令进行上传/下载时，可以通过增加“-u”参数开启增量功能。 该参数的含义为：上传/下载/复制每个对象时都会对比源路径和目标路径，仅在目标对象不存在，或者对象大小不一致，或者目标对象的最后修改时间早
追加上传对象是否支持并发场景下的锁机制? OBS本身不支持，如果需要避免同一个对象被并行访问，需要在上层应用中增加对象的锁机制。 针对同一个对象或桶的操作，比如多个客户端对同一个对象并行上传、查询和删除时，具体操作结果依赖于操作到达系统的时间和系统内部处理的时延，可能返回不一致的
配置SFS Turbo和OBS联动 SFS Turbo HPC型文件系统支持无缝访问存储在对象存储OBS存储桶中的对象，您可以指定SFS Turbo内的文件目录与OBS对象存储桶进行关联。 登录SFS管理控制台，在左侧导航窗格中选择“SFS Turbo”。 在文件系统列表中，单击
在Linux环境中访问OBS报错：requires a valid Date or x-obs-date header(C SDK) 问题根因： Linux环境变量（env命令）中，LANG变量值为zh_CN.UTF-8，请求头Date会包含中文，例如“三，04 9月 2024 10:41:39
是否可以同时装两个不同站点的OBS Browser+工具？ 不可以。 一个系统中只允许安装一个版本的OBS Browser+工具。 不同局点提供的OBS Browser+工具可能支持的功能不一致。 因此，如果您想使用某一个局点的OBS请下载相应局点的OBS Browser+工具。
OBS Browser+支持迁移OBS Browser保存的账号信息和任务信息吗？ OBS Browser+ 只支持将OBS Browser保存的账号信息迁移过来，不支持迁移任务信息；同时，OBS Browser+只支持迁移一次，不支持增量迁移；因此，强烈推荐您后期一直使用OBS
为什么SDK源码中包含acs.amazonaws.com关键字？(Node.js SDK) OBS SDK 为了兼容访问aws s3服务，在源码中会包含acs.amazonaws.com关键字的固定格式，SDK仅作常量使用，不会向该格式有其他处理，也不会对其访问。SDK会自动兼容该场景，用户可不感知。比如Node
列举桶内对象返回的大小与控制台桶内对象大小不一致 通过obsutil列举桶内全量对象时最终输出结果中还会包含对象的总的大小，如果通过列举操作返回的对象大小与通过控制台、OBSBrowser+工具查询的桶使用情况不一致时可以从如下两点进行排查： OBSBrowser+和控制台均通过
设置桶日志后，进行图片处理，发现有100网段的ip访问桶 用户开启了桶日志配置，在对桶里的对象进行图片处理后，查看桶的访问日志，发现有100网段的ip访问了该桶。 原因是：在进行图片处理的过程中，OBS会通过内网访问客户的桶来下载原图并进行图片处理，此时内网ip会被记录到桶日志中，同时会产生下载次数的计费。
配置ModelArts和SFS Turbo间网络直通 创建委托授权ModelArts云服务使用SFS Turbo 使用IAM管理员账号登录IAM控制台。 在IAM控制台的左侧导航窗格中选择“权限管理 > 权限”，单击右上角的“创建自定义策略”，进入自定义策略配置页面。 输入“策略
配置SFS Turbo数据自动导出到OBS桶 配置自动导出后，训练过程中周期性写入SFS Turbo文件系统的Checkpoint模型文件会自动以异步方式导出到关联的OBS桶中进行长期保存，无需手工导出，异步导出方式不会占用上层训练任务时间。 SFS Turbo的自动导出功能当前
上传数据至OBS并预热到SFS Turbo中 上传数据至OBS 下载ImageNet21K数据集，并上传ImageNet21K数据集至OBS，详细操作指导请参考上传数据至OBS。 OBS针对不同场景提供了多种数据上云方案，您可根据数据量、耗时、费用等需求选择适合的方案上传数据至OBS，更多内容请参考数据上云方案。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
